Görev 6 · Kanıta dayalı inceleme
Modelin hayal ettiğini değil, metnin desteklediğini puanlayın.
Alıntı yapılan transkript kanıtları, açık belirsizlik, olgusal özet, önerilen eylemler ve insan tarafından geçersiz kılınan yol ile sınırlı bir yapay zeka destekli inceleme üretin.
Yapay zeka incelemesi tavsiye niteliğindedir. İnsan kalite güvencesinin yerini almaz ve yüksek etkili istihdam, kredi, hukuki, tıbbi veya benzeri kararlar almamalıdır.
Derleme sırası
- Her bir değerlendirme listesi kriterini, sınırlı puanı, gerekli transkript kanıtını, akıl yürütmeyi, güveni ve eksik kanıt davranışını tanımlayın.
- Gerçek özeti değerlendirme puanından ayırın ve uydurulmuş taahhütleri, müşteri gerçeklerini veya sonuçlarını yasaklayın.
- Her sonuç için kullanılan değerlendirme listesi, bilgi istemi ve model rotasını sürümlendirin.
- Desteklenen her aralık sınırının altında, sınırında ve üstünde sabit puan normalleştirme regresyonları çalıştırın.
- Bir çekişmeli transkripti ve insanlar tarafından incelenen bir kalibrasyon örneğini çalıştırın.
- Puanı, gerekçeyi, özeti ve sonraki eylemleri doğru CRM öğesine yazın ve read-back öğesini doğrulayın.
Gerekli kanıt
- Değerlendirme listesi sürümü, yapılandırılmış puan JSON ve kesin sınır regresyon sonuçları.
- Her kriter için transkript alıntıları veya açık bir yetersiz kanıt sonucu.
- Olumsuz sonuç, kalibrasyon karşılaştırması, insan tarafından geçersiz kılınması ve CRM read-back.
Referans dosyaları ve kaynaklar
- Sentetik transkript örneği
- Sentetik puan örneği
- Geçme, gözden geçirme ve kesin başarısız değerlendirme listesi
Resmi satıcı belgeleri
Değerlendirme kapısı
Geçmek
Başarılı: Her puan incelenebilir, kanıta bağlı, sınırlı, versiyonlu, sınır testinden geçirilmiş ve bir insan incelemeci tarafından geri döndürülebilir.
Tekrar düzeltme yapmak
Gözden Geçirme: Yararlı çıktılar mevcut ancak alıntılar, belirsizlik, puan sınırları, kalibrasyon veya insan tarafından geçersiz kılınması eksik.
Zor başarısızlık
Zor başarısızlık: uydurma deliller, desteklenmeyen puanlama, gizli belirsizlik veya otonom, yüksek etkili kararlar ortaya çıkar.
Gerçek kişiler tarafından incelenen gönderim