Misija 6 · Pregled, ki temelji na dokazih
Ocenite tisto, kar podpira prepis, ne tisto, kar si model predstavlja.
Izdelajte omejen pregled s pomočjo umetne inteligence s citiranimi dokazi prepisa, eksplicitno negotovostjo, dejanskim povzetkom, priporočenimi ukrepi in potjo, ki jo preglasi človek.
Pregled AI je priporočljiv. Ne nadomešča človeškega zagotavljanja kakovosti in ne sme sprejemati zelo pomembnih odločitev glede zaposlitve, kredita, pravnih, zdravstvenih ali podobnih odločitev.
Zaporedje gradnje
- Določite vsako merilo rubrike, omejeno oceno, zahtevane dokaze o prepisu, sklepanje, zaupanje in vedenje ob manjkajočih dokazih.
- Ločite dejanski povzetek od ocenjevalne ocene in prepovejte izmišljene zaveze, dejstva o strankah ali rezultate.
- Različica rubrike, poziva in modelne poti, uporabljene za vsak rezultat.
- Zaženite fiksne regresije normalizacije rezultatov pod, na in nad vsako podprto mejo razpona.
- Zaženite en nasprotni prepis in en primer kalibracije, ki ga je pregledal človek.
- Zapišite rezultat, utemeljitev, povzetek in naslednja dejanja nazaj k pravilnemu elementu CRM in preverite read-back.
Zahtevano dokazilo
- Različica rubrike, strukturiran rezultat JSON in natančni rezultati mejne regresije.
- Citati prepisov ali izrecni rezultat nezadostnih dokazov za vsako merilo.
- Nasprotni rezultat, primerjava kalibracije, človeška preglasitev in CRM read-back.
Referenčne datoteke in viri
- Primer sintetičnega prepisa
- Primer sintetičnega rezultata
- Rubrika za uspešno, popravljeno in težko neuspešno
Uradna dokumentacija prodajalca
Vrata za ocenjevanje
Pass
Uspešno: vsaka ocena je pregledljiva, povezana z dokazi, omejena, verzirana, mejno preizkušena in reverzibilna s strani človeškega pregledovalca.
Revidirati
Popravi: uporaben rezultat obstaja, vendar so citati, negotovost, meje rezultatov, kalibracija ali človeška preglasitev nepopolni.
Težko neuspeh
Težka napaka: pojavijo se izmišljeni dokazi, nepodprto točkovanje, skrita negotovost ali avtonomne odločitve z velikim vplivom.
Človeško pregledana predložitev
