6. ülesanne · Tõenditel põhinev ülevaade
Hinda seda, mida ärakiri toetab, mitte seda, mida mudel ette kujutab.
Koostage piiratud tehisintellekti abiga ülevaade koos tsiteeritud transkriptsioonitõendite, selgesõnalise ebakindluse, faktilise kokkuvõtte, soovitatavate toimingute ja inimese poolt juhitava teega.
AI ülevaade on soovituslik. See ei asenda inimeste kvaliteedi tagamist ega tohi teha suure mõjuga töö-, krediidi-, juriidilisi, meditsiinilisi ega sarnaseid otsuseid.
Ehitamise jada
- Määratlege iga rubriigi kriteerium, piiratud punktisumma, nõutavad ärakirja tõendid, arutluskäik, enesekindlus ja puuduvate tõenditega käitumine.
- Eraldage faktiline kokkuvõte hindavast hindest ja keelake väljamõeldud kohustused, klientide faktid või tulemused.
- Versioonige iga tulemuse jaoks kasutatud rubriik, viip ja mudelmarsruut.
- Käivitage fikseeritud skoori normaliseerimise regressioone iga toetatud vahemiku piiri all, kohal ja kohal.
- Käivitage üks võistlev ärakiri ja üks inimese poolt läbi vaadatud kalibreerimisnäide.
- Kirjutage tulemus, põhjendus, kokkuvõte ja järgmised toimingud õigesse CRM-üksusesse ja kontrollige read-back.
Nõutav tõend
- Rubriigi versioon, struktureeritud skoor JSON ja täpsed piiriregressiooni tulemused.
- Iga kriteeriumi tsitaadid või selgesõnaline ebapiisavate tõendite tulemus.
- Võistlustulemus, kalibreerimise võrdlus, inimese alistamine ja CRM read-back.
Viitefailid ja allikad
- Sünteetilise ärakirja näide
- Sünteetilise skoori näide
- Rubriigi läbimine, ülevaatamine ja raske ebaõnnestumine
Müüja ametlik dokumentatsioon
Hindamisvärav
Läbida
Läbitud: iga skoor on kontrollitav, tõenditega seotud, piiratud, versioonidega, piiridega testitud ja inimesest ülevaataja poolt pööratav.
Revideerida
Läbivaatamine: kasulik väljund on olemas, kuid tsitaadid, määramatus, punktide piirid, kalibreerimine või inimese poolt ülekirjutamine on puudulikud.
Raske ebaõnnestumine
Raske ebaõnnestumine: ilmuvad väljamõeldud tõendid, toetamata hinded, varjatud ebakindlus või autonoomsed suure mõjuga otsused.
Inimeste poolt läbi vaadatud esitus
