Tehtävä 6 · Todisteisiin perustuva tarkastelu
Arvioi sitä, mitä transkriptio tukee, älä sitä, mitä malli kuvittelee.
Luo rajattu tekoälyn avustama katsaus, jossa on siteerattu transkriptiotodistus, selkeä epävarmuus, tosiasiallinen yhteenveto, suositellut toimet ja ihmisen ohituspolku.
AI-arviointi on neuvoa-antava. Se ei korvaa ihmisten laadunvarmistusta, eikä se saa tehdä merkittäviä työ-, luotto-, laki-, lääketieteellisiä tai vastaavia päätöksiä.
Rakennussarja
- Määrittele kukin rubriikkikriteeri, rajattu pistemäärä, vaadittu todisteet, perustelut, luottamus ja puuttuvien todisteiden käyttäytyminen.
- Erota tosiasioiden yhteenveto arvioivista pisteistä ja kiellä keksityt sitoumukset, asiakasfakta tai lopputulos.
- Versoi jokaisessa tuloksessa käytetty rubriikki, kehote ja mallireitti.
- Suorita kiinteitä pisteiden normalisoinnin regressioita jokaisen tuetun alueen rajan alapuolella, kohdalla ja yläpuolella.
- Suorita yksi kontradiktorinen transkriptio ja yksi ihmisen arvioima kalibrointiesimerkki.
- Kirjoita pisteet, perustelut, yhteenveto ja seuraavat toimet takaisin oikeaan CRM-tuotteeseen ja tarkista read-back.
Vaadittu todiste
- Rubriikkiversio, strukturoitu pistemäärä JSON ja tarkat rajaregressiotulokset.
- Literaatit lainaukset tai selkeä riittämättömän todisteen tulos jokaiselle kriteerille.
- Vastakkainen tulos, kalibroinnin vertailu, ihmisen ohitus ja CRM read-back.
Viitetiedostot ja lähteet
- Synteettinen transkriptioesimerkki
- Esimerkki synteettisestä pistemäärästä
- Hyväksy, tarkista ja hylkää rubriikki
Virallinen toimittajan dokumentaatio
Arviointiportti
Syöttö
Hyväksytty: jokainen pistemäärä on tarkastettavissa, todisteisiin linkitetty, rajoitettu, versioitu, rajatestattu ja ihmisen arvioijan voi peruuttaa.
Tarkistaa
Korjaus: hyödyllinen tulos on olemassa, mutta lainaukset, epävarmuus, pistemäärät, kalibrointi tai ihmisen ohitus ovat puutteellisia.
Kova epäonnistuminen
Vaikea epäonnistuminen: esiin tulee väärennettyjä todisteita, tukematonta pisteytystä, piilotettua epävarmuutta tai itsenäisiä, vaikuttavia päätöksiä.
Ihmisten arvioima lähetys