Uglađen scenarij dobavljača dokazuje da uvježbano pitanje može proizvesti uvježban odgovor. Vaš demo treba testirati nešto teže: ponaša li se sustav sigurno kada razgovor napusti taj put. Donesite pitanja koja vaš tim stvarno prima, uključujući neugodno pitanje čiji se odgovor mijenja po sezoni i ono koje mora doći do osobe.
Koristite svoja pitanja, ne prezentaciju
Pitajte za činjenicu koja postoji u odobrenoj bazi znanja, a zatim isto pitajte jezikom i izrazima koje koriste vaši korisnici. Nakon toga namjerno postavite pitanje kojeg nema u bazi. Koristan agent treba odgovoriti iz odobrenog materijala, a zatim priznati kada materijal ne podupire potvrdu.
Pažljivo poslušajte odbijanje. Objašnjava li granicu bez okrivljavanja pozivatelja? Nudi li ispravnu sljedeću radnju: predaju tijekom radnog vremena ili zabilježen zahtjev kada nitko nije dostupan? Samouvjerenost na nepokrivenom pitanju nije uspješan demo.
Zatražite trag izvora
Nakon pokrivenog odgovora otvorite razgovor u konzoli za voditelja. Pitajte koji je unos znanja proizveo odgovor i gdje je ta veza zabilježena. Transkript s dnevnikom izvora omogućuje ponovnu provjeru odgovora. Zatim pregledajte nepokriveno pitanje: treba biti zabilježeno kao ishod bez izvora i, kada je primjenjivo, kao praznina u znanju.
Pitajte kako bi se poslije pregledao osporeni odgovor. Odgovor treba uključivati spremljen razgovor, zapis izvora i odobreno znanje, a ne nečije sjećanje na poziv.
Nazovite na granici rasporeda
Pitajte što pozivatelj čuje u 2 sata ujutro. Radno vrijeme treba biti postavljeno s vremenskom zonom, a ne izvedeno iz teksta pozdrava. Izvan tog vremena sustav može odgovoriti na pokrivena pitanja i zabilježiti kontaktne podatke, ali ne smije preusmjeravati u prazan ured ni obećati nezakazan povratni poziv.
Provjerite operativne kontrole
Pitajte što blokira objavu. Provjere spremnosti trebaju biti iste kao na putu stvarnog poziva, nakon čega slijedi pravi testni poziv koji procjenjuje vaš tim. Pitajte kako se provodi čuvanje, uključujući zakazano brisanje; koji podizvršitelji obrađuju razgovore; gdje svaki od njih obrađuje podatke; koje zaštite pokrivaju prijenose izvan EGP-a; te što primaju pružatelji AI usluga.
Na kraju zatražite stvarnu predaju, prazninu u znanju i mjesečni izvještaj iz kojeg je isključen testni promet. Ozbiljan demo ne treba skrivati granice. Treba učiniti jednako provjerljivima podržani odgovor, eskalaciju i nedostatak izvora. Tako odluku temeljite na ponašanju koje ste sami čuli i zapisima koje vaš tim može ponovno otvoriti.