Klienditoe vastusemustandid ja Andmefilter
Assistent otsib juhenditest infot ja koostab kliendikirjale vastusemustandi, mille inimene üle vaatab ja saadab. Sellest eraldatud Andmefilter aitab enne AI kasutamist tuvastatud isikuandmeid asendada, kuid ei leia neid kõiki.
Probleem ei olnud ainult vastuse kirjutamine
B2B-tarkvaraettevõtte klienditoes korduvad samad küsimused, aga vastuse jaoks tuleb ikkagi leida õige juhend, mõista seadme olukorda ning kirjutada kliendi keeles. Algmaterjal on kliendikiri: küsimuse kõrval on nimed, kontaktandmed, seadmetunnused ja pikk varasem kirjavahetus. Kõike seda pole vastuse koostamiseks vaja.
Ehitasin töövoo, kus andmete vähendamine ja peatamise tingimused tulevad enne vastuse genereerimist. AI aitab mustandiga, kuid kindlad reeglid otsustavad, mida eemaldada, millal peatuda ja kas viide vastab päris artiklile. Inimesele jäävad sisuline hinnang ja saatmine.
Mis sai valmis?
Kolmetasandiline nimistu eristab oma inimesi, partnereid ja kliente. Oma inimeste nimed võivad jääda; partnerite andmed asendatakse eraldi tähistega. Kõik ülejäänud tuvastatud inimesed lähevad kliendireegli alla. Lisandusid kohaliku dokumendikogu otsing, tulemuste järjestamine, tervikliku päringu koostamine ning viidete kontroll. Vastus jaguneb tugiinseneri ingliskeelseteks märkmeteks, kliendi keeles vastuseks ja lahtisteks küsimusteks.
Projekti käigus indekseeriti ligikaudu 1200 dokumenti ja nimistu hõlmas ligikaudu 1000 kaitstavat tunnust. Need kirjeldavad töö ulatust, mitte klientide arvu ega vastuste täpsust.
Kliendikirjast inimese kontrollitud mustandini
- 01Puhasta ja kontrolli
Allkiri ja varasem kirjavahetus eemaldatakse. Tuvastatud andmed asendatakse; esimene kontroll otsib jääke.
- 02Leia vastuse allikad
Kohalik otsing ja järjestamine jätavad kaheksa dokumenti. Ka leitud kontekst filtreeritakse.
- 03Kontrolli tervet päringut
Ülesanne, allikad ja kiri kontrollitakse koos. See on teine kontroll enne mudelit.
- 04Mudel teeb mustandi
Ainult kontrollid läbinud päring läheb välisele mudelile. Tegutsemise tööriistu pole.
- 05Kontrolli viiteid
Viiteid võrreldakse artiklite loendiga. Märkmed eraldatakse; nimed taastatakse vaid vastuses.
- 06Inimene parandab ja saadab
Tugiinsener hindab sisu ja lahtisi küsimusi. Automaatset saatmist ei ole.
Inimese otsus
Kolm viga, millest oli rohkem kasu kui rohelisest testireast
Päris tunnus oli ühe numbri võrra pikem
Seadmetunnuse muster ootas täpselt seitset numbrit, aga päris kirjas oli neid kaheksa. Läbitud testid ei katnud seda kuju. Õppetund: katsetada tuleb ka töötava süsteemi sisendeid, mitte ainult näiteid, mille jaoks reegel kirjutati.
Pooleldi peidetud aadress näis korras
IPv6-aadressi osaline asendamine jättis osa väärtusest nähtavale. Tähis teksti sees tekitas eksliku mulje, et töö on tehtud. Sellest sai kontrollitav nõue: tunnus peab asenduma tervikuna või jääma tervikuna alles, mitte muutuma poolikuks. Täielik märkamata jäämine on endiselt piirang, mitte sobiv lõpptulemus.
Õige artikkel, katkine link
Mudel võis kopeerida artikli tunnuse õigesti, kuid lühendada aadressi loetavat osa. Artiklite loendiga võrdlemine tõi vea nähtavale. Kontroll taastab tuvastatava katkise lingi; väljamõeldud allikat ei muudeta vaikselt usutavaks.
Mida tulemused tegelikult näitasid?
Projekti hindamiskogus leidus õige dokument kaheksa valitud tulemuse seas kõigil 21 juhul. Esimesel kohal oli see ligikaudu kahel juhul kolmest. See ei tähenda, et iga vastus oli õige: mõõdeti otsingut ja viiteid, mitte vastuse teksti sisulist täpsust. Hindamiskogu oli väike ega esinda kogu valdkonda.
Need on suurema assistendi projekti tulemused, mitte allalaaditava Andmefiltri mõõdikud.
Piirangud kuuluvad lahenduse juurde
Mustritel põhinev filter ei leia kõike. Inimese võib tuvastada ka ametikoha või olukorra kirjelduse järgi. Asenduste võti võimaldab algandmed taastada, seega pseudonüümitud tekst võib endiselt olla isikuandmed. Tööriist aitab andmeid vähendada, kuid ei anna anonüümsuse ega GDPR-ile vastavuse garantiid. Mudeli töötlemise asukohta ja teenuse tingimusi tuleb hinnata eraldi.
Sellest sündis väiksem Andmefilter
Kõik ei vaja tervet klienditoe assistenti. Mõnikord on vaja ainult kiri enne AI-vestlusse kleepimist üle vaadata. Seepärast eraldati filter omaette tööriistaks. OEJ versioonis lisandusid kõigi lisaväljade filtreerimine, valmis päringu lõppkontroll ja kaitse aegunud väljundi kasutamise vastu. See ei saada midagi mudelile ega kliendile.
Proovi kohalikku AndmefiltritKirjelda mulle oma töövoogu