zisky:
- Navrhuje bezpečný tok odpovědí, který klasifikuje otázky občanů, vytváří návrhy odpovědí a v případě potřeby je deleguje na lidi.
- Měří kvalitu chatbota na bázi tématu po tématu pomocí ukazatelů pokrytí, přesnosti, obratu a míry řešení a nachází slepá místa.
- Určuje, které otázky občanů mohou být zodpovězeny automaticky a které musí být ponechány lidské autoritě.
Místem, kde veřejná služba přichází do největšího kontaktu s občanem, je obslužný pult: telefon, pokladna, e-mail, call centrum, webové stránky instituce a sociální média. Občan se ptá "Jak zaplatím daň z nemovitosti?", "Kde získám potvrzení o pobytu?", "Jaké doklady jsou k tomuto dokladu potřeba?" ptá se. Mnohé z těchto otázek se opakují; Odpovědi jsou zřejmé; ale objem je vysoký a omezený na pracovní dobu. Chatbot (softwarový asistent, který vytváří automatické odpovědi na písemné nebo hlasové otázky) a systémy odpovědí podporované umělou inteligencí splňují tuto opakovanou zátěž a nasměrují důstojníka k úkolům, které vyžadují skutečné odborné znalosti. V této jednotce se naučíte, jak používat AI ve službách pro občany od začátku do konce – od klasifikace otázek po generování odpovědí, vícejazyčnost, dostupnost a nejdůležitější aspekt, který zabraňuje dezinformacím.
Proč je občanská otázka obtížná?
Občanská otázka je obtížná ve třech ohledech. Za prvé, správnost: nesprávný seznam dokumentů přivádí občana do instituce marně; Nesprávné období bude mít za následek ztrátu práv. Za druhé, rovnost: dvěma lidem, kteří kladou stejnou otázku, nelze dát různé odpovědi; Navíc by mu měl rozumět každý, bez ohledu na úroveň vzdělání, jazyk nebo handicap. Zatřetí, soukromí: občané si při kladení otázek často zapisují své osobní údaje („moje TR ID je toto, jak je moje žádost?“) a tyto údaje musí být chráněny.
Klíčem k umístění AI v rámci těchto tří omezení je toto: AI je rozhraní, které občanům zprostředkovává předem schválené přesné informace ve vhodném jazyce; Nevytváří legislativu sama o sobě. Způsob, jak toho dosáhnout, je připojit chatbota ke schválené znalostní bázi organizace (časté dotazy, regulační souhrny, servisní příručky) – nazývá se to RAG (generování rozšířené o získávání dat), kdy AI stáhne příslušný kus z důvěryhodného úložiště dokumentů a před vytvořením odpovědi odpovídá výhradně na jeho základě.
Tip: V odpovědi chatbota vždy uveďte zdroj: „Tyto informace jsou založeny na [služebním průvodci / čísle oběžníku], [oficiální stránce] pro aktuální stav.“ Odpověď bez zdroje je jednak neověřitelná a jednak snižuje důvěru občanů.
Krok za krokem: nastavení toku odezvy občanů
- Určete rozsah. Na které otázky chatbot odpoví (daň, řízení o registraci, licence) a na které řekne „Nasměruji vás na příslušnou jednotku“? Je lepší ji delegovat na lidi, než vymýšlet odpověď na otázku, která je mimo rozsah.
- Připravte si schválenou znalostní bázi. Každá odpověď musí být založena na datovaném a zdrojovém textu, který je řízen institucí. Odpovědná osoba by měla sledovat aktualizace.
- Zapište si tónová a jazyková pravidla. Zdvořilý, jednoduchý, nepoužívá žargon, krátké věty. Formální, ale ne chladný jazyk.
- Nastavte pravidlo pro osobní údaje. Chatbot by měl poskytovat personalizované informace, jako je stav transakce, pouze po bezpečné autentizaci; by neměl vyžadovat osobní údaje při poskytování obecných informací.
- Definujte body eskalace. Stížnosti, námitky, otázky s právními důsledky nebo nejasné otázky by měly být sděleny lidem.
- Sledovat a zlepšovat. Nesprávně zodpovězené otázky by měly být kontrolovány každý týden a aktualizována znalostní báze.
tři mini pouzdra
Případ 1 — Zátěž klesla, důstojník se obrátil na expertizu. Call centrum metropolitní samosprávy přijalo ~48 000 hovorů za měsíc; z toho 61 % bylo asi pět opakujících se témat. Chatbot založený na RAG se ujal těchto pěti témat; pracovníci call centra byli rozděleni na složité stížnosti a odvolání; Průměrná čekací doba se snížila ze 7 minut na 2 minuty.
Případ 2 – Past na dezinformace. Pilot chatbota bez zdrojů opakoval starou částku, která říkala „poplatek za pas je letos 1 200 TL“; zatímco malta byla aktualizována. Na 3 dny přicházeli občané se špatnou částkou. Poučení: chatbot by se měl spoléhat pouze na datovanou, aktuální a zdrojovou znalostní bázi; by neměly být ponechány volné výrobě.
Případ 3 – Získání přístupnosti. Organizace zjednodušila reakce chatbotů na jazykové úrovni B1 (základní až středně pokročilí) a učinila je vhodnými pro čtečky obrazovky pro zrakově postižené. Podíl občanů přicházejících k pokladně z důvodu nerozumění průvodci se snížil o 28 %; U stížností klesla zpětná vazba s tématem „Nerozumím“ na jednu třetinu.
Čtyři kopírovatelné šablony
1) Generování odpovědi závislé na zdroji:
Vaše role: zdvořilý a prostý konzultant veřejné služby. Odpověď pouze na základě textu CERTIFIKOVANÝCH INFORMACÍ, který jsem uvedl níže. Pokud se vás zeptá něco, co není v textu, řekněte „Přesměruji vás na [jednotka], kde získáte přesné informace o tomto tématu“ a odpověď nevytvářejte. Na konec odpovědi přidejte zdroj. SCHVÁLENÉ INFORMACE: [vložit text] OTÁZKA: [dotaz občana]
2) Jazykové zjednodušení:
Přeložte níže uvedený oficiální text do jednoduché turečtiny, kterému absolvent střední školy snadno porozumí. Vysvětlete žargon, zkraťte věty, vytvořte seznam krok za krokem. Význam a právní obsah by se neměl měnit. Označte nejasnou oblast jako „potřebuje objasnění“. TEXT: [vložit oficiální text]
3) Vícejazyčná odpověď (s poznámkami k ověření):
Přeložte následující schválenou tureckou odpověď do [cílového jazyka]. Správně rozpoznávejte oficiální termíny; Termín, kterým si nejste jisti, nechte v závorce s jeho tureckou verzí. Přidejte poznámku, že překlad by měl zkontrolovat odborník. ODPOVĚĎ: [text]
4) Klasifikátor eskalace:
Klasifikujte následující sdělení občana: (A) obecný dotaz -> vhodná automatická odpověď, (B) stav personalizované transakce -> vyžadováno ověření, (C) stížnost/odvolání/právní výsledek -> předání člověku. Zdůvodněte pouze jedním písmenem a jednou větou. Pokud si nejste jisti, nejbezpečnější možnost (C). ZPRÁVA: [text]
Slabá výzva / Silná výzva
Slabé: "Informovat občany o dani z nemovitosti."
Strong: "Vaše role je zdvořilý veřejný poradce. Odpovídejte POUZE na základě schváleného textu níže uvedených informací; doplňte, co v textu není, v případě potřeby se obraťte na příslušné oddělení. Odpověď napište jednoduše, stručně a krok za krokem. Nežádejte o osobní údaje. Na konci přidejte zdroj a poznámku 'aktuální částku zkontrolujte na oficiální stránce'. Schválené informace: [dotaz]." Otázka: [dotaz]."
Rozdíl: silná pohotovost omezuje reakci na schválený zdroj, zabraňuje výrobě, definuje tón a důvěrnost; Výsledkem je kvalita, kterou lze ukázat přímo občanům.
Automatická odpověď nebo předání člověku?
Stav
správným způsobem
Proč?
Seznam dokumentů, pracovní doba, obecný proces
Automatická odezva (RAG)
Informace jsou pevné a schválené
"Jak si vede moje aplikace?"
Autentizace + systémový dotaz
osobní údaje
Stížnost, námitka, stížnost
předání člověku
Vyžaduje se uznání a empatie
Otázka s právními důsledky
předání člověku
Zodpovědnost a zdůvodnění
Mimo rozsah/nejisté
předání člověku
Vyhýbání se riziku výroby
Měření kvality chatbota: čísla, ne intuice
Občanský chatbot není řízen tím, že říká „zdá se, že funguje dobře“; se měří. Sledujte výkon chatbota ve veřejné službě pomocí čtyř ukazatelů. Míra pokrytí (procento otázky, na kterou chatbot správně odpověděl, aniž by ji předal člověku); míra přesnosti (soulad uvedených odpovědí s legislativou a současnou praxí, s ruční kontrolou vzorku); míra fluktuace (otázky přenesené na člověka – pokud je příliš nízká, chatbot si může být jistý ohledně nesprávných témat); míra spokojenosti/řešení (řešení problému občana při prvním kontaktu). Sledováním těchto indikátorů na týdenním panelu je vidět, kde chatbot vytváří halucinace a která témata je třeba delegovat na člověka.
Mini pouzdro — zachyceno slepé místo. Chatbot provinčního ředitelství poskytl dobrou celkovou míru pokrytí 78 procent; Avšak v podtitulu „práva zdravotně postižených občanů“ byla míra přesnosti pouze 41 procent, protože model vytvořil odpověď založenou na neaktualizovaném nařízení. Bez předmětového měření by toto slepé místo zůstalo skryto v průměru. Tým dočasně uzavřel toto vlákno podle pravidla „vždy delegovat na člověka“ a znovu ho otevřel po aktualizaci obsahu.
Týdenní šablona pro kontrolu kvality odpovědi podle vzorku:
Úkol: Níže je 20 odpovědí a občanských otázek, které chatbot dal minulý týden. Vyhodnoťte každou odpověď: 1) Je v souladu s legislativou? (Ano/Ne/Pochybné — uveďte položku/zdroj)2) Chybí nějaké nebo zavádějící informace?3) Měly být delegovány na člověka?Výstup: Tabulka (číslo otázky | vhodnost | poznámka k riziku | doporučení).Seznam těch, jejichž vhodnost je sporná, nahoru.Poznámka: Toto je návrh auditu; Konečné rozhodnutí náleží inspekčnímu úředníkovi.
Tip: Schopnost chatbota říct „nevím, převádím vás na úředníka“ není slabinou, ale zárukou kvality. Na veřejnosti je sebevědomá špatná odpověď mnohem dražší než čestné převzetí.
Časté chyby
- Uvolnění chatbota do bezplatné produkce. Robot, který není připojen ke schválené znalostní bázi, bude poskytovat zastaralé nebo smyšlené informace.
- Bez uvedení zdrojů. Občané nemohou ověřovat, státní zaměstnanci nemohou kontrolovat; Chyba se tiše šíří.
- Zpracování osobních údajů bez autentizace. Odpověď na otázku "Jaký je stav mé žádosti?" bez bezpečného ověření je riziko KVKK.
- Nedefinování bodů zvratu. Přenechání stížností a námitek robotovi zvýší viktimizaci.
- Nezjednodušování jazyka. Přesné informace, kterým nerozumí, jsou pro občana neplatné; dostupnost je nutností.
- Nevytváří zpětnovazební smyčku. Pokud nebudou nesprávně zodpovězené otázky sledovány a opraveny, bude se stejná chyba opakovat.
V souhrnu
Ve službách pro občany AI reaguje na opakující se otázky rychle, jednoduše a 24 hodin denně, 7 dní v týdnu a nasměruje úředníka na úkoly, které vyžadují skutečné odborné znalosti. Tajemství spočívá ve třech věcech: propojení odpovědí se schválenou znalostní bází (RAG), přidání zdrojů ke každé odpovědi a delegování otázek stížností/námitek/osobních akcí na lidi. Správně navržený chatbot snižuje zátěž; Nezdrojovaný a nekontrolovaný bot rychle šíří nepravdivé informace.
Aplikační úkol
Zapište si 5 nejčastějších dotazů občanů ve vaší jednotce a jejich schválené odpovědi. Vygenerujte odpovědi chatbota na těchto pět otázek pomocí šablony „generování odpovědí na základě zdrojů“. Poté pomocí šablony "Delegation classifier" označte, které otázky by měly být delegovány na člověka. Zjednodušte alespoň jednu odpověď na úroveň B1.
kontrolní seznam
- [ ] Chatbot závisí pouze na schválené, datované a zdrojové znalostní bázi.
- [ ] Každá odpověď uvádí zdroj.
- [ ] Osobní údaje nejsou zpracovávány bez zabezpečeného ověření.
- [ ] Definováno převedení na člověka pro stížnost/námitku/právní otázku.
- [ ] Jazyk je jednoduchý a přístupný (je zohledněno postižení a jazyková rozmanitost).
- [ ] V případě nesprávných odpovědí existuje týdenní cyklus zpětné vazby a aktualizace.