Eenheid 2 / 11

Citizen Services en Chatbot: 24/7 toegankelijke, nauwkeurige en eerlijke service

Winst:

  • Het ontwerpt een veilige antwoordstroom die vragen van burgers classificeert, conceptreacties produceert en deze indien nodig aan mensen delegeert.
  • Het meet de kwaliteit van chatbots per onderwerp, met indicatoren voor dekking, nauwkeurigheid, omloopsnelheid en oplossingspercentage, en vindt blinde vlekken.
  • Het bepaalt welke burgervragen automatisch kunnen worden beantwoord en welke aan het menselijk gezag moeten worden overgelaten.

Het punt waar de overheidsdienst het meeste contact heeft met de burger is de servicedesk: telefoon, kassa, e-mail, callcenter, website van de instelling en sociale media. Een burger vraagt: "Hoe betaal ik mijn onroerende voorheffing?", "Waar krijg ik een verblijfsvergunning?", "Welke documenten zijn vereist voor dit document?" vraagt ​​hij. Veel van deze vragen komen terug; De antwoorden liggen voor de hand; maar het volume is hoog en beperkt tot kantooruren. Chatbot (software-assistent die automatische antwoorden op schriftelijke of gesproken vragen produceert) en AI-ondersteunde antwoordsystemen komen tegemoet aan deze repetitieve last en leiden de officier naar taken die echte expertise vereisen. In dit onderdeel leer je hoe je AI end-to-end kunt gebruiken in burgerdiensten: van vraagclassificatie tot het genereren van antwoorden, meertaligheid, toegankelijkheid en het meest cruciale aspect: het voorkomen van desinformatie.

Waarom is de burgervraag lastig?

Het burgervraagstuk is in drie opzichten lastig. Ten eerste nauwkeurigheid: een onjuiste lijst met documenten brengt de burger tevergeefs naar de instelling; Een onjuiste termijn leidt tot verlies van rechten. Ten tweede, gelijkheid: twee mensen die dezelfde vraag stellen, kunnen geen verschillende antwoorden krijgen; Bovendien zou iedereen het moeten begrijpen, ongeacht opleidingsniveau, taal of handicap. Ten derde privacy: burgers noteren vaak hun persoonlijke gegevens bij het stellen van vragen (“mijn TR ID is dit, hoe gaat het met mijn aanvraag?”) en deze gegevens moeten beschermd worden.

De sleutel tot het positioneren van AI binnen deze drie beperkingen is de volgende: AI is een interface die vooraf goedgekeurde, nauwkeurige informatie in de juiste taal aan de burger overbrengt; Zij brengt op eigen kracht geen wetgeving voort. De manier om dit te bereiken is door de chatbot te verbinden met de goedgekeurde kennisbank van de organisatie (FAQ’s, samenvattingen van regelgeving, servicegidsen) – dit wordt RAG (Retrieval-Augmented Generation) genoemd, waarbij de AI het relevante stuk uit een vertrouwde documentopslagplaats haalt en uitsluitend op basis daarvan reageert voordat hij een antwoord geeft.

Tip: Vermeld altijd de bron in het antwoord van de chatbot: "Deze informatie is gebaseerd op [servicegids / rondnummer], [officiële pagina] voor de huidige status." Een antwoord zonder bronnen is niet te verifiëren en vermindert het vertrouwen van de burger.

Stap voor stap: het opzetten van een burgerreactiestroom

  1. Bepaal de reikwijdte. Op welke kwesties zal de chatbot reageren (belasting, burgerlijke stand, vergunning) en op welke kwestie zal hij zeggen: "Ik verwijs u naar de betreffende eenheid"? Het verdient de voorkeur dit aan mensen te delegeren, in plaats van een antwoord te verzinnen op een vraag die buiten de reikwijdte valt.
  2. Bereid de goedgekeurde kennisbank voor. Elk antwoord moet gebaseerd zijn op een gedateerde en door de instelling gecontroleerde tekst. Een verantwoordelijke persoon moet de updates bijhouden.
  3. Schrijf toon- en taalregels op. Beleefd, eenvoudig, gebruikt geen jargon, korte zinnen. Een formele maar niet koude taal.
  4. Stel de persoonlijke gegevensregel in. De chatbot mag pas na veilige authenticatie gepersonaliseerde informatie verstrekken, zoals de transactiestatus; mogen bij het verstrekken van algemene informatie geen persoonsgegevens vragen.
  5. Definieer escalatiepunten. Klachten, bezwaren, vragen met juridische gevolgen of onduidelijke vragen moeten aan mensen worden overgemaakt.
  6. Monitoren en verbeteren. Vragen die onjuist zijn beantwoord, moeten wekelijks worden beoordeeld en de kennisbank moet worden bijgewerkt.

drie minikoffers

Geval 1 — De last nam af, de officier wendde zich tot expertise. Het callcenter van een grootstedelijke gemeente ontving ~48.000 oproepen per maand; hiervan ging 61% over vijf terugkerende onderwerpen. De op RAG gebaseerde chatbot pakte deze vijf onderwerpen aan; callcenterpersoneel was verdeeld in complexe klachten en beroepen; De gemiddelde wachttijd daalde van 7 minuten naar 2 minuten.

Geval 2 – Valkuil van verkeerde informatie. Een chatbotpiloot zonder bron herhaalde een oud bedrag en zei: "De paspoortkosten bedragen dit jaar 1.200 TL"; terwijl de mortel was bijgewerkt. Drie dagen lang kwamen burgers met het verkeerde bedrag. Les: de chatbot mag alleen vertrouwen op een gedateerde, actuele en gefundeerde kennisbank; mogen niet aan de vrije productie worden overgelaten.

Geval 3 — Verbetering van de toegankelijkheid. Een organisatie vereenvoudigde chatbotreacties tot een B1-taalniveau (basis-intermediair) en maakte deze geschikt voor schermlezers voor visueel gehandicapten. Het percentage burgers dat naar de kassa kwam omdat ze de dienstengids niet begrepen, daalde met 28%; Bij klachten daalde de feedback met het thema ‘Ik begrijp het niet’ naar een derde.

Vier kopieerbare sjablonen

1) Bronafhankelijke responsgeneratie:

Jouw rol: een beleefde en openhartige overheidsadviseur. Antwoord alleen op basis van de GECERTIFICEERDE INFORMATIE-tekst die ik hieronder heb verstrekt. Als u iets wordt gevraagd dat niet in de tekst staat, zeg dan: "Ik verwijs u naar [eenheid] voor nauwkeurige informatie over dit onderwerp" en verzin het antwoord niet. Voeg de bron toe aan het einde van het antwoord. GOEDGEKEURDE INFORMATIE: [tekst plakken] VRAAG: [burgervraag]

2) Taalvereenvoudiging:

Vertaal de officiële tekst hieronder in gewoon Turks, zodat een afgestudeerde van de middelbare school deze gemakkelijk kan begrijpen. Leg jargon uit, verkort zinnen, maak een stap-voor-stap lijst. De betekenis en juridische inhoud mogen niet veranderen. Markeer het onduidelijke gebied als "verduidelijking nodig". TEKST: [officiële tekst plakken]

3) Meertalig antwoord (met verificatienotities):

Vertaal het volgende goedgekeurde Turkse antwoord naar [doeltaal]. Herken de officiële termen correct; Laat de term waarvan u niet zeker bent, tussen haakjes staan ​​in de Turkse versie. Voeg een opmerking toe dat de vertaling door een deskundige moet worden gecontroleerd. ANTWOORD: [tekst]

4) Escalatieclassificator:

Classificeer het volgende burgerbericht: (A) algemeen verzoek -> automatisch antwoord passend, (B) gepersonaliseerde transactiestatus -> authenticatie vereist, (C) klacht/beroep/juridische uitkomst -> overdracht aan mens. Geef slechts één letter en één zin verantwoording. Indien onzeker, veiligste optie (C). BERICHT: [tekst]

Zwakke prompt/sterke prompt

Zwak: "Informeer burgers over onroerendgoedbelasting."

Sterk: "Jouw rol is die van een beleefde publieke adviseur. Antwoord ALLEEN op basis van de goedgekeurde tekst of onderstaande informatie; verzin wat niet in de tekst staat, verwijs indien nodig naar de betreffende afdeling. Schrijf het antwoord eenvoudig, bondig en stap voor stap. Vraag niet om persoonlijke gegevens. Voeg de bron toe en een opmerking 'controleer de officiële pagina voor huidig ​​bedrag' aan het einde. Goedgekeurde informatie: [tekst]. Vraag: [vraag]."

Verschil: sterke prompt beperkt de reactie tot goedgekeurde bron, voorkomt verzinsels, definieert toon en vertrouwelijkheid; Het resultaat is van een kwaliteit die direct aan de burger getoond kan worden.

Automatisch antwoord of overdracht aan mens?

Status

juiste manier

Waarom

Documentenlijst, werktijden, algemeen proces

Automatische reactie (RAG)

Informatie is vastgelegd en goedgekeurd

“Hoe gaat het met mijn aanvraag?”

Authenticatie + systeemquery

persoonlijke gegevens

Klacht, bezwaar, klacht

overdracht aan de mens

Waardering en empathie vereist

Vraag met juridische gevolgen

overdracht aan de mens

Verantwoordelijkheid en rechtvaardiging

Buiten bereik/onzeker

overdracht aan de mens

Het vermijden van het risico van fabricage

Het meten van de kwaliteit van chatbots: cijfers, geen intuïtie

Een burgerchatbot wordt niet beheerd door te zeggen "het lijkt goed te werken"; wordt gemeten. Volg de prestaties van chatbots in de publieke sector met vier indicatoren. Dekkingspercentage (percentage van de vraag dat de chatbot correct heeft beantwoord zonder deze aan de mens door te geven); nauwkeurigheidsgraad (naleving van de gegeven antwoorden in overeenstemming met de wetgeving en de huidige praktijk, met handmatige steekproefcontrole); omloopsnelheid (vragen die worden overgedragen aan de mens – als deze te laag is, kan de chatbot vertrouwen hebben in de verkeerde onderwerpen); tevredenheids-/oplossingspercentage (het oplossen van het probleem van de burger bij het eerste contact). Door deze indicatoren op een wekelijks dashboard te volgen, wordt zichtbaar waar de chatbot hallucinaties produceert en welke onderwerpen aan de mens moeten worden gedelegeerd.

Minikoffer – dode hoek opgevangen. De chatbot van een provinciaal directoraat gaf een goed algemeen dekkingspercentage van 78 procent; Op de subkop ‘rechten van gehandicapte burgers’ was het nauwkeurigheidspercentage echter slechts 41 procent, omdat het model een antwoord opleverde op basis van een niet-bijgewerkte regelgeving. Zonder subjectieve meting zou deze blinde vlek binnen het gemiddelde verborgen blijven. Het team heeft deze thread vanwege de regel 'altijd delegeren aan mensen' tijdelijk gesloten en opnieuw geopend nadat de inhoud was bijgewerkt.

Een wekelijks sjabloon voor het controleren van de responskwaliteit per monster:

Taak: Hieronder staan 20 antwoorden en burgervragen die de chatbot vorige week gaf. Evalueer elk antwoord: 1) Is het in overeenstemming met de wetgeving? (Ja/Nee/Twijfelachtig - specificeer item/bron)2) Is er ontbrekende of misleidende informatie?3) Had deze informatie aan een mens moeten worden overgedragen? Output: Tabel (vraagnummer | geschiktheid | risiconota | aanbeveling). Noem bovenaan de informatie waarvan de geschiktheid twijfelachtig is. Opmerking: Dit is een conceptaudit; De uiteindelijke beslissing ligt bij de inspecteur.

Tip: Het vermogen van de chatbot om te zeggen: "Ik weet het niet, ik draag je over aan een ambtenaar" is geen zwakte, maar een kwaliteitsgarantie. In het openbaar is een zelfverzekerd fout antwoord veel duurder dan een eerlijke overname.

Veel voorkomende fouten

  • De chatbot vrijgeven voor gratis productie. Een bot die niet is verbonden met een goedgekeurde kennisbank zal verouderde of verzonnen informatie verstrekken.
  • Bronnen niet vermelden. Burgers kunnen niet verifiëren, ambtenaren kunnen niet inspecteren; De bug verspreidt zich geruisloos.
  • Verwerken van persoonsgegevens zonder authenticatie. Beantwoording van de vraag "Wat is de status van mijn aanvraag?" zonder veilige verificatie is een KVKK-risico.
  • Geen omslagpunten definiëren. Het overlaten van klachten en bezwaren aan de bot zal het slachtofferschap vergroten.
  • Niet het vereenvoudigen van de taal. Nauwkeurige informatie die niet wordt begrepen, is voor de burger nietig; bereikbaarheid is een must.
  • Geen feedbacklus tot stand brengen. Als onjuist beantwoorde vragen niet worden gecontroleerd en gecorrigeerd, wordt dezelfde fout herhaald.

Samengevat

In de burgerdiensten reageert AI snel, eenvoudig en 24/7 op repetitieve vragen, waardoor de officier naar banen wordt geleid die echte expertise vereisen. Het geheim zit in drie dingen: het koppelen van antwoorden aan de goedgekeurde kennisbank (RAG), het toevoegen van bronnen aan elk antwoord en het delegeren van klachten/bezwaren/vragen over persoonlijke actie aan mensen. Een goed ontworpen chatbot vermindert de belasting; Een ongecontroleerde en ongecontroleerde bot verspreidt snel valse informatie.

Applicatie taak

Noteer de vijf meest gestelde vragen van burgers in uw eenheid en de goedgekeurde antwoorden. Genereer chatbotantwoorden voor deze vijf vragen met behulp van de sjabloon ‘Op bronnen gebaseerde antwoorden genereren’. Markeer vervolgens met de sjabloon 'Delegatieclassificator' welke vragen aan de mens moeten worden gedelegeerd. Vereenvoudig ten minste één antwoord tot niveau B1.

controlelijst

  • [ ] Chatbot is alleen afhankelijk van een goedgekeurde, gedateerde kennisbank.
  • [ ] Bij elk antwoord wordt de bron vermeld.
  • [ ] Persoonlijke gegevens worden niet verwerkt zonder veilige authenticatie.
  • [ ] Doorverbinden naar mens voor klacht/bezwaar/juridische vraag gedefinieerd.
  • [ ] De taal is eenvoudig en toegankelijk (er wordt rekening gehouden met een handicap en taalkundige diversiteit).
  • [ ] Er is een wekelijkse feedback- en updatecyclus voor onjuiste antwoorden.