Zyski:
- Projektuje bezpieczny przepływ odpowiedzi, który klasyfikuje pytania obywateli, tworzy projekty odpowiedzi i, jeśli to konieczne, deleguje je innym osobom.
- Mierzy jakość chatbota w poszczególnych tematach za pomocą wskaźników zasięgu, dokładności, obrotu i współczynnika rozdzielczości oraz znajduje martwe punkty.
- Określa, na które pytania obywateli można odpowiedzieć automatycznie, a na które należy pozostawić władzę ludzką.
Punktem, w którym służba publiczna ma największy kontakt z obywatelem, jest biuro obsługi: telefon, kasa, poczta elektroniczna, call center, strona internetowa instytucji i media społecznościowe. Obywatel pyta: „Jak zapłacić podatek od nieruchomości?”, „Gdzie otrzymam zaświadczenie o rezydencji?”, „Jakie dokumenty są wymagane do tego dokumentu?” pyta. Wiele z tych pytań powraca; Odpowiedzi są oczywiste; ale głośność jest duża i ograniczona do godzin pracy. Chatbot (asystent programowy generujący automatyczne odpowiedzi na pytania pisemne lub głosowe) oraz systemy odpowiedzi wspierane przez sztuczną inteligencję wychodzą naprzeciw temu powtarzalnemu obciążeniu i kierują funkcjonariusza do zadań wymagających prawdziwej wiedzy specjalistycznej. W tej części dowiesz się, jak kompleksowo wykorzystywać sztuczną inteligencję w usługach obywatelskich — od klasyfikacji pytań po generowanie odpowiedzi, wielojęzyczność, dostępność i najważniejszy aspekt, czyli zapobieganie dezinformacji.
Dlaczego kwestia obywatelska jest trudna?
Kwestia obywatelska jest trudna z trzech powodów. Po pierwsze, dokładność: nieprawidłowy wykaz dokumentów na próżno sprowadza obywatela do instytucji; Nieprawidłowy okres skutkować będzie utratą praw. Po drugie, równość: dwóm osobom zadającym to samo pytanie nie można udzielić różnych odpowiedzi; Co więcej, każdy powinien go zrozumieć, bez względu na poziom wykształcenia, język czy niepełnosprawność. Po trzecie, prywatność: obywatele często zapisują swoje dane osobowe, zadając pytania („to jest mój TR ID, jak wygląda mój wniosek?”) i dane te muszą być chronione.
Klucz do umiejscowienia sztucznej inteligencji w ramach tych trzech ograniczeń jest następujący: sztuczna inteligencja to interfejs, który przekazuje obywatelowi wcześniej zatwierdzone dokładne informacje w odpowiednim języku; Nie tworzy samodzielnie aktów prawnych. Sposobem na osiągnięcie tego jest połączenie chatbota z zatwierdzoną bazą wiedzy organizacji (FAQ, streszczenia przepisów, przewodniki po usługach) — nazywa się to RAG (generowanie wspomagane wyszukiwaniem), w którym sztuczna inteligencja pobiera odpowiedni fragment z zaufanego repozytorium dokumentów i odpowiada wyłącznie na tej podstawie przed udzieleniem odpowiedzi.
Wskazówka: Zawsze podawaj źródło w odpowiedzi chatbota: „Te informacje opierają się na [przewodniku serwisowym / numerze okólnika], [oficjalnej stronie] bieżącego stanu”. Odpowiedź niepotwierdzona jest niemożliwa do zweryfikowania i zmniejsza zaufanie obywateli.
Krok po kroku: ustalenie przepływu reakcji obywateli
- Określ zakres. Na jakie tematy chatbot odpowie (podatki, procedury rejestracyjne, licencja), a na jakie powie: „Kieruję Cię do odpowiedniej jednostki”? Lepiej jest zlecić to ludziom, niż wymyślać odpowiedź na pytanie, które wykracza poza zakres.
- Przygotuj zatwierdzoną bazę wiedzy. Każda odpowiedź musi opierać się na datowanym i źródłowym tekście kontrolowanym przez instytucję. Osoba odpowiedzialna powinna śledzić aktualizacje.
- Zapisz zasady dotyczące tonu i języka. Grzeczny, prosty, nie używa żargonu, krótkie zdania. Język formalny, ale nie zimny.
- Ustaw regułę dotyczącą danych osobowych. Chatbot powinien przekazywać spersonalizowane informacje, takie jak status transakcji, dopiero po bezpiecznym uwierzytelnieniu; nie powinien żądać danych osobowych przy przekazywaniu informacji ogólnych.
- Zdefiniuj punkty eskalacji. Reklamacje, zastrzeżenia, pytania wywołujące skutki prawne lub pytania niejasne należy kierować do osób.
- Monitoruj i ulepszaj. Pytania, na które udzielono błędnych odpowiedzi, należy przeglądać co tydzień i aktualizować bazę wiedzy.
trzy mini etui
Przypadek 1 — Obciążenie spadło, funkcjonariusz zwrócił się do specjalisty. Centrum obsługi telefonicznej gminy metropolitalnej odbierało około 48 000 połączeń miesięcznie; spośród nich 61% dotyczyło pięciu powtarzających się tematów. Chatbot oparty na RAG podjął się tych pięciu tematów; pracownicy call center zostali podzieleni na złożone skargi i odwołania; Średni czas oczekiwania skrócił się z 7 minut do 2 minut.
Przypadek 2 – Pułapka dezinformacyjna. Pilot chatbota bez źródła powtórzył starą kwotę, mówiąc: „opłata paszportowa wynosi w tym roku 1200 TL”; podczas gdy zaprawa została zaktualizowana. Przez 3 dni obywatele przychodzili z niewłaściwą kwotą. Lekcja: chatbot powinien opierać się wyłącznie na aktualnej, aktualnej i źródłowej bazie wiedzy; nie należy pozostawiać wolnej produkcji.
Przypadek 3 – Wzrost dostępności. Pewna organizacja uprościła odpowiedzi chatbota do poziomu języka B1 (podstawowy-średniozaawansowany) i dostosowała je do czytników ekranowych dla osób niedowidzących. Odsetek obywateli zgłaszających się do kasy z powodu niezrozumienia przewodnika spadł o 28%; W przypadku skarg liczba komentarzy zawierających temat „Nie rozumiem” spadła do jednej trzeciej.
Cztery szablony do kopiowania
1) Generowanie odpowiedzi zależne od źródła:
Twoja rola: uprzejmy i rzeczowy konsultant ds. usług publicznych. Odpowiadaj wyłącznie na podstawie tekstu INFORMACJI CERTYFIKOWANYCH, który podałem poniżej. Jeśli zostaniesz zapytany o coś, czego nie ma w tekście, powiedz „Kieruję Cię do [jednostki] po dokładne informacje na ten temat” i nie wymyślaj odpowiedzi. Dodaj źródło na końcu odpowiedzi. ZATWIERDZONA INFORMACJA: [wklej tekst] PYTANIE: [pytanie obywatelskie]
2) Uproszczenie języka:
Przetłumacz poniższy oficjalny tekst na zwykły turecki, zrozumiały dla absolwenta szkoły średniej. Wyjaśnij żargon, skróć zdania, zrób listę krok po kroku. Znaczenie i treść prawna nie powinny ulegać zmianie. Oznacz niejasny obszar jako „wymagający wyjaśnienia”. TEKST: [wklej oficjalny tekst]
3) Odpowiedź wielojęzyczna (z notatkami weryfikacyjnymi):
Przetłumacz poniższą zatwierdzoną odpowiedź w języku tureckim na [język docelowy]. Prawidłowo rozpoznaj oficjalne warunki; W nawiasie pozostaw termin, którego nie jesteś pewien, wraz z jego turecką wersją. Dodaj adnotację, że tłumaczenie powinno zostać sprawdzone przez specjalistę. ODPOWIEDŹ: [tekst]
4) Klasyfikator eskalacji:
Sklasyfikuj następującą wiadomość obywatelską: (A) zapytanie ogólne -> odpowiednia automatyczna odpowiedź, (B) spersonalizowany status transakcji -> wymagane uwierzytelnienie, (C) skarga/odwołanie/wynik prawny -> przekazanie osobie. Podaj tylko jedną literę i jedno zdanie. Jeśli nie jest to pewne, najbezpieczniejsza opcja (C). WIADOMOŚĆ: [tekst]
Słaba zachęta/silna zachęta
Słabe: „Informuj obywateli o podatkach od nieruchomości”.
Strong: „Twoja rola polega na grzecznym doradcy publicznym. Odpowiadaj TYLKO na podstawie zatwierdzonego tekstu informacji poniżej; uzupełnij to, czego nie ma w tekście, w razie potrzeby zwróć się do odpowiedniego działu. Napisz odpowiedź prosto, zwięźle i krok po kroku. Nie proś o dane osobowe. Dodaj źródło i notatkę „sprawdź oficjalną stronę pod kątem aktualnej kwoty” na końcu. Zatwierdzone informacje: [tekst]. Pytanie: [pytanie].”
Różnica: silna zachęta ogranicza odpowiedź do zatwierdzonego źródła, zapobiega fabrykacjom, określa ton i poufność; Rezultatem jest jakość, którą można bezpośrednio pokazać obywatelom.
Automatyczna reakcja czy przekazanie człowiekowi?
Stan
właściwy sposób
Dlaczego
Lista dokumentów, godziny pracy, ogólny proces
Automatyczna reakcja (RAG)
Informacje są stałe i zatwierdzone
„Jak radzi sobie moja aplikacja?”
Uwierzytelnienie + zapytanie systemowe
dane osobowe
Skarga, zażalenie, zażalenie
przekazanie człowiekowi
Wymagany szacunek i empatia
Pytanie z konsekwencjami prawnymi
przekazanie człowiekowi
Odpowiedzialność i uzasadnienie
Poza zakresem/niepewne
przekazanie człowiekowi
Unikanie ryzyka fabrykacji
Pomiar jakości chatbota: liczby, nie intuicja
Chatbotem obywatelskim nie zarządza się poprzez stwierdzenie „wydaje się działać dobrze”; jest mierzone. Śledź wydajność chatbota w usługach publicznych za pomocą czterech wskaźników. Stopień pokrycia (procent pytania, na które chatbot odpowiedział poprawnie, nie przekazując go człowiekowi); wskaźnik trafności (zgodność udzielonych odpowiedzi z przepisami i obecną praktyką, przy ręcznej kontroli próby); wskaźnik rotacji (pytania przekazywane człowiekowi – jeśli jest za niski, chatbot może mieć pewność, że porusza złe tematy); poziom zadowolenia/rozwiązania (rozwiązanie problemu obywatela przy pierwszym kontakcie). Śledzenie tych wskaźników na cotygodniowym dashboardzie pozwala zobaczyć, gdzie chatbot wywołuje halucynacje i jakie tematy należy przekazać człowiekowi.
Mini etui — wyłapano martwy punkt. Chatbot dyrekcji prowincji zapewnił dobry ogólny wskaźnik zasięgu wynoszący 78 procent; Jednakże w podpunkcie „prawa niepełnosprawnych obywateli” wskaźnik dokładności wyniósł jedynie 41 procent, ponieważ model dał odpowiedź w oparciu o nieaktualne przepisy. Bez pomiaru przedmiotowego ten martwy punkt pozostałby ukryty w średniej. Zespół tymczasowo zamknął ten wątek zgodnie z zasadą „zawsze deleguj na człowieka” i otworzył go ponownie po zaktualizowaniu treści.
Tygodniowy szablon sprawdzania jakości odpowiedzi według próbki:
Zadanie: Poniżej znajduje się 20 odpowiedzi i pytań obywateli, które chatbot zadał w zeszłym tygodniu. Oceń każdą odpowiedź: 1) Czy jest ona zgodna z przepisami? (Tak/Nie/Wątpliwe – określ element/źródło)2) Czy brakuje jakichś informacji lub wprowadzają one w błąd?3) Czy należało je przekazać człowiekowi? Wynik: Tabela (numer pytania | przydatność | uwaga o ryzyku | zalecenie). Wymień na górze te, których przydatność jest wątpliwa. Uwaga: to jest projekt audytu; Ostateczna decyzja należy do inspektora.
Wskazówka: Zdolność chatbota do powiedzenia „Nie wiem, przekierowuję Cię do urzędnika” nie jest słabością, ale gwarancją jakości. W miejscach publicznych pewna zła odpowiedź jest znacznie bardziej kosztowna niż uczciwe przejęcie.
Typowe błędy
- Wypuszczenie chatbota do darmowej produkcji. Bot, który nie jest podłączony do zatwierdzonej bazy wiedzy, będzie dostarczał nieaktualne lub sfabrykowane informacje.
- Nie cytując źródeł. Obywatele nie mogą weryfikować, urzędnicy nie mogą przeprowadzać kontroli; Błąd rozprzestrzenia się po cichu.
- Przetwarzanie danych osobowych bez uwierzytelnienia. Odpowiadając na pytanie „Jaki jest status mojego wniosku?” bez bezpiecznej weryfikacji stanowi ryzyko KVKK.
- Brak określenia punktów krytycznych. Pozostawienie skarg i zastrzeżeń botowi zwiększy wiktymizację.
- Nie upraszczając języka. Dokładne informacje, które nie są zrozumiałe, są dla obywatela nieważne; dostępność jest koniecznością.
- Brak ustanowienia pętli sprzężenia zwrotnego. Jeśli pytania, na które udzielono błędnych odpowiedzi, nie będą monitorowane i poprawiane, ten sam błąd zostanie powtórzony.
Podsumowując
W służbach obywatelskich sztuczna inteligencja odpowiada na powtarzające się pytania szybko, prosto i 24 godziny na dobę, 7 dni w tygodniu, kierując funkcjonariusza do zadań wymagających prawdziwej wiedzy specjalistycznej. Sekret tkwi w trzech rzeczach: łączeniu odpowiedzi z zatwierdzoną bazą wiedzy (RAG), dodawaniu źródeł do każdej odpowiedzi i delegowaniu pytań dotyczących skarg/sprzeciwów/działań osobistych ludziom. Odpowiednio zaprojektowany chatbot zmniejsza obciążenie; Niepowiązany i niekontrolowany bot szybko rozprzestrzenia fałszywe informacje.
Zadanie aplikacji
Zapisz 5 najczęściej zadawanych pytań obywatelom w Twojej jednostce i ich zatwierdzone odpowiedzi. Wygeneruj odpowiedzi chatbota na te pięć pytań, korzystając z szablonu „Generowanie odpowiedzi w oparciu o zasoby”. Następnie za pomocą szablonu „Klasyfikator delegacji” zaznacz, które pytania powinny zostać delegowane człowiekowi. Uprość przynajmniej jedną odpowiedź do poziomu B1.
lista kontrolna
- [ ] Chatbot opiera się wyłącznie na zatwierdzonej, przestarzałej i opartej na źródłach bazie wiedzy.
- [ ] Każda odpowiedź podaje źródło.
- [ ] Dane osobowe nie są przetwarzane bez bezpiecznego uwierzytelnienia.
- [ ] Zdefiniowano transfer do człowieka w związku ze skargą/sprzeciwem/kwestią prawną.
- [ ] Język jest prosty i przystępny (uwzględnia się niepełnosprawność i różnorodność językową).
- [ ] Istnieje cotygodniowy cykl przesyłania opinii i aktualizacji w przypadku nieprawidłowych odpowiedzi.