יחידה 2 / 11

שירותי אזרח וצ'טבוט: שירות נגיש, מדויק והוגן 24/7

רווחים:

  • הוא מעצב זרימת תגובה מאובטחת המסווגת שאלות אזרחיות, מייצרת טיוטת תגובות ומאצילה אותן לבני אדם בעת הצורך.
  • הוא מודד את איכות הצ'אטבוט על בסיס נושא אחר נושא עם מדדי כיסוי, דיוק, תחלופה וקצב רזולוציה ומגלה נקודות עיוורות.
  • הוא קובע אילו שאלות אזרחיות ניתן לענות באופן אוטומטי ואילו יש להשאיר לסמכות האנושית.

הנקודה שבה השירות הציבורי בא הכי הרבה במגע עם האזרח היא דלפק השירות: טלפון, קופה, דואר אלקטרוני, מוקד טלפוני, אתר המוסד ומדיה חברתית. אזרח שואל "איך אני משלם את הארנונה שלי?", "איפה אני מקבל תעודת מגורים?", "אילו מסמכים נדרשים למסמך זה?" הוא שואל. רבות מהשאלות הללו חוזרות על עצמן; התשובות ברורות; אבל הווליום גבוה ומוגבל לשעות הפעילות. צ'טבוט (עוזר תוכנה שמייצר תשובות אוטומטיות לשאלות כתובות או קוליות) ומערכות תגובה נתמכות בינה מלאכותית עומדות בנטל החוזר ונשנה ומכוונים את הקצין למשימות הדורשות מומחיות אמיתית. ביחידה זו תלמדו כיצד להשתמש בבינה מלאכותית בשירותי אזרחים מקצה לקצה - מסיווג שאלות ועד יצירת תגובות, רב לשוניות, נגישות וההיבט הקריטי ביותר, מניעת מידע מוטעה.

מדוע שאלת האזרח קשה?

שאלת האזרח קשה משלוש היבטים. ראשית, דיוק: רשימה לא נכונה של מסמכים מביאה את האזרח למוסד לשווא; תקופה לא נכונה תגרום לאובדן זכויות. שנית, שוויון: לא ניתן לתת תשובות שונות לשני אנשים ששואלים את אותה שאלה; יתרה מכך, כולם צריכים להבין זאת, ללא קשר לרמת השכלה, שפה או מוגבלות. שלישית, פרטיות: לעתים קרובות אזרחים רושמים את המידע האישי שלהם כאשר הם שואלים שאלות ("מזהה ה-TR שלי זה, איך הבקשה שלי?") ועל הנתונים האלה להיות מוגנים.

המפתח למיצוב AI בתוך שלושת האילוצים הללו הוא זה: AI הוא ממשק המעביר מידע מדויק מאושר מראש לאזרח בשפה מתאימה; היא לא מייצרת חקיקה בפני עצמה. הדרך להשיג זאת היא לחבר את הצ'אטבוט למאגר הידע המאושר של הארגון (שאלות נפוצות, סיכומים רגולטוריים, מדריכי שירות) - זה נקרא RAG (generation-retrieval-augmented generation) שבו ה-AI שולף את הקטע הרלוונטי ממאגר מסמכים מהימן ומגיב רק על סמך זה לפני הפקת תשובה.

טיפ: כלול תמיד את המקור בתגובת הצ'אטבוט: "מידע זה מבוסס על [מדריך שירות / מספר חוזר], [דף רשמי] עבור המצב הנוכחי." תשובה ללא מקורות היא גם בלתי ניתנת לאימות וגם מפחיתה את אמון האזרח.

צעד אחר צעד: הקמת זרם מענה אזרחי

  1. קבע את ההיקף. באילו נושאים יגיב הצ'טבוט (מיסוי, הליכי רישום אזרחי, רישיון) ובאיזה נושא יאמר "אני מפנה אותך ליחידה הרלוונטית"? עדיף להאציל את זה לבני אדם במקום להמציא תשובה לשאלה שהיא מחוץ לתחום.
  2. הכן את בסיס הידע המאושר. כל תשובה חייבת להתבסס על טקסט מתוארך ומקור הנשלט על ידי המוסד. אדם אחראי צריך לעקוב אחר העדכונים.
  3. רשום את כללי הטון והשפה. מנומס, פשוט, לא משתמש בז'רגון, משפטים קצרים. שפה רשמית אך לא קרה.
  4. הגדר את כלל הנתונים האישיים. הצ'אטבוט צריך לספק מידע מותאם אישית, כגון סטטוס עסקה, רק לאחר אימות מאובטח; אסור לבקש מידע אישי בעת מתן מידע כללי.
  5. הגדר נקודות הסלמה. יש להעביר לאנשים תלונות, התנגדויות, שאלות שיש להן השלכות משפטיות או שאלות לא ברורות.
  6. לפקח ולשפר. יש לעיין מדי שבוע בשאלות עם מענה שגוי ולעדכן את מאגר הידע.

שלושה מיני תיקים

מקרה 1 - העומס ירד, הקצין פנה למומחיות. למוקד של עיריית מטרופולין הגיעו ~48,000 שיחות בחודש; מתוכם, 61% היו כחמישה נושאים שחוזרים על עצמם. הצ'טבוט מבוסס RAG לקח על עצמו את חמשת הנושאים הללו; צוות המוקד חולק לתלונות וערעורים מורכבים; זמן ההמתנה הממוצע ירד מ-7 דקות ל-2 דקות.

מקרה 2 - מלכודת מידע שגוי. טייס צ'טבוט ללא מקור חזר על סכום ישן ואמר "תשלום הדרכון הוא 1,200 TL השנה"; ואילו המרגמה עודכנה. במשך 3 ימים, אזרחים הגיעו עם סכום שגוי. לקח: הצ'אט בוט צריך להסתמך רק על בסיס ידע מעודכן, מעודכן ומקורו; לא צריך להשאיר לייצור חופשי.

מקרה 3 - רווח נגישות. ארגון פישט את תגובות הצ'טבוט לרמת שפה B1 (בסיסי-בינוני) והפך אותן למתאימים לקוראי מסך לכבדי ראייה. שיעור האזרחים שהגיעו לקופה בגלל שלא הבינו את מדריך השירות ירד ב-28%; בתלונות, המשוב עם הנושא "אני לא מבין" ירד לשליש.

ארבע תבניות הניתנות להעתקה

1) יצירת תגובה תלוית מקור:

תפקידך: יועץ שירות ציבורי מנומס ופשוט. תשובה רק על סמך טקסט המידע המאושר שסיפקתי להלן. אם שואלים אותך משהו שלא מופיע בטקסט, אמור "אני מפנה אותך ל[יחידה] לקבלת מידע מדויק בנושא זה" ואל תמציא את התשובה. הוסף את המקור בסוף התשובה. מידע מאושר: [הדבק טקסט] שאלה: [שאלת אזרח]

2) פישוט שפה:

תרגם את הטקסט הרשמי למטה לטורקית פשוטה שבוגר בית ספר תיכון יכול להבין בקלות. הסבר ז'רגון, קיצור משפטים, ערוך רשימה שלב אחר שלב. המשמעות והתוכן המשפטי לא אמורים להשתנות. סמן את האזור הלא ברור כ"צריך בירור". טקסט: [הדבק טקסט רשמי]

3) תגובה רב לשונית (עם הערות אימות):

תרגם את התשובה הטורקית המאושרת הבאה ל[שפת היעד]. הכרה נכונה את המונחים הרשמיים; השאר את המונח שאינך בטוח בו בסוגריים עם הגרסה הטורקית שלו. הוסף הערה כי התרגום צריך להיבדק על ידי מומחה. תשובה: [טקסט]

4) מסווג הסלמה:

סווגו את הודעת האזרח הבאה: (א) חקירה כללית -> תשובה אוטומטית מתאימה, (ב) סטטוס עסקה מותאם אישית -> נדרש אימות, (ג) תלונה/ערעור/תוצאה משפטית -> מסירה לאדם. תן רק אות אחת ומשפט אחד. אם לא ברור, האפשרות הבטוחה ביותר (C). הודעה: [טקסט]

הנחיה חלשה / הנחיה חזקה

חלש: "להודיע לאזרחים על ארנונה".

חזק: "תפקידך הוא של יועץ ציבורי מנומס. ענה רק על סמך הטקסט המאושר של המידע למטה; תמציא את מה שלא מופיע בטקסט, פנה למחלקה הרלוונטית במידת הצורך. כתוב את התשובה בפשטות, תמציתית ושלב אחר שלב. אל תבקש מידע אישי. הוסף את המקור והערה 'בדוק את הדף הרשמי לסכום הנוכחי' בסוף. [טקסט: מידע מאושר]."

הבדל: הנחיה חזקה מגבילה את התגובה למקור מאושר, מונעת ייצור, מגדירה טון וסודיות; התוצאה היא באיכות שניתן להראות ישירות לאזרחים.

תגובה אוטומטית או מסירה לאדם?

סטטוס

דרך נכונה

למה

רשימת מסמכים, שעות עבודה, תהליך כללי

תגובה אוטומטית (RAG)

המידע קבוע ומאושר

"איך האפליקציה שלי מסתדרת?"

אימות + שאילתת מערכת

נתונים אישיים

תלונה, התנגדות, תלונה

מסירה לאדם

נדרשת הערכה ואמפתיה

שאלה עם השלכות משפטיות

מסירה לאדם

אחריות והצדקה

מחוץ לתחום/לא בטוח

מסירה לאדם

הימנעות מסיכון ייצור

מדידת איכות צ'אטבוט: מספרים, לא אינטואיציה

צ'אטבוט אזרחי אינו מנוהל על ידי אמירת "נראה שהוא עובד בסדר"; נמדד. עקוב אחר ביצועי צ'טבוט בשירות הציבורי עם ארבעה אינדיקטורים. שיעור כיסוי (אחוז מהשאלה שהצ'אט בוט ענה עליה נכון מבלי למסור אותה לאדם); שיעור דיוק (עמידה של התשובות שניתנו עם החקיקה והפרקטיקה הנוכחית, עם בקרה ידנית מדגמית); קצב תחלופה (שאלות שהועברו לאדם - אם הוא נמוך מדי, הצ'אטבוט עשוי להיות בטוח לגבי הנושאים הלא נכונים); שיעור שביעות רצון/פתרון (פתרון בעיית האזרח בפנייה ראשונה). מעקב אחר אינדיקטורים אלו בלוח מחוונים שבועי הופך את זה לעין היכן הצ'אטבוט מייצר הזיות ואילו נושאים צריכים להיות מואצלים לאדם.

מארז מיני - נתפס נקודה עיוורת. צ'אטבוט של מנהלת מחוז נתן שיעור כיסוי כללי טוב של 78 אחוזים; עם זאת, בכותרת המשנה "זכויות אזרחים נכים", שיעור הדיוק עמד על 41 אחוזים בלבד, משום שהמודל הפיק תשובה המבוססת על תקנה לא מעודכנת. ללא מדידה מבוססת נושא, הנקודה העיוורת הזו תישאר מוסתרת בתוך הממוצע. הצוות סגר זמנית את השרשור הזה לכלל "האציל תמיד לאדם" ופתח אותו מחדש לאחר עדכון התוכן.

תבנית שבועית לבדיקת איכות התגובה לפי דוגמה:

משימה: להלן 20 תשובות ושאלות אזרחיות שהצ'אטבוט נתן בשבוע שעבר. הערך כל תשובה: 1) האם היא תואמת את החקיקה? (כן/לא/מוטל בספק — ציין פריט/מקור)2) האם יש מידע חסר או מטעה?3) האם היה צריך להאציל אותו לאדם? פלט: טבלה (מספר שאלה | התאמה | הערת סיכון | המלצה). רשום למעלה את אלו שהתאמתם מוטלת בספק. הערה: זוהי טיוטת ביקורת; ההחלטה הסופית היא של קצין הפיקוח.

טיפ: היכולת של הצ'טבוט לומר "אני לא יודע, אני מעביר אותך לפקיד" אינה חולשה, אלא הבטחת איכות. בציבור, תשובה שגויה בטוחה היא הרבה יותר יקרה מהשתלטות כנה.

טעויות נפוצות

  • שחרור הצ'אטבוט לייצור חינמי. בוט שאינו מחובר למאגר ידע מאושר יספק מידע מיושן או מפוברק.
  • לא מצטט מקורות. אזרחים לא יכולים לאמת, עובדי מדינה לא יכולים לבדוק; הבאג מתפשט בשקט.
  • עיבוד נתונים אישיים ללא אימות. מענה על השאלה "מה מצב הבקשה שלי?" ללא אימות מאובטח הוא סיכון KVKK.
  • לא מגדיר נקודות מפנה. השארת תלונות והתנגדויות לבוט תגביר את הקורבנות.
  • לא מפשט את השפה. מידע מדויק שאינו מובן בטל ומבוטל עבור האזרח; נגישות היא חובה.
  • לא הקמת לולאת משוב. אם שאלות עם תשובות שגויות אינן מנוטרות ומתוקנות, אותה טעות תחזור על עצמה.

לסיכום

בשירותי אזרחים, בינה מלאכותית מגיבה לשאלות שחוזרות על עצמן במהירות, בפשטות ו-24/7, ומכוונת את הקצין למשרות הדורשות מומחיות אמיתית. הסוד הוא בשלושה דברים: קישור תשובות למאגר הידע המאושר (RAG), הוספת מקורות לכל תשובה והאצלת שאלות תלונה/התנגדות/פעולה אישית לבני אדם. צ'אט בוט מעוצב כהלכה מפחית את העומס; בוט לא ממקור ולא מבוקר מפיץ מידע שקרי במהירות.

משימת יישום

רשום את 5 שאלות האזרח הנפוצות ביותר ביחידה שלך ואת התשובות המאושרות שלהן. צור תשובות צ'אטבוט עבור חמש השאלות הללו באמצעות התבנית "יצירת תשובות מבוסס משאבים". לאחר מכן, עם התבנית "מסווג הנציגות", סמן אילו שאלות יש להאציל לאדם. פשט תשובה אחת לפחות לרמה B1.

רשימת בדיקה

  • [ ] צ'אטבוט תלוי רק במאגר ידע מאושר, מתוארך ומקורו.
  • [ ] כל תשובה מצטטת את המקור.
  • [ ] נתונים אישיים אינם מעובדים ללא אימות מאובטח.
  • [ ] העברה לאדם לצורך תלונה/התנגדות/שאלה משפטית מוגדרת.
  • [ ] השפה פשוטה ונגישה (נלקחים בחשבון מוגבלות וגיוון לשוני).
  • [ ] יש משוב ומחזור עדכון שבועי לתשובות שגויות.