Birlik 7 / 12

Tuyg'ularni tahlil qilish va sifatni boshqarish: Speech Analytics bilan QA

Daromadlar:

  • Tuyg'ularni tahlil qilish va nutq tahlili bilan individual va jamlangan tendentsiyalarni o'qish va ballarni mutlaq faktlar emas, balki signal sifatida ishlatish qobiliyati
  • Suhbatlarning 100% ni ob'ektiv ko'rsatkichlar kartasi bilan skanerlash va yakuniy qarorni insonga qoldirib, dalillarga asoslangan dastlabki baholashni amalga oshirish qobiliyati
  • Rivojlanish va tajribani yaxshilash maqsadida shaffoflik va jazo madaniyatidan uzoqda sifat tizimini yaratish qobiliyati

Har kuni qo'ng'iroqlar markazida minglab suhbatlar bo'ladi, ammo klassik usul bilan sifatli jamoa faqat ularning kichik qismini (ko'p joylarda 1-2%) tinglashi va baholashi mumkin. Bu shuni anglatadiki, suhbatlarning 98% hech qachon tekshirilmasdan yo'qoladi; Agar mijozga yomon munosabatda bo'lsa yoki vakil qayta-qayta noto'g'ri ma'lumot bersa ham, hech kim buni sezmasligi mumkin. Sun'iy intellekt bu rasmni tubdan o'zgartiradi: u har bir suhbatni o'qib, baholay oladi. Ushbu bo'limda biz ikkita bog'liq mavzuni ko'rib chiqamiz: hissiyotlarni tahlil qilish (mijoz va vakilning hissiy ohangini o'lchash) va sifat menejmenti (QA - Sifat kafolati; suhbatlarning standartlarga muvofiqligini baholash).

Birinchi ikki muddat. Sentiment tahlili matn yoki nutqning ijobiy, salbiy yoki neytral hissiy ohangidir; Bu g'azab, qoniqish va tashvish kabi vaziyatlarni avtomatik ravishda aniqlashdir. Nutqni tahlil qilish (o'zaro ta'sir tahlili) barcha suhbatlarni birgalikda tahlil qilish va tendentsiyalarni, tez-tez uchraydigan mavzularni, xavf va imkoniyatlarni ajratib olishdir. Birgalikda ular qo'ng'iroqlar markaziga "eshituvchi quloqlarni" beradilar: menejer alohida tinglay olmaydigan minglab suhbatlardan ma'no hosil qiladi.

Hissiyotlarni tahlil qilish: pulsni ushlab turish

Tuyg'ularni tahlil qilish ikki darajada ishlaydi. Singular daraja: suhbatning umumiy ohangini ("mijoz g'azablandi, oxir-oqibat tinchlandi") va burilish nuqtalarini ko'rsatadi. Umumiy daraja: minglab suhbatlardan “bu haftada salbiy kayfiyat 18% ga oshgan, asosan “hisob-kitob” haqida” kabi tendentsiyalarni ajratib oladi. Bu ma'lumot oltindir: u g'azabning ko'tarilishi, mahsulot muammosi yoki yangi kampaniya haqida chalkashliklarni erta ushlaydi.

Biroq, hissiyotlarni tahlil qilish mukammal emas. Turk tilida kinoya, kinoya va idiomalar modelni chalg‘itishi mumkin (“Katta rahmat, zo‘r xizmat!” jumlasi g‘azab bilan aytilgan bo‘lishi mumkin). Bundan tashqari, hissiyot reytingi aniq haqiqat emas, balki signaldir. Demak, hissiyot tahlilidan alohida vakilni jazolash uchun emas, balki tendentsiyalarni ko'rish va e'tiborga muhtoj bo'lgan suhbatlarni ta'kidlash uchun foydalaning.

Maslahat: Hissiyot tahlilini “hukm” sifatida emas, “ogohlantirish” sifatida foydalaning. Yagona salbiy ball vakilni qoralamaydi; ammo o'sib borayotgan salbiy tendentsiya tekshirilishi kerak bo'lgan sohani ko'rsatadi. Signalni odam bilan tekshiring.

Sifat menejmenti: 1% o'rniga 100% baholash

Klassik QAda sifat eksperti tasodifiy tanlangan bir nechta qo‘ng‘iroqlarni baholash formasi bilan baholaydi (baholar kartasi — “salom berilganmi, shaxsni tasdiqlaganmi, yechim taklif qilinganmi, yakunlash mos keldi” kabi bandlar). Bu usul kichik namuna hajmi, sub'ektivlik va kechikish muammolaridan aziyat chekadi. Sun'iy intellekt tomonidan qo'llab-quvvatlanadigan QAda model barcha suhbatlarni ballar kartasi elementlari bo'yicha avtomatik ravishda baholaydi; Qaysi maqola yetishmayapti, qaysi nutqlar tavakkal, qaysi vakilni qaysi masalada qo‘llab-quvvatlash kerak – hammasini ko‘rsatadi.

Muhim nuqta: AIning QA balli yakuniy baholash emas, balki dastlabki skrining va ko'rsatkichdir. AI "bu suhbat autentifikatsiya bosqichini o'tkazib yuborganga o'xshaydi" deydi; Sifat mutaxassisi ushbu belgilangan suhbatlarni tekshiradi va yakuniy qarorni qabul qiladi. Shunday qilib, minglab suhbatlarni tinglash o'rniga, ekspert AI bayroqchalari bo'lgan xavfli/namunali suhbatlarga e'tibor qaratadi - ham adolatli, ham kengroq.

Quyidagi jadval ikkita yondashuvni taqqoslaydi:

Hajmi

Klassik QA

AI bilan ishlaydigan QA

Qo'llash doirasi

Suhbatlarning 1-2%

100% skanerlangan

Davomiyligi

Sekin, qo'l bilan tinglash

Tezkor skanerlash

Muvofiqlik

Mutaxassisga qarab farq qiladi

Doimiy ravishda mezonga qo'llaniladi

sub'ektivlik

yuqori

Mezon aniq, signal + inson

yakuniy qaror

mutaxassis

Mutaxassis (AIga e'tibor qaratadi)

Xavf

Muammolardan qochish

Noto'g'ri belgi (tasdiqlanishi kerak)

Bosqichma-bosqich: AI quvvatiga ega sifatli dastur

  1. Ko'rsatkichlar kartasini aniqlang: Baholash ma'lumotlarini ob'ektiv va o'lchovli tarzda yozing ("odobli harakat qildik" kabi noaniq emas, balki "mijozning ismi/tegishli manzili bo'yicha salomlashdi" kabi aniq).
  2. AIga mezonlarni bering: har bir suhbatni ushbu bandlarga muvofiq "bajarildi/bajarilmadi/noaniq" deb baholang; Siz dalil jumlani ko'rsatdingiz.
  3. Xavfli narsalarni ajratib ko'rsating: mutaxassisga past ballli, g'azablangan yoki muvofiqlik xavfi bo'lgan suhbatlarni olib boring.
  4. Ekspert tasdiqlaydi: Yakuniy ball va fikr-mulohazalar insonga tegishli; AI "noaniq" deb ataydigan joylar, albatta, odamlar uchun mavjud.
  5. Uni murabbiylikka aylantiring: agentni rivojlantirish uchun topilmalardan foydalaning - jazoga emas, yaxshilashga qaratilgan.

To'rt nusxa ko'chirish shablonlari

1) Baholash tizimi reytingi:

Quyidagi anonim suhbatni quyidagi bandlarga qarab baholang. Har bir element uchun: status=[bajarildi/bajarilmadi/noaniq] va DALIL jumlasini bering (suhbatdan iqtibos). Agar dalil bo'lmasa, "noaniq" deb ayting; taxmin qilish.Maqsadlar: 1) Tegishli salomlashish 2) Autentifikatsiya 3) Muammoni tushunish4) To'g'ri ma'lumot/yechim 5) Majburiy ma'lumot 6) Ehtiyotkorlik bilan yakunlash.Nutq: <<deshifrlash>>

2) Hissiyot va burilish nuqtasi tahlili:

Quyida anonim suhbatning emotsional traektoriyasini chizing.- Boshlanish ohangi, tugatish ohangi (xotirjam/jahldor/tashvishli/qoniqarli),- Tuyg’u O’ZGARLANGAN lahza va nima uchun (iqtibos bilan),- G’azab/inqiroz alomatlari bormidi, agent buni qanday hal qilgan?E’tibor bering, istehzo/kinoga e’tibor bering; Agar ishonchingiz komil bo'lmasa, "noaniq" deb ayting. Nutq: <<transkripsiya>>

3) Umumiy tendentsiya hisoboti:

Quyida bu haftaning anonim suhbat teglari va kayfiyat ballari keltirilgan. (1) eng ko'p ortib borayotgan salbiy his-tuyg'u mavzusi, (2) mumkin bo'lgan asosiy sabab gipotezasi (isbotlash), (3) o'rganish uchun tavsiya etilgan 3 mavzu. Raqamlarni ma'lumotlardan oling, ularni tuzmang; gipotezalarni "tasdiqlanishi kerak" deb belgilang.Ma'lumotlar: <<jadvalning xulosasi>>

4) Murabbiylik xulosasi (agent ishlab chiqish):

Quyidagi baholangan suhbatlar asosida ONE vakili uchun rivojlanishga yo'naltirilgan, jazosiz murabbiylik eslatmasini tayyorlang. - Kuchli tomonlar (2), - Yaxshilash sohasi (2, aniq misollar bilan), - 1 ta taklif qilingan mikro-maqsad. Shaxsiy mulohazalar/yorliqlardan foydalanish. Ma'lumotlar: <<nutq baholari>>

Zaif taklif / Kuchli taklif

Zaif taklif:

Bu vakilning yaxshi yoki yomonligini baholang.

Subyektiv, mezonsiz, dalilsiz, jazolovchi; U adolatsiz va himoya qilib bo'lmaydigan "hukm" chiqaradi.

Kuchli so'rov:

Ushbu anonim suhbatni 6 banddan iborat ko'rsatkichlar kartasiga ko'ra baholang; Har bir element uchun iqtibos bajarildi/bajarilmadi/noaniq + nutqdan DALİL. Agar dalil bo'lmasa, "noaniq" deb ayting. Men (sifat mutaxassisi) yakuniy qarorni qabul qilaman; Siz shunchaki dalillar bilan dastlabki baho berasiz.

Farqi: mezon aniq, dalillar majburiy, noaniqlik halol, yakuniy qaror shaxsga tegishli.

uchta mini holat

1-holat - 100% qamrov kuchi. Bitta bankda QA jamoasi oyiga ~ 1200 ta suhbatni (jami 1,5%) tinglashi mumkin edi. Barcha 80 000 suhbatlar AI yordamida skanerdan o'tkazildi; Ma'lum bo'lishicha, autentifikatsiya bosqichi 6% vaqt o'tkazib yuborilgan - bu klassik namuna olishda hech qachon kuzatilmaydigan muvofiqlik xavfi. Maqsadli murabbiylik bilan bu ko'rsatkich 2 oy ichida 1% dan kamroqqa tushdi.

2-holat - Ironiy tuzoq. Elektron tijorat markazida hissiyot modeli “sen zo‘rsan, 3 kundan beri kutyapman” kabi istehzoli jumlalarni “ijobiy” deb hisobladi; shuning uchun ba'zi g'azablangan mijozlar "qoniqish" tuyulardi. Model yagona qaror qabul qiluvchi bo'lmaganida va ballar inson ko'zi bilan namuna olish yo'li bilan tekshirilganda, jamoa ironiya holatlarini alohida belgilab qo'ydi va hisobotlarning ishonchliligi oshdi. Dars: hissiyot balli mutlaq haqiqat emas, balki signaldir.

3-holat - erta ogohlantirish. Bir telekomda nutq tahlili shuni ko'rsatdiki, "hisob-kitob" atrofidagi salbiy kayfiyat seshanba kunidan boshlab 3 kun ichida 40% ga oshgan. Tekshiruv natijasida yangi tarifga o‘tishda schyot-fakturalar noto‘g‘ri aks ettirilgani aniqlandi. Muammo minglab shikoyatlar to'planishidan oldin erta hissiy signal orqali aniqlandi va hal qilindi. Analytics erta ogohlantirish tizimiga, shuningdek, sifatli vositaga aylandi.

Umumiy xatolar

  • Tuyg'u bahosini mutlaq haqiqat deb hisoblash. Ironiya, idioma va kontekst modelni chalg'itadi; Ballarni signal sifatida foydalaning, odam bilan tekshiring.
  • Yakuniy qarorni AI ball qilish. QAda yakuniy baholash va fikr bildirish insonga tegishli; AI yutuqlari.
  • Noaniq ko'rsatkichlar kartasi elementlari. "U o'zini yaxshi tutdi" ni o'lchash mumkin emas; Ob'ektiv, tekshirilishi mumkin bo'lgan narsalarni yozing.
  • QAni jazolash vositasiga aylantirish. Maqsad - rivojlanish va mijozlar tajribasi; Jazo madaniyati agentning ovozini o'chiradi va ma'lumotlarni buzadi.
  • Dalilsiz baholash. Har bir topilma nutqdan iqtibos bilan tasdiqlanishi kerak; Aks holda, uni "noaniq" deb atash kerak.
Diqqat: AI bilan barcha suhbatlarni o'lchash kuchli, ammo sezgir. Buni doimiy ravishda nazorat qiluvchi va xodimlarni jazolaydigan tizimga aylantirish ham axloqsizlik, ham jamoa ishonchini yo‘qqa chiqaradi. Maqsad - mijozlar tajribasini yaxshilash va agentlarni rivojlantirish; Shaffoflik va rivojlanishga e'tibor qaratish muhim.

Xulosa

Tuyg'ularni tahlil qilish va sun'iy intellekt asosidagi sifat menejmenti qo'ng'iroqlar markaziga minglab suhbatlarni eshitish imkonini beradi: namunani 1% o'rniga 100% skanerlash, tendentsiyalarni erta aniqlash va sifatni baholashni izchil saqlash. Ammo hissiyot balli mutlaq haqiqat emas, balki signaldir; QAda yakuniy qaror insonga tegishli. Ko'rsatkichlar kartasini ob'ektiv ravishda yozing, har bir topilmani dalillarga bog'lang, odamlarga noaniqlik qoldiring va butun tizimni jazolash emas, balki rivojlanish va tajribani yaxshilash maqsadida shaffoflik bilan o'rnating.

Ilova vazifasi

6 ta elementdan iborat ob'ektiv ko'rsatkichlar kartasini tuzing (har bir element o'lchanadigan va isbotlangan bo'lishi kerak). Xayoliy/anonim transkriptni oling va "1) Baholar kartasini baholash" va "2) His-tuyg'ularni tahlil qilish" andozalarini qo'llang. Modelda "noaniq" deb aytilgan yoki kinoya bo'lishi mumkin bo'lgan joylarni ajratib ko'rsating va mutaxassis ularni qanday tekshirishi kerakligini yozing. Nihoyat, “4) Murabbiylik xulosasi” bilan rivojlanishga yo‘naltirilgan eslatma tayyorlang.

nazorat ro'yxati

  • [ ] Mening ballar kartam ob'ektiv, o'lchanadigan va tekshirilishi mumkin.
  • [ ] AIni baholashning dastlabki skriningi; Yakuniy QA qarori va fikr-mulohaza insonga tegishli.
  • [ ] Men hissiyot ballarini mutlaq haqiqat sifatida emas, balki signal sifatida ishlataman.
  • [ ] Har bir topilma suhbatdan olingan dalillar bilan tasdiqlanadi; aks holda "noaniq".
  • [ ] Men tizimni jazolash uchun emas, balki rivojlanish va tajribani yaxshilash maqsadida o'rnatdim.
  • [ ] Tahlilning maqsadi va hajmi xodimlarga oshkora tushuntirildi.