Jednotka 7 / 12

Analýza sentimentu a řízení kvality: QA s analýzou řeči

zisky:

  • Schopnost číst jednotlivé a souhrnné trendy pomocí analýzy sentimentu a řeči a používat skóre jako signály spíše než absolutní fakta
  • Schopnost naskenovat 100 % konverzací pomocí objektivního skóre a vytvořit předběžné hodnocení založené na důkazech, přičemž konečné rozhodnutí ponechává na člověku
  • Schopnost zavést systém jakosti transparentně a daleko od trestní kultury za účelem rozvoje a zlepšování zkušeností

V call centru jsou denně tisíce konverzací, ale klasickou metodou může kvalitní tým naslouchat a hodnotit jen malou část z nich (ve většině míst 1-2 %). To znamená, že 98 % konverzací je ztraceno, aniž by byly kdy zkoumány; I když je se zákazníkem špatně zacházeno nebo jeho zástupce opakovaně uvádí nepravdivé informace, nikdo si toho nemusí všimnout. Umělá inteligence tento obraz radikálně mění: dokáže přečíst a vyhodnotit každou konverzaci. V tomto bloku se budeme zabývat dvěma souvisejícími tématy: analýzou sentimentu (měření emocionálního tónu zákazníka a zástupce) a řízením kvality (QA - Quality Assurance; hodnocení souladu rozhovorů s normami).

První dva termíny. Analýza sentimentu je pozitivní, negativní nebo neutrální emocionální tón textu nebo řeči; Má automaticky detekovat situace, jako je hněv, spokojenost a úzkost. Analytika řeči (analytika interakce) má analyzovat všechny konverzace společně a extrahovat trendy, častá témata, rizika a příležitosti. Společně dávají call centru „slyšící uši“: generují význam z tisíců konverzací, které manažer nemůže samostatně poslouchat.

Analýza sentimentu: udržení tepu

Analýza sentimentu funguje na dvou úrovních. Singulární úroveň: ukazuje obecný tón konverzace („zákazník se začal zlobit, nakonec se uklidnil“) a body obratu. Souhrnná úroveň: extrahuje trendy jako „negativní sentiment vzrostl tento týden o 18 %, většinou o „účet“ z tisíců konverzací. Tato informace je zlatá: brzy zachytí stoupající vlnu hněvu, problém s produktem nebo zmatek ohledně nové kampaně.

Analýza sentimentu však není dokonalá. V turečtině může sarkasmus, ironie a idiomy uvést model v omyl (věta „Moc děkuji, skvělé služby!“ mohla být vyslovena ve vzteku). Skóre sentimentu je také signál, nikoli definitivní pravda. Analýzu sentimentu tedy nepoužívejte k potrestání jednotlivých zástupců, ale ke sledování trendů a zvýraznění konverzací, které vyžadují pozornost.

Tip: Analýzu sentimentu používejte jako „upozornění“, nikoli jako „úsudek“. Jediné negativní skóre neodsuzuje zástupce; ale rostoucí trend negativity naznačuje oblast, kterou je třeba prozkoumat. Ověřte signál u člověka.

Řízení kvality: 100% hodnocení místo 1%

V klasickém QA odborník na kvalitu ohodnotí několik náhodně vybraných hovorů pomocí hodnotícího formuláře (scorecard – položky jako „byl pozdrav poskytnut, identita ověřena, bylo nabídnuto řešení, bylo vhodné uzavření“). Tato metoda trpí problémy s malou velikostí vzorku, subjektivitou a zpožděním. V QA podporovaném umělou inteligencí model automaticky vyhodnocuje všechny konverzace podle položek bodovací karty; Který článek chybí, které projevy jsou riskantní, který zástupce by měl být v jaké otázce podporován – to vše ukazuje.

Kritický bod: Skóre QA AI je předběžný screening a indikace, nikoli konečné hodnocení. Umělá inteligence říká „zdá se, že tato konverzace přeskočila krok ověřování“; Odborník na kvalitu tyto označené rozhovory prozkoumá a učiní konečné rozhodnutí. Namísto poslouchání tisíců konverzací se tedy odborník zaměřuje na rizikové/příkladné konverzace, které AI ​​označuje – spravedlivější a komplexnější.

Následující tabulka porovnává dva přístupy:

Velikost

Klasická QA

QA poháněná umělou inteligencí

Rozsah

1–2 % konverzací

100% naskenováno

Doba trvání

Pomalé, ruční poslouchání

Okamžité skenování

Důslednost

Liší se v závislosti na odborníkovi

Neustále uplatňováno na kritérium

subjektivita

vysoká

Kritérium je jasné, signál + člověk

konečné rozhodnutí

odborník

Expert (zaměřuje se na AI)

Riziko

Problémy s útěkem

Falešné znamení (musí být ověřeno)

Krok za krokem: Kvalitní program založený na umělé inteligenci

  1. Ujasněte si bodovací kartu: Položky hodnocení pište objektivně a měřitelně (ne vágně jako „jednalo se zdvořile“, ale jasně jako „pozdravil zákazníka jménem/příslušnou adresou“).
  2. Dejte AI kritéria: Ohodnoťte každou konverzaci jako „hotovou/neprovedenou/nejasnou“ podle těchto položek; Ukázal jsi důkazní větu.
  3. Zvýrazněte ty rizikové: Předveďte odborníkovi konverzace s nízkým skóre, hněvem nebo konverzací s rizikem dodržování předpisů.
  4. Expert potvrzuje: Konečné skóre a zpětná vazba patří člověku; Místa, která AI nazývá „nejistá“, jsou lidem rozhodně dostupná.
  5. Proměňte to v koučování: Využijte zjištění pro rozvoj agentů – zaměřených na zlepšení, ne na trestání.

Čtyři kopírovatelné šablony

1) Hodnocení skóre:

Vyhodnoťte následující anonymní rozhovor podle následujících položek. Pro každou položku: uveďte status=[hotovo/neprovedeno/nejasné] a větu DŮKAZ (citát z konverzace). Pokud neexistují žádné důkazy, řekněte „nejasné“; hádání.Položky: 1) Vhodný pozdrav 2) Autentizace 3) Pochopení problému4) Správná informace/řešení 5) Povinná informace 6) Zdvořilé uzavření.Projev: <<dešifrování>>

2) Analýza sentimentu a bodu obratu:

Níže nakreslete emocionální trajektorii anonymní konverzace.- Počáteční tón, koncový tón (klidný/rozzlobený/úzkostný/spokojený),- Okamžik, kdy se emoce ZMĚNILA a proč (s citací),- Objevily se nějaké známky hněvu/krize, jak to agent řešil?Všimněte si možné ironie/sarkasmu; Pokud si nejste jisti, řekněte „nejasné“. Řeč: <<přepis>>

3) Souhrnný přehled trendů:

Níže jsou uvedeny anonymní konverzační značky a skóre sentimentu z tohoto týdne. (1) Nejvíce rostoucí téma negativních emocí, (2) možná hypotéza základní příčiny (prokázat), (3) 3 témata doporučená ke zkoumání. Berte čísla z dat, nevymýšlejte si je; označte hypotézy jako "musí být potvrzeny".Údaje: <<souhrnná tabulka>>

4) Shrnutí koučování (vývoj agenta):

Vytvořte pro JEDNOHO zástupce koučovací poznámku zaměřenou na rozvoj a bez represí na základě následujících hodnocených rozhovorů. - Silné stránky (2), - Oblast pro zlepšení (2, s konkrétními příklady), - 1 navrhovaný mikrocíl. Osobní úsudek/použití štítků. Údaje: <<hodnocení řeči>>

Slabá výzva / Silná výzva

Slabá výzva:

Ohodnoťte, zda je tento zástupce dobrý nebo špatný.

Subjektivní, bez kritérií, bez důkazů, represivní; Vyvolává nespravedlivý a neobhajitelný „rozsudek“.

Výkonná výzva:

Vyhodnoťte tuto anonymní konverzaci podle 6bodové bodovací karty; U každé položky citovat hotovo/neprovedeno/nejasné + DŮKAZY z projevu. Pokud neexistují žádné důkazy, řekněte „nejasné“. Já (odborník na kvalitu) učiním konečné rozhodnutí; pouze provedete předběžné hodnocení s důkazy.

Rozdíl: kritérium je jasné, důkazy jsou povinné, nejistota je upřímná, konečné rozhodnutí je na osobě.

tři mini pouzdra

Případ 1 — Síla 100% pokrytí. V jedné bance mohl tým QA poslouchat ~ 1 200 konverzací za měsíc (1,5 % z celkového počtu). Všech 80 000 konverzací bylo naskenováno pomocí AI; Ukázalo se, že krok ověřování byl vynechán v 6 % případů – riziko shody, které by u klasického vzorkování nebylo nikdy vidět. S cíleným koučováním klesla sazba za 2 měsíce na méně než 1 %.

Případ 2 – Ironická past. V centru e-commerce považoval model emocí za „pozitivní“ ironické věty typu „jste skvělý, čekám už 3 dny“; takže někteří naštvaní zákazníci vypadali "spokojeně". Když model nebyl jediným rozhodovatelem a skóre bylo ověřeno vzorkováním lidským okem, tým označil případy ironie samostatně a spolehlivost zpráv se zvýšila. Ponaučení: skóre sentimentu je signál, nikoli absolutní pravda.

Případ 3 – Včasné varování. Analýza řeči v jednom telekomunikaci ukázala, že negativní sentiment kolem „účtu“ se během 3 dnů, počínaje úterým, zvýšil o 40 %. Šetřením bylo zjištěno, že při přechodu na nový tarif se nesprávně promítly faktury. Problém byl zachycen a vyřešen včasným signálem emocí, než se nashromáždily tisíce stížností. Analytika se stala systémem včasného varování i nástrojem kvality.

Časté chyby

  • Považovat skóre emocí za absolutní pravdu. Ironie, idiom a kontext model zavádějí; Použijte skóre jako signál, ověřte u člověka.
  • Udělejte konečné rozhodnutí skóre AI. V QA patří konečné hodnocení a zpětná vazba člověku; AI postupuje.
  • Vágní položky bodovací tabulky. "Choval se dobře" nelze měřit; Napište objektivní, ověřitelné položky.
  • Přeměna QA na nástroj pro trestání. Cílem je vývoj a zákaznická zkušenost; Kultura trestu umlčuje agenta a kazí data.
  • Hodnocení bez důkazů. Každé zjištění by mělo být podpořeno citací z projevu; Jinak by se to mělo nazývat „nejasné“.
Upozornění: Měření všech konverzací pomocí AI je výkonné, ale citlivé. Přeměnit to na systém, který neustále monitoruje a trestá zaměstnance, je neetické a zároveň ničí důvěru týmu. Cílem je zlepšit zákaznickou zkušenost a rozvoj agentů; Transparentnost a zaměření na rozvoj jsou zásadní.

V souhrnu

Analýza sentimentu a řízení kvality založené na umělé inteligenci umožňují call centru slyšet tisíce konverzací: skenování 100 % vzorku místo 1 %, včasné zachycení trendů a konzistentní hodnocení kvality. Ale skóre sentimentu je signál, nikoli absolutní pravda; V QA patří konečné rozhodnutí člověku. Napište bodovací kartu objektivně, připisujte každé zjištění důkazům, ponechte nejistotu na lidech a zaveďte celý systém transparentně, s cílem rozvoje a zlepšení zkušeností, nikoli trestání.

Aplikační úkol

Navrhněte objektivní bodovací kartu se 6 položkami (každá položka by měla být měřitelná a prokazatelná). Vezměte fiktivní/anonymní přepis a aplikujte šablony „1) Vyhodnocení Scorecard“ a „2) Analýza sentimentu“. Zvýrazněte oblasti, kde model říká „nejednoznačně“ nebo kde by mohla být ironie, a napište, jak by je měl ověřit odborník na lidi. Nakonec vytvořte poznámku zaměřenou na vývoj se „4) shrnutím koučování“.

kontrolní seznam

  • [ ] Položky mé bodové tabulky jsou objektivní, měřitelné a ověřitelné.
  • [ ] předběžné prověřování hodnocení AI; Konečné rozhodnutí o zajištění kvality a zpětná vazba leží na člověku.
  • [ ] Skóre sentimentu používám jako signály, ne jako absolutní pravdu.
  • [ ] Každé zjištění je podpořeno citací důkazů z rozhovoru; jinak "nejasné".
  • [ ] Systém jsem nastavil za účelem rozvoje a zlepšování zkušeností, nikoli trestání.
  • [ ] Zaměstnancům byl transparentně vysvětlen účel a rozsah analýzy.