Jedinica 7 / 12

Analiza osjećaja i upravljanje kvalitetom: QA s analitikom govora

Dobici:

  • Sposobnost čitanja pojedinačnih i zbirnih trendova uz analizu osjećaja i analitiku govora i korištenje rezultata kao signala umjesto apsolutnih činjenica
  • Sposobnost skeniranja 100% razgovora pomoću objektivne kartice i izrade preliminarne procjene zasnovane na dokazima, dok konačnu odluku ostavlja čovjeku
  • Sposobnost uspostavljanja sistema kvaliteta sa transparentnošću i daleko od kaznene kulture u cilju razvoja i poboljšanja iskustva

Dnevno se u kol centru vodi na hiljade razgovora, ali klasičnom metodom kvalitetan tim može samo mali dio njih saslušati i ocijeniti (1-2% na većini mjesta). To znači da je 98% razgovora izgubljeno bez pregleda; Čak i ako je kupac maltretiran ili predstavnik više puta daje lažne informacije, niko to ne može primijetiti. Umjetna inteligencija radikalno mijenja ovu sliku: može pročitati i ocijeniti svaki razgovor. U ovoj cjelini ćemo obraditi dvije povezane teme: analizu osjećaja (mjerenje emocionalnog tona kupca i predstavnika) i upravljanje kvalitetom (QA - Quality Assurance; procjena usklađenosti razgovora sa standardima).

Prva dva mandata. Analiza osjećaja je pozitivan, negativan ili neutralan emocionalni ton teksta ili govora; Služi za automatsko otkrivanje situacija kao što su ljutnja, zadovoljstvo i anksioznost. Govorna analitika (analitika interakcije) je da analizira sve razgovore zajedno i izdvoji trendove, česte teme, rizike i prilike. Zajedno, oni daju pozivnom centru „uši koje čuju“: generišu značenje iz hiljada razgovora koje menadžer ne može pojedinačno da sluša.

Analiza osjećaja: održavanje pulsa

Analiza sentimenta radi na dva nivoa. Pojedinačni nivo: pokazuje opšti ton razgovora („mušterija je počela da se ljuti, na kraju se smirila“) i prekretnice. Zbirni nivo: izdvaja trendove poput „negativnog sentimenta za 18% ove sedmice, uglavnom o 'računu'” iz hiljada razgovora. Ove informacije su zlatne: rano hvataju rastuću plimu ljutnje, problem sa proizvodom ili zbunjenost oko nove kampanje.

Međutim, analiza osjećaja nije savršena. Na turskom, sarkazam, ironija i idiomi mogu dovesti u zabludu modela (rečenica "Hvala vam puno, odlična usluga!" možda je izgovorena u ljutnji). Također, ocjena osjećaja je signal, a ne konačna istina. Stoga ne koristite analizu osjećaja da kaznite pojedinog predstavnika, već da vidite trendove i istaknete razgovore kojima je potrebna pažnja.

Savjet: Koristite analizu osjećaja kao "uzbunu", a ne "presudu". Jedan negativan rezultat ne osuđuje predstavnika; ali rastući trend negativnosti ukazuje na područje koje treba ispitati. Provjerite signal s čovjekom.

Upravljanje kvalitetom: 100% evaluacija umjesto 1%

U klasičnom QA, stručnjak za kvalitet boduje nekoliko nasumično odabranih poziva pomoću formulara za evaluaciju (scorecard – stavke kao što su „da li je dat pozdrav, identitet verifikovan, da li je ponuđeno rešenje, da li je zatvaranje prikladno”). Ova metoda pati od male veličine uzorka, subjektivnosti i problema sa kašnjenjem. U QA podržanom umjetnom inteligencijom, model automatski procjenjuje sve razgovore prema stavkama kartice rezultata; Koji članak nedostaje, koji su govori rizični, kojeg predstavnika treba podržati po kojem pitanju - to sve pokazuje.

Kritična tačka: QA rezultat AI je preliminarni skrining i indikacija, a ne konačna procjena. AI kaže da je "ovaj razgovor izgleda preskočio korak autentifikacije"; Stručnjak za kvalitet pregleda ove označene razgovore i donosi konačnu odluku. Dakle, umjesto da sluša hiljade razgovora, stručnjak se fokusira na rizične/uzorne razgovore koje AI označava – i pravednije i sveobuhvatnije.

Sljedeća tabela upoređuje dva pristupa:

Veličina

Klasični QA

QA sa AI-om

Obim

1-2% razgovora

100% skenirano

Trajanje

Polako, slušanje rukom

Instant skeniranje

Dosljednost

Razlikuje se u zavisnosti od stručnjaka

Konstantno se primjenjuje na kriterij

subjektivnost

visoko

Kriterijum je jasan, signal + čovjek

konačna odluka

ekspert

Ekspert (fokusira se na AI)

Rizik

Bežanje od problema

Lažni znak (mora biti potvrđen)

Korak po korak: program za kvalitetu koji pokreće AI

  1. Pojasnite tablicu rezultata: Napišite stavke evaluacije objektivno i mjerljivo (ne nejasno kao što je "postupio ljubazno", već jasno kao "pozdravio kupca imenom/odgovarajućom adresom").
  2. Dajte AI kriterijume: Ocijenite svaki razgovor kao "urađeno/nije urađeno/nejasno" prema ovim stavkama; Pokazali ste rečenicu za dokaz.
  3. Istaknite one rizične: dovedite stručnjaku razgovore s lošim rezultatom, ljutnje ili rizike usklađenosti.
  4. Stručnjak potvrđuje: Konačan rezultat i povratna informacija pripada čovjeku; Mjesta koja AI naziva "neizvjesnim" definitivno su dostupna ljudima.
  5. Pretvorite to u podučavanje: koristite nalaze za razvoj agenta – fokusirani na poboljšanje, a ne na kaznu.

Četiri šablona za kopiranje

1) Ocjena kartice:

Procijenite sljedeći anonimni razgovor prema sljedećim stavkama. Za svaku stavku: dajte status=[urađeno/nije urađeno/nejasno] i rečenicu DOKAZ (citat iz razgovora). Ako nema dokaza, recite "nejasno"; nagađanje. Stavke: 1) Odgovarajući pozdrav 2) Autentifikacija 3) Razumijevanje problema 4) Tačne informacije/rješenje 5) Obavezne informacije 6) Ljubazno zatvaranje. Govor: <<dešifriranje>>

2) Analiza osjećaja i prekretnice:

Nacrtajte emocionalnu putanju anonimnog razgovora u nastavku.- Početni ton, završni ton (smiren/bijesan/anksiozan/zadovoljan),- Trenutak kada se emocija PROMIJENILA i zašto (sa citatom),- Da li je bilo znakova ljutnje/krize, kako je agent to riješio? Imajte na umu moguću ironiju/sarkazam; Ako niste sigurni, recite "nejasno". Govor: <<transkripcija>>

3) Zbirni izvještaj o trendu:

Ispod su ovosedmične oznake anonimnih razgovora i ocjene osjećaja. (1) Najveća tema o negativnim emocijama, (2) hipoteza mogućeg osnovnog uzroka (dokazati), (3) 3 teme koje se preporučuju za ispitivanje. Uzmite brojeve iz podataka, nemojte ih izmišljati; označiti hipoteze kao "moraju biti potvrđene". Podaci: <<tabela sažetka>>

4) Coaching sažetak (razvoj agenta):

Izradite bilješku usmjerenu na razvoj, nekažnjavajuću bilješku za JEDNOG predstavnika na osnovu sljedećih evaluiranih razgovora. - Prednosti (2), - Područje za poboljšanje (2, sa konkretnim primjerima), - 1 predloženi mikrocilj. Lična procjena/upotreba oznaka. Podaci: <<ocjene govora>>

Slaba prompt / Jaka prompt

Slab upit:

Ocijenite da li je ovaj predstavnik dobar ili loš.

Subjektivno, bez kriterijuma, bez dokaza, kazneno; Ona proizvodi nepravednu i neodbranjivu "presudu".

Snažan upit:

Procijenite ovaj anonimni razgovor prema tablici rezultata od 6 stavki; Za svaku stavku navedite urađeno/neurađeno/nejasno + DOKAZ iz govora. Ako nema dokaza, recite "nejasno". Ja (stručnjak za kvalitet) ću donijeti konačnu odluku; vi samo napravite preliminarnu procenu sa dokazima.

Razlika: kriterijum je jasan, dokazi su obavezni, neizvesnost je iskrena, konačna odluka je na licu.

tri mini kofera

Slučaj 1 — Snaga 100% pokrivenosti. U jednoj banci, QA tim je mogao slušati oko 1.200 razgovora mjesečno (1,5% od ukupnog broja). Svih 80.000 razgovora je skenirano AI; Ispostavilo se da je korak provjere autentičnosti preskočen 6% vremena - rizik usklađenosti koji se nikada ne bi vidio kod klasičnog uzorkovanja. Uz ciljani coaching, stopa je pala na manje od 1% u 2 mjeseca.

Slučaj 2 — Zamka ironije. U centru za e-trgovinu, model emocija smatrao je ironične rečenice poput "super si, čekam 3 dana" kao "pozitivne"; tako da su neki ljutiti kupci izgledali "zadovoljno". Kada model nije bio jedini donosilac odluke i rezultati su verifikovani uzorkovanjem ljudskim okom, tim je posebno označio slučajeve ironije i pouzdanost izveštaja se povećala. Pouka: ocena sentimenta je signal, a ne apsolutna istina.

Slučaj 3 — Rano upozorenje. Analitika govora u jednom telekomu pokazala je da je negativan sentiment oko "računa" porastao za 40% u 3 dana, počevši od utorka. Istraga je otkrila da su fakture pogrešno prikazane u prelasku na novu tarifu. Problem je uhvaćen i otklonjen ranim signalom emocija prije nego što su se nagomilale hiljade pritužbi. Analitika je postala sistem ranog upozorenja, kao i kvalitetan alat.

Uobičajene greške

  • Smatrajući rezultat emocija apsolutnom istinom. Ironija, idiom i kontekst dovode model u zabludu; Koristite rezultat kao signal, provjerite s čovjekom.
  • Donošenje AI rezultata konačne odluke. U QA, konačna evaluacija i povratne informacije pripadaju čovjeku; AI napreduje.
  • Nejasne stavke iz tablice rezultata. "On se dobro ponašao" ne može se izmjeriti; Napišite objektivne, provjerljive stavke.
  • Pretvaranje QA u alat za kažnjavanje. Cilj je razvoj i korisničko iskustvo; Kultura kažnjavanja ućutkava agenta i kvari podatke.
  • Evaluacija bez dokaza. Svaki nalaz treba da bude potkrijepljen citatom iz govora; U suprotnom bi se trebalo nazvati "nejasno".
Oprez: Mjerenje svih razgovora s AI je moćno, ali osjetljivo. Pretvaranje ovoga u sistem koji stalno prati i kažnjava zaposlene je neetično i uništava povjerenje tima. Cilj je poboljšati korisničko iskustvo i razvoj agenata; Transparentnost i fokus na razvoj su od suštinskog značaja.

Ukratko

Analiza sentimenta i upravljanje kvalitetom zasnovano na veštačkoj inteligenciji daju uši pozivnom centru da čuje hiljade razgovora: skeniranje 100% uzorka umesto 1%, rano uočavanje trendova i održavanje dosledne procene kvaliteta. Ali ocena osećanja je signal, a ne apsolutna istina; U QA, konačna odluka pripada čovjeku. Napišite objektivno tablicu rezultata, svaki nalaz pripišite dokazima, ostavite neizvjesnost ljudima i uspostavite cijeli sistem transparentno, s ciljem razvoja i poboljšanja iskustva, a ne kažnjavanja.

Zadatak aplikacije

Dizajnirajte ciljnu tablicu rezultata sa 6 stavki (svaka stavka treba da bude mjerljiva i dokaziva). Uzmite fiktivni/anonimni transkript i primijenite šablone "1) Ocjena kartice" i "2) Analiza osjećaja". Istaknite područja u kojima model kaže "dvosmisleno" ili gdje može biti ironije i napišite kako bi ih stručnjak za ljude trebao provjeriti. Konačno, izradite bilješku usmjerenu na razvoj s “4) Sažetak trenera”.

kontrolna lista

  • [ ] Moje stavke u kartici rezultata su objektivne, mjerljive i provjerljive.
  • [ ] Preliminarni skrining evaluacije AI; Konačna QA odluka i povratne informacije su na čovjeku.
  • [ ] Koristim ocjene osjećaja kao signale, a ne kao apsolutnu istinu.
  • [ ] Svaki nalaz je potkrijepljen citatom dokaza iz razgovora; inače "nejasno".
  • [ ] Sistem sam postavio u svrhu razvoja i poboljšanja iskustva, a ne kažnjavanja.
  • [ ] Zaposlenima je transparentno objašnjena svrha i obim analize.