Jedinica 6 / 11

Analiza komentara i raspoloženja: uzimanje pulsa zajednice

Dobici:

  • Sposobnost tumačenja polariteta, intenziteta i tematskih izlaza analize osjećaja i klasificiranja stotina komentara s umjetnom inteligencijom
  • Poznavanje granica poput ironije, slenga i miješanih emocija i sposobnost provjere postotaka na stvarnim primjerima
  • Sposobnost povezivanja negativnosti s temom i pretvaranja u konkretnu akciju te testiranja razloga kao hipoteze

Ono o čemu brend govori na društvenim mrežama jednako je važno kao i ono o čemu se priča. Održavanje pulsa robne marke među stotinama komentara, tisućama spominjanja i neprestanim protokom poruka hrpa je podataka prevelika da bi se pratili ručno. Ovdje analiza sentimenta stupa na scenu. Ova metoda, koja se na engleskom naziva analiza osjećaja, proces je automatskog klasificiranja emocionalnog tona (pozitivan, negativan, neutralan) teksta. Umjetna inteligencija može pročitati stotine recenzija u sekundi i doći do sažetka poput "ovotjedni pozitivni komentari su 62%, negativni 28%, neutralni 10%; većina negativnih je o otpremi." To upravitelju društvenih medija daje neprocjenjiv alat za rano upozorenje i uvid. Ali analiza osjećaja također je nagađanje: može pogrešno protumačiti ironiju, humor i lokalni sleng. Bitno je ne gledati na broj, već na primjere iza broja.

Što analiza sentimenta mjeri, a što ne mjeri?

Analiza sentimenta daje tri osnovna rezultata. Polaritet: je li tekst pozitivan, negativan ili neutralan. Intenzitet: snaga emocije (blago nezadovoljstvo ili ljutnja). Tema/tema: što je emocija (cijena, dostava, kvaliteta, usluga). Najvrjedniji ishod je treći: samo "povećana negativnost" ne pretvara se u akciju; "70% negativnosti odnosi se na kašnjenje tereta" proizvodi izravnu akciju.

Bitno je znati granice analize osjećaja. Ironija i sarkazam: AI može smatrati rečenicu "Super, opet ne radi 👏" pozitivnom. Sleng i narodni jezik: može pogrešno protumačiti regionalne idiome. Kontekst: Riječ "bomba" pozitivna je u proizvodu i negativna u vijestima. Mješoviti osjećaj: "Proizvod je lijep, ali skup" nosi i pozitivno i negativno. Zato upotrijebite analizu osjećaja kao polazište, a ne kao konačnu istinu.

izlaz

Što radi?

Limit / rizik

Polaritet (pozitivan/negativan/neutralan)

vidjeti opće raspoloženje

Ironija i karma propuštaju emocije

gustoća

Razumijevanje hitnosti

Može krivo izmjeriti pretjerivanje

tema/tema

proizvesti akciju

Možda ga dodijeli pogrešnoj temi

Trend tijekom vremena

rano upozorenje

Obmanjujući u malom uzorku

Pažnja: nemojte uključivati ​​postotke dobivene analizom sentimenta u izvješće uprave bez provjere. Pročitajte nekoliko stvarnih primjera iz svake kategorije i vizualno provjerite je li klasifikacija točna; posebno onih označenih kao "negativni".

Korak po korak: studija analize sentimenta

  1. Prikupiti i očistiti podatke. Zbirni komentari/spominjanja za određeno razdoblje; maskirati osobne podatke.
  2. Provjerite veličinu uzorka. Oduzimanje postotka od 20 komentara dovodi u zabludu; Težite značajnom broju (npr. 100+).
  3. Klasificirati. Neka AI napravi označavanje polariteta + teme.
  4. Potvrdite primjerima. Pročitajte 5 primjera iz svakog razreda; popraviti krive oznake.
  5. Dajte prioritet temama. Odredite 3 teme koje generiraju najviše negativnosti.
  6. Povežite ga s akcijom. Izradite nacrt prijedloga/akcije za svaku temu i proslijedite ga relevantnoj jedinici.

Četiri predloška za kopiranje

Za skupnu klasifikaciju:

Klasificirajte svaku od sljedećih recenzija: polaritet [pozitivno/negativno/neutralno] i temu [cijena/dostava/kvaliteta/usluga/ostalo]. Moguću ironiju označite s [?]. Na kraju dajte sažetak: postotak svakog polariteta i 3 najčešće negativne teme. Maskirajte osobne podatke. Komentari:1) ...2) ...

Za produbljivanje teme:

Pročitajte ove negativne recenzije i produbite temu "otpreme": koji se podproblemi ističu (kašnjenje, oštećenje, praćenje, komunikacija)? Navedite koliko komentara i 1 reprezentativni citat za svaki podbroj. Nemojte izmišljati brojeve; Oslonite se samo na komentare koje sam dao. Komentari: ...

Za usporedbu trendova:

Usporedite sažetak sentimenta za dva razdoblja. Prošli mjesec: pozitivno 58%, negativno 30%, neutralno 12%; glavna negativna tema: cijena. Ovaj mjesec: pozitivno 49%, negativno 41%, neutralno 10%; Glavna negativna tema: otprema. Što se promijenilo, koji su mogući razlozi? NE TVRDI točan razlog; Potvrdite hipotezu i napišite kako provjeriti svaku hipotezu.

Da biste uvid pretvorili u akciju:

Iz sljedećeg sažetka analize raspoloženja proizlaze 3 konkretna prijedloga akcije (kratkoročno). Za svaki prijedlog: problem, predložena radnja, koja jedinica, kako mjeriti. Sažetak: [zalijepi sažetak].

Slab upit / Jak upit

Slab upit:

Analizirajte osjećaje ovih komentara.

Ni polaritet, ni tema ni format sažetka nisu jasni; AI proizvodi neuredne, neprovjerljive rezultate i propušta ironiju.

Snažan upit:

Razvrstajte 60 recenzija u nastavku (pozitivno/negativno/neutralno + tema: cijena/dostava/kvaliteta/usluga/ostalo). Označite [?] za one sa sumnjom na ironiju. Samo izmislite brojeve na temelju komentara koje sam dao. Izlaz: (1) postoci polariteta, (2) 3 najčešće negativne teme i 1 citat za svaku, (3) 3 sumnjive oznake koje trebam provjeriti.

Potonji pruža pouzdan, djelotvoran rezultat jer uključuje format, granicu i korak provjere.

tri mini kućišta

Slučaj 1. Telekomunikacijski brend analizirao je AI-jem 1400 komentara nakon kampanje; otkrili da je 64% negativnosti usredotočeno na temu "zbrka oko računa". S tim su uvidom doradili FAQ i komunikaciju kampanje; sljedeći mjesec ista je tema pala sa 64% na 22%.

Slučaj 2. Marka hrane predstavila je AI-jev sažetak "80% pozitivno" menadžmentu bez provjere. Nakon čitanja primjera postalo je jasno da je većina komentara koji su ocijenjeni kao "pozitivni" bili ironični ("Sviđa mi se, stigao je pokvaren treći put"). Stvarna pozitivna stopa bila je 52%. Pouka: nemojte prijaviti postotak bez provjere na primjerima.

Slučaj 3. Brand e-trgovine pokrenuo je trenutnu kampanju isprike nakon što je zaključio da je "negativnost eksplodirala" od samo 18 komentara; Međutim, uzorak je bio vrlo mali i proturječio je općoj slici. Nepotrebna kampanja stvorila je pomutnju. Pouka: nemojte donositi velike zaključke iz malog uzorka.

Uobičajene greške

  • Ne obazirući se na ironiju. Sarkastične komentare smatrajte pozitivnima.
  • Ne provjerava postotak. Primjer: Stavljanje broja na izvješće bez čitanja.
  • Mali uzorak. Izvođenje konačnog trenda iz 15-20 komentara.
  • Beskontaktna analiza. Reći "negativno se povećao" i ne pronaći razlog; ne proizvodi akciju.
  • Bez maskiranja osobnih podataka. Davanje imena recenzentima alatu.
  • Definitivno navodeći razlog. Zamjena korelacije za uzročnost i poduzimanje pogrešnih radnji.

Predmetna analiza i usporedba s konkurentima

Metoda koja analizu sentimenta podiže korak dalje je analiza temeljena na aspektima: umjesto sažimanja komentara u jednu pozitivnu/negativnu oznaku, ocjenjujte različite teme unutar njega zasebno. Na primjer, rečenica "Proizvod je odličan, ali je dostava užasna, a cijena razumna" ne uklapa se u jedan polaritet; analiza temeljena na temama to rastavlja na "proizvod: pozitivno, otprema: negativno, cijena: pozitivno." Ova razlika je mnogo više orijentirana na akciju, jer jasno pokazuje koji problem proizvodi zadovoljstvo, a koji proizvodi nezadovoljstvo. Ovu dubinu možete postići tako da kažete umjetnoj inteligenciji da "svaki komentar podijeli u njegove teme i da za svaku temu poseban polaritet".

Druga moćna upotreba je usporedna analiza konkurenta (usporedba vlastite izvedbe s konkurencijom). Ako stavove o vlastitom brendu usporedite s onima svojih konkurenata, brojka "naša negativnost je 30%" ima smisla: ako je prosjek industrije 45%, dobro vam ide, ako je 15%, zaostajete. Međutim, kada prikupljate podatke o konkurenciji, koristite samo javno dostupne, legitimne izvore; Izbjegavajte neovlašteno prikupljanje podataka i narušavanje privatnosti. Svrha benchmarkinga nije imitirati konkurenciju, već kontekstualizirati vlastite snage i slabosti. U obje metode osnovno pravilo ostaje isto: provjerite klasifikaciju umjetne inteligencije stvarnim primjerima i predstavite razlog kao hipotezu, a ne kao definitivan.

Ukratko

Analiza osjećaja mjeri puls zajednice: daje polaritet, intenzitet i što je najvažnije temu. AI sortira stotine komentara u sekundi, ali može propustiti ironiju, sleng i miješane emocije. Vrijednost povezuje negativnost s temom i pretvara je u djelo. Upotrijebite odgovarajući uzorak, provjerite postotke stvarnim uzorcima, postavite hipotezu o uzroku i potvrdite ga. Broj je početak; Odluka je vaša.

Savjet: Zamislite analizu osjećaja kao kontinuirani film, a ne fotografiju u jednom kadru. Ako ponavljate isto mjerenje istom metodom svaki tjedan, vidjet ćete trend (povećava li se ili opada) koji je mnogo vredniji od apsolutnog postotka. Gledanje kako se trend mijenja nakon kampanje, proizvoda ili krize mnogo je snažniji unos odluke od postotka jednog tjedna.

Zadatak aplikacije

Prikupite (ili napišite) najmanje 40 oglednih komentara. Neka AI napravi polaritet + klasifikaciju tema i sažetak. Ručno pročitajte 5 uzoraka svakog polariteta i ispravite najmanje 3 netočne/upitne oznake. Odaberite najčešću negativnu temu, generirajte 3 konkretna prijedloga akcije i zapišite kako će se mjeriti za svaku.

popis za provjeru

  • [ ] Koristio sam odgovarajući uzorak (100+ idealno).
  • [ ] Maskirao sam osobne podatke.
  • [ ] Napravio sam klasifikaciju polariteta + teme.
  • [ ] Pročitao sam primjere iz svake klase i provjerio oznake.
  • [ ] Osumnjičene ironije označio sam zasebno.
  • [ ] Negativnu temu najčešće sam pripisivao radnji.
  • [ ] Razlog sam predstavio kao hipotezu koju treba provjeriti, a ne konačnu.