Jedinica 6 / 11

Analiza komentara i osjećaja: Uzimanje pulsa zajednice

Dobici:

  • Sposobnost tumačenja polariteta, intenziteta i tema analize sentimenta i klasificiranja stotina komentara s umjetnom inteligencijom
  • Poznavanje granica kao što su ironija, sleng i pomiješane emocije i mogućnost provjere postotaka stvarnim primjerima
  • Sposobnost povezivanja negativnosti sa temom i pretvaranja u konkretnu akciju i testiranja razloga kao hipoteze

Ono o čemu brend govori na društvenim mrežama jednako je važno kao i ono o čemu se priča. Održavanje pulsa brenda među stotinama komentara, hiljadama spominjanja i poruka koje neprestano teku je gomila podataka prevelika da bi se mogla pratiti ručno. Tu u igru ​​ulazi analiza sentimenta. Ova metoda, koja se na engleskom zove analiza osjećaja, je proces automatske klasifikacije emocionalnog tona (pozitivnog, negativnog, neutralnog) teksta. Umjetna inteligencija može pročitati stotine recenzija u sekundi i doći do rezimea poput "ovonedeljnih pozitivnih komentara je 62%, negativnih 28%, neutralnih 10%; većina negativnih se odnosi na dostavu." Ovo menadžeru društvenih medija daje neprocjenjiv alat za rano upozorenje i uvid. Ali analiza osjećaja je također nagađanje: može pogrešno protumačiti ironiju, humor i lokalni sleng. Bitno je gledati ne broj, već primjere iza broja.

Šta analiza sentimenta mjeri, a šta ne mjeri?

Analiza osjećaja daje tri osnovna rezultata. Polaritet: je li tekst pozitivan, negativan ili neutralan. Intenzitet: snaga emocije (blago nezadovoljstvo ili ljutnja). Tema/tema: o čemu se radi u emociji (cijena, dostava, kvalitet, usluga). Najvredniji ishod je treći: „povećana negativnost“ sama po sebi ne prevodi se u akciju; "70% negativnosti se odnosi na kašnjenje tereta" proizvodi direktnu akciju.

Bitno je poznavati granice analize osjećaja. Ironija i sarkazam: AI može smatrati rečenicu "Super, više ne radi 👏" pozitivnom. Sleng i narodni jezik: može pogrešno protumačiti regionalne idiome. Kontekst: Riječ "bomba" je pozitivna u proizvodu i negativna u vijestima. Mješoviti osjećaji: "Proizvod je lijep, ali skup" nosi i pozitivne i negativne strane. Stoga koristite analizu osjećaja kao polaznu tačku, a ne kao konačnu istinu.

izlaz

šta to radi?

Limit / rizik

Polaritet (pozitivno/negativno/neutralno)

vidi opšte raspoloženje

Ironiji i karmi nedostaje emocija

gustina

Razumijevanje hitnosti

Može pogrešno izmjeriti preuveličavanje

tema/tema

proizvesti akciju

Možda ga dodijelite pogrešnoj temi

Trend tokom vremena

rano upozorenje

Obmanjujuće u maloj veličini uzorka

Pažnja: Nemojte uključivati ​​procente date analizom sentimenta u izvještaj menadžmenta bez njihove provjere. Pročitajte nekoliko stvarnih primjera iz svake kategorije i vizualno provjerite da li je klasifikacija ispravna; posebno onih označenih kao "negativni".

Korak po korak: studija analize osjećaja

  1. Prikupite i očistite podatke. Zbirni komentari/pominjanja za određeni period; maskirati lične podatke.
  2. Provjerite veličinu uzorka. Oduzimanje procenta od 20 komentara je pogrešno; Ciljajte na značajan broj (npr. 100+).
  3. Razvrstaj. Neka AI izvrši polaritet + označavanje tema.
  4. Potvrdite primjerima. Pročitaj 5 primjera iz svakog razreda; popravi pogrešne oznake.
  5. Dajte prioritet temama. Identifikujte 3 teme koje stvaraju najviše negativnosti.
  6. Vežite to za akciju. Napravite prijedlog/nacrt radnje za svaku temu i proslijedite ga relevantnoj jedinici.

Četiri šablona za kopiranje

Za masovnu klasifikaciju:

Klasificirajte svaku od sljedećih recenzija: polaritet [pozitivno/negativno/neutralno] i tema [cijena/dostava/kvalitet/usluga/ostalo]. Označite moguću ironiju sa [?]. Na kraju dajte sažetak: postotak svakog polariteta i 3 najčešće negativne teme. Maskirajte lične podatke. Komentari:1) ...2) ...

Za produbljivanje teme:

Pročitajte ove negativne kritike i produbite temu "pošiljanja": koja se podpitanja ističu (kašnjenje, oštećenja, praćenje, komunikacija)? Navedite koliko komentara i 1 reprezentativni citat za svako pod-izdanje. Ne izmišljajte brojeve; Samo se oslonite na komentare koje sam dao. Komentari: ...

Za poređenje trendova:

Uporedite sažetak raspoloženja za dva perioda. Prošli mjesec: pozitivno 58%, negativno 30%, neutralno 12%; glavna negativna tema: cijena. Ovaj mjesec: pozitivno 49%, negativno 41%, neutralno 10%; Glavna negativna tema: otprema. Šta se promijenilo, koji su mogući razlozi? NE TUŽITE tačan razlog; Provjeri hipotezu i napiši kako provjeriti za svaku hipotezu.

Da pretvorite uvid u akciju:

Iz sljedećeg rezimea analize osjećaja proizilaze 3 konkretna prijedloga akcije (kratkoročni). Za svaki prijedlog: problem, predložena radnja, koja jedinica, kako mjeriti. Sažetak: [zalijepi sažetak].

Slaba prompt / Jaka prompt

Slab upit:

Analizirajte osjećaj ovih komentara.

Ni polaritet, ni tema ni format rezimea nisu jasni; AI proizvodi neuredan, neprovjerljiv rezultat i propušta ironiju.

Snažan upit:

Poredajte 60 recenzija ispod (pozitivne/negativne/neutralne + tema: cijena/dostava/kvalitet/usluga/ostalo). Oznaka [?] za one koji sumnjaju na ironiju. Samo izračunajte brojeve na osnovu komentara koje sam dao. Izlaz: (1) procenti polariteta, (2) 3 najčešće negativne teme i 1 citat za svaku, (3) 3 sumnjive oznake koje moram provjeriti.

Potonji pruža pouzdan, djelotvoran rezultat jer uključuje format, granicu i korak verifikacije.

tri mini kofera

Slučaj 1. Telekom brend analizirao je 1.400 komentara nakon kampanje pomoću AI; otkrili da je 64% negativnosti usredsređeno na temu „zabune računa“. Sa ovim uvidom, poboljšali su često postavljana pitanja i komunikaciju u kampanji; sljedećeg mjeseca ista tema je pala sa 64% na 22%.

Slučaj 2. Brend hrane je predstavio AI-jev "80% pozitivan" sažetak menadžmentu bez provjere. Nakon čitanja primjera, postalo je jasno da je većina komentara koji su ocijenjeni kao "pozitivni" ironični ("Svidjelo mi se, stigao je pokvaren po treći put"). Stvarna pozitivna stopa iznosila je 52%. Pouka: nemojte iznositi postotak, a da ga ne potvrdite primjerima.

Slučaj 3. Brend e-trgovine pokrenuo je hitnu kampanju izvinjenja nakon što je zaključio da je "negativnost eksplodirala" iz samo 18 komentara; Međutim, uzorak je bio veoma mali i bio je u suprotnosti sa opštom slikom. Nepotrebna kampanja stvorila je zabunu. Pouka: nemojte izvlačiti velike zaključke iz malog uzorka.

Uobičajene greške

  • Ignorišući ironiju. Sarkastične komentare smatrajte pozitivnim.
  • Ne provjeravam postotak. Primjer: Stavljanje broja na izvještaj bez čitanja.
  • Mali uzorak. Izvođenje definitivnog trenda iz 15-20 komentara.
  • Beskontaktna analiza. Reći "negativno se povećao" i ne pronaći razlog; ne proizvodi akciju.
  • Ne maskiranje ličnih podataka. Davanje imena recenzenta alatu.
  • Definitivno deklarisanje razloga. Pogrešna korelacija za uzročnost i poduzimanje pogrešne radnje.

Predmetna analiza i poređenje konkurenata

Metoda koja odvodi analizu osjećaja korak dalje je analiza zasnovana na aspektima: umjesto komprimiranja komentara u jednu pozitivnu/negativnu oznaku, odvojeno procjenjuju različite teme unutar njega. Na primjer, rečenica "Proizvod je odličan, ali isporuka je užasna i cijena je razumna" ne uklapa se u jedan polaritet; analiza zasnovana na temi ovo raščlanjuje na "proizvod: pozitivan, dostava: negativan, cijena: pozitivan." Ova razlika je mnogo više orijentisana na akciju, jer jasno pokazuje koje pitanje proizvodi zadovoljstvo, a koje nezadovoljstvo. Ovu dubinu možete postići tako što ćete reći umjetnoj inteligenciji da "podijeli svaki komentar na njegove teme i da za svaku temu da poseban polaritet".

Druga moćna upotreba je benchmarking konkurenata (upoređivanje vlastitog učinka sa konkurentima). Ako suprotstavite sentiment o vlastitom brendu sa onim vaših konkurenata, broj "naša negativnost je 30%" ima smisla: ako je prosjek industrije 45%, radite dobro, ako je 15%, zaostajete. Međutim, kada prikupljate podatke o konkurentima, koristite samo javno dostupne, legitimne izvore; Izbjegnite neovlašteno prikupljanje podataka i kršenje privatnosti. Svrha benčmarkinga nije oponašanje konkurencije, već kontekstualiziranje vlastitih snaga i slabosti. U obje metode, osnovno pravilo ostaje isto: provjeriti klasifikaciju AI stvarnim primjerima i predstaviti razlog kao hipotezu, a ne kao konačan.

Ukratko

Analiza osjećaja mjeri puls zajednice: daje polaritet, intenzitet i što je najvažnije temu. AI sortira stotine komentara u sekundi, ali može propustiti ironiju, sleng i pomiješane emocije. Vrijednost povezuje negativnost s temom i pretvara je u akciju. Koristite adekvatan uzorak, provjerite procente sa stvarnim uzorcima, pretpostavite uzrok i potvrdite ga. Broj je početak; Odluka je tvoja.

Savjet: Zamišljajte analizu osjećaja kao kontinuirani film, a ne jednokratnu fotografiju. Ako ponavljate isto mjerenje istom metodom svake sedmice, vidjet ćete trend (da li raste ili opada) koji je mnogo vrijedniji od apsolutnog procenta. Gledanje kako se trend mijenja nakon kampanje, proizvoda ili krize mnogo je moćniji unos odluke od procenta jedne sedmice.

Zadatak aplikacije

Prikupite (ili napišite) najmanje 40 primjera komentara. Neka AI izvrši klasifikaciju polariteta + tema i sažetak. Ručno pročitajte 5 uzoraka svakog polariteta i ispravite najmanje 3 netačne/sumnjive oznake. Odaberite najčešću negativnu temu, generirajte 3 konkretne akcije i zapišite kako će se mjeriti za svaku.

kontrolna lista

  • [ ] Koristio sam adekvatan uzorak (100+ idealnih).
  • [ ] Sakrio sam lične podatke.
  • [ ] Uradio sam klasifikaciju polariteta + tema.
  • [ ] Pročitao sam primjere iz svake klase i provjerio oznake.
  • [ ] Osumnjičene za ironiju sam označio posebno.
  • [ ] Negativnu temu sam najčešće pripisivao radnji.
  • [ ] Razlog sam predstavio kao hipotezu koju treba provjeriti, a ne kao konačnu.