Vienetas 6 / 11

Komentarų ir nuotaikų analizė: bendruomenės pulsas

Pelnas:

  • Gebėjimas interpretuoti sentimentų analizės poliškumą, intensyvumą ir temų rezultatus ir dirbtinio intelekto būdu klasifikuoti šimtus komentarų
  • Žinodami tokias ribas kaip ironija, slengas ir mišrios emocijos, ir mokėti patikrinti procentus su tikrais pavyzdžiais
  • Gebėjimas negatyvumą susieti su tema ir paversti konkrečiais veiksmais bei patikrinti priežastį kaip hipotezę

Tai, apie ką prekės ženklas kalba socialinėje žiniasklaidoje, yra taip pat svarbu, kaip tai, apie ką kalbama. Prekės ženklo pulso išlaikymas tarp šimtų komentarų, tūkstančių paminėjimų ir nuolat plūstančių pranešimų yra per didelė duomenų krūva, kad būtų galima juos sekti rankiniu būdu. Čia atsiranda sentimentų analizė. Šis metodas, angliškai vadinamas sentimentų analize, yra automatinio teksto emocinio tono (teigiamas, neigiamas, neutralus) klasifikavimo procesas. Dirbtinis intelektas per kelias sekundes gali perskaityti šimtus atsiliepimų ir pateikti tokią santrauką kaip „šios savaitės teigiamų komentarų yra 62%, neigiamų 28%, neutralių 10%; dauguma neigiamų yra apie siuntimą. Tai suteikia socialinės žiniasklaidos valdytojui neįkainojamą išankstinio įspėjimo ir įžvalgos įrankį. Tačiau nuotaikų analizė taip pat yra spėjimas: ji gali klaidingai suprasti ironiją, humorą ir vietinį slengą. Būtina žiūrėti ne į skaičių, o į pavyzdžius, esančius už skaičiaus.

Ką matuoja sentimentų analizė ir ko ne?

Sentimentų analizė suteikia tris pagrindinius rezultatus. Poliškumas: teigiamas, neigiamas ar neutralus tekstas. Intensyvumas: emocijos stiprumas (lengvas nepasitenkinimas ar pyktis). Tema/tema: apie ką kyla emocija (kaina, siuntimas, kokybė, aptarnavimas). Vertingiausias rezultatas yra trečiasis: vien „padidėjęs negatyvumas“ neperauga į veiksmą; „70 % negatyvumo susiję su krovinio vėlavimu“ sukelia tiesioginį veiksmą.

Būtina žinoti jausmų analizės ribas. Ironija ir sarkazmas: AI gali laikyti sakinį „Puiku, tai vėl neveikia 👏“ kaip teigiamą. Slengas ir liaudies kalba: gali klaidingai suprasti regionines idiomas. Kontekstas: žodis „bomba“ yra teigiamas gaminyje ir neigiamas naujienų istorijoje. Nevienodos nuomonės: „Produktas gražus, bet brangus“ turi ir teigiamų, ir neigiamų. Taigi naudokite sentimentų analizę kaip atskaitos tašką, o ne kaip galutinę tiesą.

išvestis

Ką tai daro?

Riba / rizika

Poliškumas (teigiamas / neigiamas / neutralus)

pamatyti bendrą nuotaiką

Ironija ir karma pasigenda emocijų

tankis

Suprasti skubumą

Gali neteisingai įvertinti perdėjimą

tema/tema

sukurti veiksmą

Gali būti priskirta netinkamai temai

Tendencija laikui bėgant

išankstinis įspėjimas

Klaidinantis mažas imties dydis

Dėmesio: neįtraukite nuotaikų analizės pateiktų procentų į valdymo ataskaitą jų nepatikrinus. Perskaitykite keletą realių pavyzdžių iš kiekvienos kategorijos ir vizualiai patikrinkite, ar klasifikacija yra teisinga; ypač pažymėtus „neigiamu“.

Žingsnis po žingsnio: sentimentų analizės tyrimas

  1. Surinkite ir išvalykite duomenis. Apibendrinti komentarus/minėjimus konkrečiam laikotarpiui; maskuoti asmens duomenis.
  2. Patikrinkite mėginio dydį. Atimti procentą iš 20 komentarų yra klaidinanti; Siekite prasmingo skaičiaus (pvz., 100+).
  3. Klasifikuoti. Leiskite AI atlikti poliškumą + temų žymėjimą.
  4. Patvirtinkite pavyzdžiais. Perskaitykite 5 pavyzdžius iš kiekvienos klasės; ištaisyti netinkamas žymas.
  5. Suteikite pirmenybę temoms. Išskirkite 3 temas, kurios sukelia daugiausiai neigiamų dalykų.
  6. Susiekite tai su veiksmu. Pateikite kiekvienos temos pasiūlymo/veiksmo projektą ir persiųskite jį atitinkamam skyriui.

Keturi kopijuojami šablonai

Masiniam klasifikavimui:

Klasifikuokite kiekvieną iš šių atsiliepimų: poliškumas [teigiamas / neigiamas / neutralus] ir tema [kaina / pristatymas / kokybė / paslauga / kita]. Galima ironija pažymėti [?]. Galiausiai pateikite santrauką: kiekvieno poliškumo procentas ir 3 dažniausiai pasitaikančios neigiamos temos. Užmaskuoti asmeninius duomenis. Komentarai:1) ...2) ...

Temos gilinimui:

Perskaitykite šiuos neigiamus atsiliepimus ir gilinkitės į „gabenimo“ temą: kokios pagrindinės problemos išsiskiria (vėlavimas, žala, sekimas, bendravimas)? Pateikite kiek komentarų ir 1 reprezentatyvią citatą kiekvienai pokalbiui. Nesugalvokite skaičių; Tiesiog pasikliaukite mano pateiktais komentarais. Komentarai:...

Tendencijų palyginimui:

Palyginkite dviejų laikotarpių nuotaikų suvestinę.Praėjęs mėnuo: teigiamas 58%, neigiamas 30%, neutralus 12%; pagrindinė neigiama tema: kaina.Šį mėnesį: teigiama 49%, neigiama 41%, neutrali 10%; Pagrindinė neigiama tema: siuntimas. Kas pasikeitė, kokios galimos priežastys? NEREIKALUOK tikslios priežasties; Patikrinkite hipotezę ir parašykite, kaip patikrinti kiekvieną hipotezę.

Norėdami paversti įžvalgą veiksmu:

Iš šios nuotaikų analizės santraukos išryškėja 3 konkretūs veiksmų pasiūlymai (trumpalaikis). Kiekvienam pasiūlymui: problema, siūlomas veiksmas, kurį vienetą, kaip matuoti. Santrauka: [įklijuoti santrauką].

Silpnas raginimas / Stiprus raginimas

Silpnas raginimas:

Išanalizuokite šių komentarų nuotaikas.

Neaiškus nei poliškumas, nei tema, nei santraukos formatas; AI duoda nepatogų, nepatikrintą rezultatą ir pasigenda ironijos.

Galingas raginimas:

Rūšiuokite 60 atsiliepimų žemiau (teigiami / neigiami / neutralūs + tema: kaina / pristatymas / kokybė / paslauga / kita). Pažymėkite [?] tiems, kurie įtaria ironiją. Tiesiog sudarykite skaičius pagal mano pateiktas pastabas. Išvestis: (1) poliškumo procentai, (2) 3 dažniausiai pasitaikančios neigiamos temos ir 1 citata kiekvienai, (3) 3 įtartinos žymos, kurias turiu patikrinti.

Pastarasis suteikia patikimą, veiksmingą rezultatą, nes apima formatą, ribas ir patvirtinimo veiksmą.

trys mini dėklai

1 atvejis. Telekomunikacijų prekės ženklas išanalizavo 1 400 komentarų po kampanijos su AI; nustatė, kad 64 % negatyvumo buvo susiję su „sąskaitų painiavos“ tema. Su šia įžvalga jie patobulino DUK ir kampanijos komunikaciją; kitą mėnesį ta pati tema sumažėjo nuo 64% iki 22%.

2 atvejis. Maisto prekės ženklas vadovybei pateikė AI „80 % teigiamą“ santrauką be patikrinimo. Perskaičius pavyzdžius paaiškėjo, kad dauguma komentarų, kurie buvo laikomi „pozityviais“, buvo ironiški („Man patiko, trečią kartą atkeliavo sugedęs“). Faktinis teigiamas rodiklis buvo 52%. Pamoka: nenurodykite procentų, nepatvirtinus jų pavyzdžiais.

3 atvejis. E-komercijos prekės ženklas iškart pradėjo atsiprašymo kampaniją, padaręs išvadą, kad „negatyvumas sprogo“ tik iš 18 komentarų; Tačiau imtis buvo labai maža ir prieštarauja bendram vaizdui. Nereikalinga kampanija sukėlė sumaištį. Pamoka: nedarykite didelių išvadų iš mažos imties.

Dažnos klaidos

  • Ironijos nepaisymas. Sarkastiškus komentarus vertinkite kaip teigiamus.
  • Procentų netikrina. Pavyzdys: numerio įrašymas į ataskaitą jo neskaitęs.
  • Mažas pavyzdys. Iš 15–20 komentarų gaunama galutinė tendencija.
  • Bekontaktė analizė. Sakydamas „padaugėjo neigiamai“ ir nerasti priežasties; nesukelia veiksmo.
  • Neužmaskuoti asmens duomenų. Recenzentų vardų suteikimas įrankiui.
  • Galutinai paskelbus priežastį. Klaidingas ryšys su priežastiniu ryšiu ir neteisingas veiksmas.

Dalyko analizė ir konkurentų palyginimas

Metodas, kuris žengia dar vieną žingsnį į nuotaikų analizę, yra aspektais pagrįsta analizė: užuot suspaudus komentarą į vieną teigiamą / neigiamą žymą, atskirai įvertinamos skirtingos temos. Pavyzdžiui, sakinys „Prekė puiki, bet siuntimas baisus, o kaina protinga“ netelpa į vieną poliškumą; tema pagrįsta analizė suskirsto tai į „produktas: teigiamas, pristatymas: neigiamas, kaina: teigiamas“. Šis skirtumas yra daug labiau orientuotas į veiksmus, nes aiškiai parodo, kuri problema kelia pasitenkinimą, o kuri – nepasitenkinimą. Tokį gylį galite pasiekti liepdami dirbtiniam intelektui „kiekvieną komentarą suskirstyti į temas ir kiekvienai temai suteikti atskirą poliškumą“.

Antras galingas panaudojimo būdas yra konkurentų lyginamoji analizė (savo ir konkurentų veiklos palyginimas). Jei sugretinate nuotaikas apie savo prekės ženklą su konkurentų nuotaikomis, skaičius „mūsų negatyvumas yra 30%“ yra prasmingas: jei pramonės vidurkis yra 45%, jums sekasi gerai, jei 15%, jūs atsiliekate. Tačiau rinkdami konkurentų duomenis naudokite tik viešai prieinamus, teisėtus šaltinius; Venkite neteisėto duomenų rinkimo ir privatumo pažeidimų. Lyginamosios analizės tikslas yra ne imituoti konkurenciją, o kontekstualizuoti savo stipriąsias ir silpnąsias puses. Abiejuose metoduose pagrindinė taisyklė išlieka ta pati: patikrinkite AI klasifikaciją realiais pavyzdžiais ir pateikite priežastį kaip hipotezę, o ne galutinę.

Apibendrinant

Sentimentų analizė matuoja bendruomenės pulsą: suteikia poliškumą, intensyvumą ir svarbiausia temą. AI surūšiuoja šimtus komentarų per sekundę, bet gali praleisti ironiją, žargoną ir įvairias emocijas. Vertė sujungia negatyvą su tema ir paverčia jį veiksmu. Naudokite tinkamą pavyzdį, patikrinkite procentus su tikrais mėginiais, iškelkite priežastį ir patvirtinkite ją. Skaičius yra pradžia; Sprendimas yra jūsų.

Patarimas: galvokite apie jausmų analizę kaip nuolatinį filmą, o ne vieną nuotrauką. Jei kiekvieną savaitę kartosite tą patį matavimą tuo pačiu metodu, pamatysite tendenciją (didėjimo ar mažėjimo), kuri yra daug vertingesnė nei absoliutus procentas. Stebėti, kaip keičiasi tendencija po kampanijos, produkto ar krizės, yra daug galingesnis sprendimas nei vienos savaitės procentas.

Taikymo užduotis

Surinkite (arba parašykite) bent 40 pavyzdinių komentarų. Leiskite dirbtiniam intelektui atlikti poliškumą + temų klasifikaciją ir santrauką. Ranka perskaitykite 5 kiekvieno poliškumo pavyzdžius ir pataisykite bent 3 neteisingas/abejotinas etiketes. Pasirinkite dažniausiai pasitaikančią neigiamą temą, sugeneruokite 3 konkrečius veiksmų pasiūlymus ir užrašykite, kaip jie bus vertinami kiekvienam.

kontrolinis sąrašas

  • [ ] Naudojau tinkamą pavyzdį (100+ idealus).
  • [ ] Užmaskavau asmens duomenis.
  • [ ] Atlikau poliškumo + temos klasifikaciją.
  • [ ] Perskaičiau pavyzdžius iš kiekvienos klasės ir patikrinau etiketes.
  • [ ] Ironijos įtariamuosius pažymėjau atskirai.
  • [ ] Neigiamą temą dažniausiai priskirdavau veiksmui.
  • [ ] Priežastį pateikiau kaip hipotezę, kurią reikia patikrinti, o ne galutinę.