Jednostka 6 / 11

Analiza komentarzy i nastrojów: śledzenie pulsu społeczności

Zyski:

  • Możliwość interpretacji wyników analizy nastrojów dotyczących polaryzacji, intensywności i tematu oraz klasyfikowania setek komentarzy za pomocą sztucznej inteligencji
  • Znajomość granic takich jak ironia, slang i mieszane uczucia oraz umiejętność weryfikowania procentów na realnych przykładach
  • Umiejętność powiązania negatywności z tematem i przekształcenia go w konkretne działanie oraz przetestowania przyczyny jako hipotezy

To, o czym marka mówi w mediach społecznościowych, jest równie ważne, jak to, o czym się mówi. Utrzymanie pulsu marki wśród setek komentarzy, tysięcy wzmianek i stale napływających komunikatów to stos danych zbyt duży, aby można je było śledzić ręcznie. Tutaj z pomocą przychodzi analiza nastrojów. Metoda ta, zwana po angielsku analizą sentymentów, polega na automatycznej klasyfikacji tonu emocjonalnego tekstu (pozytywny, negatywny, neutralny). Sztuczna inteligencja może przeczytać setki recenzji w ciągu kilku sekund i przygotować podsumowanie typu „pozytywne komentarze w tym tygodniu to 62%, negatywne 28%, neutralne 10%; większość negatywnych komentarzy dotyczy wysyłki”. Daje to menedżerowi mediów społecznościowych nieocenione narzędzie wczesnego ostrzegania i wglądu. Ale analiza nastrojów to także przypuszczenie: może błędnie odczytać ironię, humor i lokalny slang. Ważne jest, aby nie patrzeć na liczbę, ale na przykłady stojące za liczbą.

Co mierzy analiza nastrojów, a czego nie mierzy?

Analiza nastrojów daje trzy podstawowe wyniki. Polaryzacja: czy tekst jest pozytywny, negatywny czy neutralny. Intensywność: siła emocji (łagodne niezadowolenie lub złość). Temat/temat: czego dotyczy emocja (cena, wysyłka, jakość, obsługa). Najcenniejszy wynik to trzeci: sam „wzrost negatywności” nie przekłada się na działanie; „70% negatywnych opinii dotyczy opóźnień w transporcie” skutkuje bezpośrednią akcją.

Znajomość granic analizy nastrojów jest niezbędna. Ironia i sarkazm: Sztuczna inteligencja może uznać zdanie „Świetnie, znowu nie działa 👏” jako pozytywne. Slang i język narodowy: mogą błędnie odczytać idiomy regionalne. Kontekst: słowo „bomba” ma pozytywne znaczenie w przypadku produktu i negatywne w wiadomościach. Mieszane odczucia: „Produkt jest ładny, ale drogi” niesie ze sobą zarówno pozytywne, jak i negatywne opinie. Dlatego potraktuj analizę nastrojów jako punkt wyjścia, a nie ostateczną prawdę.

wyjście

Co to robi?

Limit/ryzyko

Polaryzacja (dodatnia/ujemna/neutralna)

zobacz ogólny nastrój

Ironia i karma tracą emocje

gęstość

Zrozumienie pilności

Może mierzyć przesadzenie nieprawidłowo

motyw/temat

wywołać akcję

Może przypisać to do złego tematu

Trend w czasie

wczesne ostrzeżenie

Wprowadzanie w błąd w przypadku małej próby

Uwaga: Nie uwzględniaj w raporcie zarządu wartości procentowych podanych w analizie nastrojów bez ich weryfikacji. Przeczytaj kilka realnych przykładów z każdej kategorii i wizualnie sprawdź, czy klasyfikacja jest prawidłowa; zwłaszcza te oznaczone jako „negatywne”.

Krok po kroku: badanie analizy nastrojów

  1. Zbieraj i czyść dane. Zbiorcze komentarze/wzmianki za określony okres; maskować dane osobowe.
  2. Sprawdź wielkość próbki. Odejmowanie wartości procentowej od 20 komentarzy jest mylące; Celuj w znaczącą liczbę (np. 100+).
  3. Klasyfikować. Niech sztuczna inteligencja wykona polaryzację + tagowanie motywu.
  4. Sprawdź na przykładach. Przeczytaj 5 przykładów z każdej klasy; napraw błędne tagi.
  5. Nadawaj priorytety tematom. Zidentyfikuj 3 tematy, które generują najwięcej negatywności.
  6. Powiąż to z działaniem. Przygotuj projekt propozycji/działania dla każdego tematu i przekaż go odpowiedniej jednostce.

Cztery szablony do kopiowania

Dla klasyfikacji zbiorczej:

Sklasyfikuj każdą z następujących recenzji: polaryzacja [pozytywna/negatywna/neutralna] i temat [cena/wysyłka/jakość/usługa/inne]. Zaznacz możliwą ironię za pomocą [?]. Na koniec podsumuj: procent każdej polaryzacji i 3 najczęstsze negatywne motywy. Maskuj dane osobowe. Komentarze:1) ...2) ...

Dla pogłębienia tematu:

Przeczytaj te negatywne recenzje i pogłębij temat „wysyłki”: jakie podproblemy się wyróżniają (opóźnienie, uszkodzenie, śledzenie, komunikacja)? Podaj liczbę komentarzy i 1 reprezentatywny cytat dla każdego podzagadnienia. Nie wymyślaj liczb; Po prostu opieraj się na komentarzach, które dałem. Komentarze: ...

Dla porównania trendów:

Porównaj podsumowanie nastrojów w obu okresach. Ostatni miesiąc: dodatni 58%, ujemny 30%, neutralny 12%; główny motyw negatywny: cena. W tym miesiącu: pozytywne 49%, negatywne 41%, neutralne 10%; Główny negatywny temat: wysyłka. Co się zmieniło, jakie są możliwe przyczyny? NIE PODAWAJ dokładnego powodu; Zweryfikuj hipotezę i napisz, jak zweryfikować każdą hipotezę.

Aby zamienić wiedzę w działanie:

Z poniższego podsumowania analizy nastrojów wyłaniają się 3 konkretne sugestie działań (krótkoterminowe). Dla każdej sugestii: problem, proponowane działanie, jednostka, sposób pomiaru. Podsumowanie: [wklej podsumowanie].

Słaba zachęta/silna zachęta

Słaba zachęta:

Przeanalizuj nastroje tych komentarzy.

Ani polaryzacja, temat, ani format podsumowania nie są jasne; Sztuczna inteligencja generuje niechlujny, nieweryfikowalny wynik i nie dostrzega ironii.

Potężny monit:

Posortuj 60 recenzji poniżej (pozytywne/negatywne/neutralne + temat: cena/wysyłka/jakość/obsługa/inne). Oznacz [?] dla tych, którzy podejrzewają ironię. Po prostu uzupełnij liczby na podstawie komentarzy, które dałem. Dane wyjściowe: (1) procenty polaryzacji, (2) 3 najczęstsze negatywne motywy i 1 cytat dla każdego, (3) 3 podejrzane tagi, które muszę zweryfikować.

Ten ostatni zapewnia niezawodny i praktyczny wynik, ponieważ obejmuje format, granicę i etap weryfikacji.

trzy mini etui

Przypadek 1. Marka telekomunikacyjna przeanalizowała za pomocą sztucznej inteligencji 1400 komentarzy po kampanii; odkryli, że 64% negatywnych opinii skupiało się wokół tematu „pomieszania rachunków”. Dzięki tej wiedzy udoskonalili często zadawane pytania i komunikację w ramach kampanii; w następnym miesiącu odsetek tego samego tematu spadł z 64% do 22%.

Przypadek 2. Marka żywności przedstawiła kierownictwu podsumowanie AI „80% pozytywne” bez weryfikacji. Po przeczytaniu przykładów stało się jasne, że większość komentarzy uznanych za „pozytywne” miała charakter ironiczny („Podobało mi się, po raz trzeci przyszedł zepsuty”). Rzeczywista stopa dodatnia wyniosła 52%. Lekcja: nie podawaj wartości procentowej bez sprawdzenia jej na przykładach.

Przypadek 3. Marka e-commerce rozpoczęła natychmiastową kampanię przeprosin po stwierdzeniu, że „eksplodowała negatywność” już na podstawie zaledwie 18 komentarzy; Próba była jednak bardzo mała i zaprzeczała ogólnemu obrazowi. Niepotrzebna kampania wywołała zamieszanie. Lekcja: nie wyciągaj dużych wniosków z małej próbki.

Typowe błędy

  • Ignorując ironię. Traktuj sarkastyczne komentarze jako pozytywne.
  • Nie sprawdzam procentu. Przykład: Umieszczenie numeru w raporcie bez jego czytania.
  • Mała próbka. Wyprowadzenie ostatecznego trendu z 15-20 komentarzy.
  • Analiza bezkontaktowa. Powiedzieć, że „wzrosło negatywnie” i nie znaleźć przyczyny; nie wywołuje działania.
  • Nie maskowanie danych osobowych. Nadanie narzędziu nazwiska recenzentów.
  • Definitywne określenie przyczyny. Mylenie korelacji z przyczynowością i podejmowanie niewłaściwych działań.

Analiza tematyczna i porównanie konkurencji

Metodą, która idzie o krok dalej w analizie nastrojów, jest analiza aspektowa: zamiast kompresować komentarz w jednym pozytywnym/negatywnym tagu, należy oddzielnie oceniać różne zawarte w nim tematy. Na przykład zdanie „Produkt jest świetny, ale wysyłka jest okropna, a cena rozsądna” nie mieści się w jednej polaryzacji; analiza tematyczna dzieli to na „produkt: pozytywny, wysyłka: negatywna, cena: pozytywna”. To rozróżnienie jest o wiele bardziej zorientowane na działanie, ponieważ wyraźnie pokazuje, która kwestia wywołuje satysfakcję, a która niezadowolenie. Można osiągnąć tę głębokość, nakazując sztucznej inteligencji, aby „podzieliła każdy komentarz na tematy i nadała każdemu tematowi oddzielną polaryzację”.

Drugim potężnym zastosowaniem jest benchmarking konkurencji (porównywanie własnych wyników z konkurencją). Jeśli zestawisz sentyment do własnej marki z sentymentem konkurencji, liczba „nasz negatywizm to 30%” ma sens: jeśli średnia w branży wynosi 45%, radzisz sobie dobrze, jeśli 15%, jesteś w tyle. Jednakże podczas zbierania danych konkurencji korzystaj wyłącznie z publicznie dostępnych, legalnych źródeł; Unikaj nieautoryzowanego gromadzenia danych i naruszeń prywatności. Celem benchmarkingu nie jest naśladowanie konkurencji, ale kontekstualizacja własnych mocnych i słabych stron. W obu metodach podstawowa zasada pozostaje taka sama: weryfikuj klasyfikację AI na rzeczywistych przykładach i przedstawiaj przyczynę w formie hipotezy, a nie ostatecznej.

Podsumowując

Analiza sentymentów mierzy puls społeczności: daje polaryzację, intensywność i, co najważniejsze, temat. Sztuczna inteligencja sortuje setki komentarzy na sekundę, ale może przeoczyć ironię, slang i mieszane emocje. Wartość łączy negatywność z tematem i zamienia ją w działanie. Użyj odpowiedniej próbki, zweryfikuj wartości procentowe z rzeczywistymi próbkami, postaw hipotezę o przyczynie i potwierdź ją. Liczba jest początkiem; Decyzja należy do Ciebie.

Wskazówka: pomyśl o analizie nastrojów jak o ciągłym filmie, a nie o jednorazowym zdjęciu. Jeśli będziesz powtarzać ten sam pomiar tą samą metodą co tydzień, zobaczysz trend (rosnący czy malejący), który jest znacznie cenniejszy niż bezwzględny procent. Obserwowanie zmian trendu po kampanii, produkcie lub kryzysie jest o wiele skuteczniejszym czynnikiem wpływającym na decyzję niż wartości procentowe z jednego tygodnia.

Zadanie aplikacji

Zbierz (lub napisz) co najmniej 40 przykładowych komentarzy. Niech sztuczna inteligencja wykona polaryzację + klasyfikację motywu i podsumowanie. Przeczytaj ręcznie 5 próbek każdej polaryzacji i popraw co najmniej 3 nieprawidłowe/wątpliwe etykiety. Wybierz najczęstszy negatywny motyw, wygeneruj 3 konkretne sugestie działań i zapisz, w jaki sposób będą one mierzone w przypadku każdego z nich.

lista kontrolna

  • [ ] Użyłem odpowiedniej próbki (ponad 100 idealnych).
  • [ ] Zamaskowałem dane osobowe.
  • [ ] Zrobiłem polaryzację + klasyfikację motywu.
  • [ ] Czytam przykłady z każdych zajęć i sprawdzam etykiety.
  • [ ] Osobno oznaczyłem podejrzanych o ironię.
  • [ ] Najczęściej przypisywałam akcji motyw negatywny.
  • [ ] Powód przedstawiłem jako hipotezę do sprawdzenia, a nie ostateczną.