Jedinica 6 / 12

Analiza i interpretacija podataka: umjetna inteligencija s tabelarnim podacima

Dobici:

  • Sposobnost analize prodaje, troškova i operativnih tabela s umjetnom inteligencijom i otkrivanja trendova, prekida i odstupanja
  • Sposobnost provjere u odnosu na aritmetičke greške i halucinacije ponavljanjem ili ručnom provjerom svakog izračuna
  • Sposobnost razlikovanja korelacije od uzročnosti i pitanja kvaliteta podataka i granica uzorka prije interpretacije

Jedna od najčešće ponavljanih fraza u menadžment konsaltingu je: "Šta govore brojke?" Podaci o prodaji kupaca, tabela troškova, segmenti kupaca ili operativni pokazatelji; svi pričaju priču. Posao konsultanta je da pronađe tu priču, dokaže je i jasno pokaže donosiocu odluke. Umjetna inteligencija tumači grafikon u sekundi, ukazuje na trendove, vrši proračune, pa čak i generiše kod (Python, Excel formula) za analizu. Ali ovdje postoji posebna opasnost: AI može tiho pogriješiti u aritmetici i prikazati pogrešan broj s ispravnom samopouzdanjem. Stoga je zlatno pravilo u analizi podataka ponoviti ili ručno provjeriti svaki izračun.

Dva načina rada sa podacima

Postoje dvije primarne metode analize podataka sa AI, a poznavanje razlike je ključno za tačnost.

  1. Tekstualna interpretacija modela: Zalijepite podatke direktno u chat i kažete "komentiraj". Model čita obrasce, ali "mentalno" obavlja proračune; Ovo je put sa najvećim rizikom od greške. Pogodno za male tabele i kvalitativnu interpretaciju, a ne za precizno računovodstvo.
  2. Generacija koda/alata: Ispisujete kod za analizu (Python/pandas) ili Excel formulu na modelu; Kod vrši proračun, a ne model. Ovaj način je mnogo pouzdaniji jer aritmetika radi u determinističkom alatu. Preferirajte ga za velike podatke i precizan broj.
Savjet: Ako vam je potreban tačan broj (ukupan promet, prosjek, stopa rasta) zamolite model da "napiše Excel formulu/Python kod koji ovo izračunava", pokrenite rezultat sami. Nikada ne smatrajte broj koji je dao model konačnim.

Kako postaviti prompt za analizu

Dobar upit za analizu uključuje podatke, postavljeno pitanje i pravilo validacije.

Vaša uloga: analitičar podataka. Ispod je 24-mjesečni grafikon prodaje (mjesec, regija, proizvod, količina, promet). Zadatak: 1) Sumirajte ukupan i mjesečni trend prometa. 2) Pronađite 3 najbrže rastuće i najbrže smanjivajuće regije-proizvod. 3) Označite da li postoje odstupanja (neočekivani skok/pad). Pravila: - Napišite Excel formulu koja pravi svaki proračun pored nje; Provjeriću.- Odvojite tumačenje od podataka: prvo „podaci govore“, zatim „moguće značenje“.- Ne tvrdite uzročnost; prikaži samo uzorak.

Ovaj zahtjev ima tri kritična elementa: zahtijevanje formule (provjerljivost), odvajanje podataka od interpretacije (integritet) i zabranu tvrdnje o uzročnosti (predmet sljedećeg odjeljka).

Korelacija nije uzročna veza

Najčešća i najskuplja logička greška u analizi je pretpostavka da jedna od dvije stvari koje djeluju zajedno uzrokuje drugu. Samo zato što se dvije varijable povećavaju zajedno (korelacija) ne dokazuje da jedna uzrokuje drugu (uzročnost); Možda postoji treći faktor ili slučajnost. Klasičan primjer: kako raste prodaja sladoleda, tako se povećavaju i utopljenici; Razlog nije sladoled, vruće vrijeme podiže i jedno i drugo.

AI može lako napisati korelaciju kao "X povećava Y." Kada konsultant vidi ovu rečenicu, treba da stane i pita: "Da li je to zaista razlog ili postoji skriveni faktor?" Tvrdnja o uzročnosti; kontrolisano poređenje zahteva poznavanje vremenskog niza i domena.

Vaša uloga: analitičar kritičnih podataka. Sljedeća analiza sadrži tvrdnju "X povećava Y". Zadatak: - Procijenite da li je ovaj odnos korelacija ili opravdana uzročnost. - Navedite 3 moguća latentna (treća) faktora koji mogu utjecati na oba. - Recite koji dodatni dokazi (grupa za poređenje, vremenski niz) su potrebni da podrže uzročnost. Koristite strogi jezik; Napišite "moguće" i "treba testirati".

Ispitivanje kvaliteta podataka prije interpretacije

Dobra analiza ne dolazi iz loših podataka. Postavite svakom grafikonu ova pitanja prije nego što komentirate:

kontrolu

Zašto je to važno?

Kako se brinuti

podaci koji nedostaju

Prazne ćelije iskrivljuju srednju vrijednost

Odnos prazna/nula

outliers

Samo jedan izuzetak iskrivljuje trend

Pogledajte min-max i distribuciju

Konzistentnost definicije

Da li je "promet" svaki mjesec isti?

Potvrdite definiciju stupca

vremenski raspon

Da li sezonskost dovodi u zabludu?

Uporedite godine

uzorak

Da li podaci predstavljaju cijeli univerzum?

Pitajte za stopu pokrića

Prije TUMAČENJA ove tabele, izvršite provjeru kvaliteta podataka:- Koji je omjer ćelija koje nedostaje/nula?- U kojim redovima su ekstremne (izuzetne) vrijednosti?- Da li su definicije kolona konzistentne, ima li sumnjivih? Samo dajte revizorski izvještaj; Nemojte još komentarisati.

tri mini kofera

Slučaj 1 — Tiha aritmetička greška. Konsultant ima da model prikupi 12-mjesečni promet; model kaže “142,6 miliona”. Konsultant provjerava u Excelu: stvarnih ukupno 128,4 miliona; Model je pogrešno dodao dva mjeseca. Da je tražena formula umjesto mentalnog proračuna, ne bi bilo greške. Da je pogrešan broj unesen u prezentaciju, povjerenje kupaca bi bilo poljuljano.

Slučaj 2 — Lažna uzročnost. U maloprodaji, model kaže: "Promet se povećao u mjesecima kada je popust bio ponuđen, tako da popust povećava promet." Konsultant se zaustavlja: popusti su već napravljeni tokom praznika; Glavni pokretač je potražnja za odmorom. Za mjerenje efekta popusta potrebno je poređenje sa praznikom bez popusta. Lažno zaključivanje sprečava sugestiju sagorevanja marže poput „hajde da popustimo svaki mesec“.

Slučaj 3 — Outlier zamka. Prosječna vrijednost narudžbe zone izgleda nenormalno visoka. Model ovo tumači kao "premium zonu". Konsultant otvara liniju: jedna korporativna narudžba od 4,2 miliona je naduvala prosek; Kada se ta linija ukloni, regija je obična. Korištenjem medijane bi se izbjegla ova zamka na prvom mjestu.

Slaba prompt / Jaka prompt

Slab upit:

Analizirajte ovaj grafikon prodaje i navedite ključne nalaze.

Model izračunava direktno, tvrdi uzročnost i daje neprovjerljive nalaze.

Snažan upit:

Vaša uloga: pedantan analitičar podataka. Prvo uradite reviziju kvaliteta podataka (nedostaju, odstupaju, konzistentnost definicije). Zatim: mjesečni trend, top 3 raščlanjivanja, outliers.- Napišite Excel formulu za svaki račun; Provjeriću.- Također dajte srednju vrijednost umjesto srednje vrijednosti (da biste vidjeli efekat koji se izdvaja).- Odvojite "podaci govore" od "mogućeg značenja"; NEMOJTE TUŽITI uzročnost. - Označite "nejasno" gdje niste sigurni.

Segmentacija: istina koju prosjek krije

Jedan od najmoćnijih poteza u konsultantskoj analizi je segmentacija: razbijanje ukupnog broja na smislene podgrupe. “Prosječni kupac” je često nepostojeći konstrukt; Istina se krije u podgrupama. Na primjer, dok se čini da je prosječna profitna marža 8%, 20% kupaca može donijeti maržu od 25%, a 30% gubitak; prosjek potpuno skriva ovu činjenicu. Umjetna inteligencija vam pomaže da brzo raščlanite grafikon po različitim osama (tip kupca, regija, proizvod, kanal) i otkrijete koji pregled pokazuje najupečatljiviju razliku.

Vaša uloga: analitičar podataka. Tabela je ispod. Zadatak: Prelomite ove podatke na sljedeću osu: [tip kupca / regija / proizvod]. Za svaku grupu: ukupno, udio (%), srednja vrijednost I medijana, veličina grupe (n). Pravila:- Ako grupa n<30, označite "mali uzorak - pažnja".- Napišite formulu za svaki račun; Ja ću provjeriti.- Prikaži najvišu i najnižu grupu; Procijenite da li je razlika stvarna ili zbog jednog odstupanja. Prvo da vam kažem koji slom očekujem: [hipoteza].

Uobičajene greške

  • Oslanjajući se na proračun glave modela. Preusmjeriti aritmetiku determinističkom alatu (Excel/Python); Nezavisno provjerite rezultat.
  • Pogrešna korelacija za uzročnost. Nemojte pisati rečenicu "X povećava Y" bez dokaza; Pitajte o skrivenom faktoru.
  • Slijepo gledajući u prosjek. Pojedinačni izlaz naduvava srednju vrednost; Vidi također medijana i distribucija.
  • Zaobilaženje kvaliteta podataka. Tumačenja koja proizlaze iz nepotpunih, duplih ili nekonzistentnih podataka su obmanjujuća; prvo provjeri.
  • Zaboravljam primjer. Generaliziranje sa malog ili pristranog uzorka na cijelu populaciju će proizvesti pogrešne rezultate.
  • Brkanje podataka sa interpretacijom. Pokažite odvojeno šta je merenje, a šta zaključak.
Pažnja: Ako će rezultat analize finansijskih, zdravstvenih ili operativnih podataka biti osnova za donošenje odluke, proračune i tumačenje mora potvrditi relevantni stručnjak (finansijski savjetnik, aktuar, terenski stručnjak). Umjetna inteligencija proizvodi preliminarnu analizu; Konačna procjena i odgovornost pripada ljudima.

Ukratko

Umjetna inteligencija je moćna pomoć u tumačenju tabelarnih podataka, pronalaženju trendova i kvarova i generiranju koda za analizu. Ali budući da može tiho praviti greške u aritmetici, potrebno je da se svaki izračun ponovo uradi determinističkim alatom i ručno provjeri. Odvajanje korelacije od uzročnosti, gledanje medijane pored srednje vrijednosti, provjera kvaliteta podataka prije interpretacije i promatranje ograničenja uzorka su osnovne discipline savjetovanja. Model pokazuje uzorak; Ljudi stvaraju smisao i odgovornost.

Zadatak aplikacije

Odaberite stvarnu ili reprezentativnu izjavu o prodaji/troškovu. Prvo pokrenite prompt za provjeru kvaliteta podataka i pronađite barem jedan problem (nedostaje, odstupa, definicija nedosljednost). Zatim izdvojite trendove i proboje uz moćnu brzu analizu; Također ručno provjerite formulu za svaki račun. Uporedite srednju vrednost sa medijanom i otkrijte efekat van granica. Konačno, pronađite tvrdnju o uzročnosti koju model piše i preformulirajte je u „korelaciju“.

kontrolna lista

  • [ ] Ponovo sam izvodio svaki tačan proračun pomoću determinističkog alata (Excel/Python).
  • [ ] Izvršio sam provjeru kvaliteta podataka prije komentiranja.
  • [ ] Osim srednje vrijednosti, pogledao sam i medijanu i distribuciju.
  • [ ] Sačuvao sam razliku između korelacije i uzročnosti.
  • [ ] Doveo sam u pitanje granice uzorka i vremenskog perioda.
  • [ ] Odvojio sam "podaci govore" i "moguće značenje".
  • [ ] Planirao sam stručno odobrenje u analizi kritičnih odluka.