Enota 2 / 11

Analiza podatkov v preiskovalnem novinarstvu: Spreminjanje kupov dokumentov v novice

Dobički:

  • Sposobnost raziskovanja nabora podatkov z umetno inteligenco, ustvarjanja vprašanj, vrednih novic, in ekstrahiranja občutljivih podatkov
  • Namesto da bi izračune izvajala umetna inteligenca, je treba metodo opisati in zagnati v orodju, ki ga je mogoče preverjati, in pridobiti navado preverjanja vsake ugotovitve iz neobdelanih podatkov.
  • Razumevanje, da je odgovornost novinarja, da sestavi osnutke in dokumentira arhivska razmerja ter jih potrdi v izvirnem viru.

Preiskovalno novinarstvo se pogosto začne s kupom: razpisno preglednico na tisoče vrstic, bilanco stanja na stotine strani, razkriti arhiv e-pošte, odprtokodni nabor javnih izdatkov. Podatkovno novinarstvo – praksa iskanja vzorcev, anomalij in odnosov v numeričnih in dokumentarnih podatkih ter njihovo pretvarjanje v novice – je ravno naloga osmišljanja te množice. V teh kupih, za ročno pregledovanje katerih bi potrebovali celo človeško življenje, je umetna inteligenca (AI) močno orodje za prvo pregledovanje in ustvarjanje idej: lahko povzame tabelo, izvleče podvojena imena v besedilnem arhivu, predlaga, katera vprašanja je treba postaviti za analizo, celo opiše korake čiščenja podatkov. A povejmo en stavek od začetka: AI je partner pri analizi podatkov; Novinar je tisti, ki odloča o točnosti in novičarski vrednosti rezultata ter ponovno pregleda število iz neobdelanih podatkov. Tveganje za halucinacije je tukaj najbolj nevarno, v številkah.

Korak za korakom: raziskovanje nabora podatkov z AI

1. korak — Spoznajte podatke. Najprej razumejte stolpce, število vrstic, časovno obdobje, enote. Sami veste, kaj je, preden naložite neobdelano datoteko v AI; Sicer pa "ugotovitve" AI ostajajo v zraku.

2. korak — Izvlecite občutljive podatke. Če vsebuje osebne podatke (ime, TR ID, naslov, zdravstveno stanje), ga anonimizirajte, ne da bi ga posredovali javnemu orodju AI, ali pošljite samo stolpce v analizo. Očiščene so tudi sledi razkritih dokumentov, ki razkrivajo izvor (Enoti 1 in 10).

3. korak — Ustvarite vprašanja za odkrivanje z AI. "Kakšne novice bi lahko skrival ta nabor podatkov?" Začnite tako, da rečete. Umetna inteligenca pripravi seznam vprašanj, ki jih je treba zastaviti: 10 najboljših izdelkov, ponavljajoči se dobavitelji, nenavadni skoki, prazna področja.

4. korak — NIMATE AI NAREDITE ANALIZO, OPIŠITE JO. To je kritična točka. Povprečje ali odstotek, ki ga AI izračuna v glavi, je pogosto napačen. Namesto tega vprašajte AI za korake, ki bi jih izvajali v zanesljivem orodju (formula preglednice, poizvedba, skript). Zaradi česar je račun orodje, ki ga je mogoče preverjati, AI samo podaja metodo.

5. korak — Preverite ugotovitev. Oglejte si vsako anomalijo, na katero AI opozori, tako da se vrnete na neobdelano linijo. Prefiltrirajte tabelo in preštejte trditev "To podjetje je zmagalo na 31 od 40 razpisov". Nepreverjene številke ne bodo prišle v novice.

6. korak — Vzpostavite kontekst. Samo število ni novica. Primerjava (lansko leto, podobne ustanove, razmerje glede na število prebivalcev), kontekst in strokovno mnenje so delo novinarja.

Pozor: najpogostejša napaka podatkovnega novinarstva, ki ustvarja zavrnitev odgovornosti, je, da AI reče "izračunaj povprečje te tabele" in da rezultat neposredno v novico. AI je jezikovni model, ne kalkulator. Orodje naj izračuna, samo vprašajte AI za metodo in razlago.

Analiza metapodatkov in dokumentov

Preiskovalno novinarstvo ima poleg numeričnih tabel opravka tudi z velikimi besedilnimi arhivi: e-pošto, zapisniki, pogodbami. Tukaj lahko umetna inteligenca pripravi zemljevide odnosov, kot so "kdo se je s kom kdaj pogovarjal", "katera tema se ponavlja", "katera imena so omenjena skupaj". Spet je pravilo isto: AI daje začetni zemljevid; Vsaka povezava je potrjena v izvirnem dokumentu, saj lahko AI prepričljivo pojasni povezavo, ki ne obstaja.

trije mini kovčki

Primer 1 – Skrita kondenzacija. Novinar je imel preglednico javnih naročil z 2400 vrsticami. Umetni inteligenci je dal izdelati raziskovalna vprašanja; Vprašanje "koliko ponudb je prejel isti dobavitelj?" prišel v ospredje. Novinar tega ni izračunal AI; Izvedel je formulo preglednice, ki jo je predlagal sam YZ, in ugotovil, da je posamezno podjetje prejelo 380 (15,8 %) od 2400 postavk. Ročno ga je preveril in številka je bila pravilna. Prvotna "ocena" umetne inteligence je bila 22 % - torej, če bi umetni inteligenci zaupali, bi bila novica napačna.

Primer 2 — Prihranek časa, arhiv elektronske pošte. Ročno iskanje »katere teme se dogajajo« v arhivu 6000 e-poštnih sporočil bi trajalo nekaj dni. Umetna inteligenca je izdelala oris tematskih skupin v 15 minutah; Izmed teh je novinar izbral 3 obetavne grozde in prebral izvirna e-poštna sporočila. Skupni čas odkrivanja je bil skrajšan na ~3 dni, vendar je bil vsak citat, ki je šel v živo, dobesedno preverjen iz izvirnega e-poštnega sporočila.

Primer 3 – Ulovljena halucinacija. Ekonomski poročevalec je iz bilance stanja prejel povzetek YZ, da so se "stroški osebja v enem letu povečali za 60 %". Ko se je vrnil k neobdelani tabeli, je videl, da je povečanje znašalo 6 % in da je AI napačno prebral eno števko. Eno samo preverjanje dejstev je blokiralo lažen in pretenciozen naslov, kot je "60-odstotna eksplozija".

Kopirane predloge

1) Vprašanja o prepoznavanju in odkrivanju nabora podatkov:

Dal vam bom naslove stolpcev in prvih 20 vrstic nabora podatkov. Ustvarite 10 novinarskih vprašanj, ki jih je LAHKO narediti s temi podatki: v smislu koncentracije, odstopanja, preskoka v času, manjkajočih/praznih področij, ponavljajočih se akterjev. Brez izračuna števila; samo napišite, katera vprašanja je vredno zastaviti in zakaj bi lahko postala novica. Podatki: [naslovi + vzorčne vrstice]

2) Ne delati izračunov, ampak opisati:

Želim narediti naslednjo analizo: [npr. poiščite skupni znesek ponudbe in odstotek deleža vsakega dobavitelja]. To želim zagnati sam v preglednici. Napiši mi korak za korakom, katere formule/nastavitve pivota naj namestim. Rezultat izračuna SEN; samo podajte metodo. Moji stolpci: [imena stolpcev]

3) Lov na izstopajoče:

Spodaj bom podal povzetek statističnih podatkov (najmanj, največ, povprečje, mediana). Pojasnite, katere vrednosti so nenavadne/sumljive in zakaj naj jih preverim za novice. Ne dajajte dokončnih sodb; Prikaže se kontrolni seznam v obliki "naslednje vrstice je treba preveriti ročno". Povzetki: [tukaj]

4) Karta razmerja med arhivom dokumentov (osnutek):

Dal vam bom niz besedil dokumenta. Kot OSNUTEK izpišite naslednje: imena, ki se pogosto pojavljajo skupaj, ponavljajoče se teme, pomembni datumi. Označite dokument, iz katerega prihaja posamezna povezava, na primer [B12]. Ne dodajajte relacij, ki niso izrecno zapisane v dokumentu. Dokumentacija: [tukaj]

Šibek poziv/močan poziv

Šibek poziv: "Analizirajte ta grafikon in navedite vse pomembne ugotovitve."

Rezultat: umetna inteligenca neposredno ustvarja odstotke in povprečja, predstavlja anomalije, ni jasno, na kateri vrstici temelji. Ni ga mogoče preveriti.

Zmogljiv poziv: "Dajem stolpce in prvih 20 vrstic te tabele. (1) Seznam, katere analize bi lahko bile vredne novice. (2) Predlagajte formulo preglednice za vsako analizo, da jo lahko izvedem. (3) Ne izračunajte nobenih rezultatov. (4) Označite vrstice, ki jih je treba preveriti, na primer [S45]."

Razlika: močan poziv prepušča izračun orodju, ki ga je mogoče nadzorovati, pri čemer AI zmanjša na vlogo metode in smeri; preprečuje, da bi halucinacije ušle v število.

primerjalna tabela

Oder

AI dela

Novinar pa

preverjanje

Prepoznavanje podatkov

Povzetek stolpca/vzorca

Pozna enoto in kontekst

Slovar izvornih podatkov

vprašanja odkrivanja

Ustvari seznam vprašanj

Izbere vrednost novice

izračun

Opisuje metodo

Poganja formulo v vozilu

Ročno zagotavljanje

izstopajoči

označuje kandidate

Pogled na surovo linijo

Filtrirajte in preštejte

Komentar/kontekst

osnutek okvirja

Primerjava, strokovnjak

drugi vir

Pogoste napake

  • Umetna inteligenca izračuna. AI izračuna povprečje, odstotek, skupno itd. in uporabi rezultat; AI se pogosto zmoti, pustite, da vozilo izračuna.
  • Ne povezovanje ugotovitve z neobdelano črto. Pisanje trditve "To podjetje je zmagalo na večini razpisov" brez filtriranja tabele in štetja.
  • Objava številk brez konteksta. Poročanje golih številk brez primerjave in razmerja je zavajajoče.
  • Nalaganje občutljivih podatkov, kot so. Dajanje osebnih podatkov ali dokumenta, ki razkriva izvor vozilu, ne da bi ga očistili.
  • Misliti, da je lažno razmerje resnično. Obdelava povezave, ki jo AI "vidi" v arhivu, v zemljevid brez potrditve v izvirnem dokumentu.

Če povzamem

V podatkovnem novinarstvu je umetna inteligenca partner pri odkrivanju in vpogledu: skenira kup, ustvarja vprašanja, ki jih je treba zastaviti, opisuje metodo analize, označuje kandidate za izstopajoče vrednosti. Toda to, da umetna inteligenca sama izračuna število, je najbolj tvegana napaka; Oddajte izračun revizijskemu orodju, preverite vsako ugotovitev tako, da se vrnete k neobdelanim podatkom, ter številki dodajte kontekst in primerjavo. V arhivih dokumentov AI daje začetni zemljevid; Vsaka povezava je potrjena v izvirnem dokumentu.

Aplikacijska naloga

Vzemite nabor podatkov, ki ga imate (ali je javno dostopen). Najprej naj ustvarijo 10 vprašanj s pozivom »Raziskovalna vprašanja«. Izberite vprašanje, pridobite formulo iz AI ​​s pozivom »Opišite izračun« in jo zaženite sami. Nato neposredno vprašajte AI za isti izračun in primerjajte oba rezultata; Upoštevajte razliko in lekcijo.

kontrolni seznam

  • [ ] Razumel sem stolpce, enote in občutljiva polja, preden sem dal podatke orodju.
  • [ ] Ne dovolim, da AI naredi izračune; Opisujem metodo in jo izvajam v revizijskem orodju.
  • [ ] Vsako ugotovitev ročno preverim tako, da se vrnem v neobdelano vrstico.
  • [ ] Številu dodam primerjavo in kontekst; Ne poročam o golih številkah.
  • [ ] Vsako razmerje v arhivu potrjujem v izvirnem dokumentu.