Jednotka 2 / 11

Analýza dat v investigativní žurnalistice: Přeměna stohů dokumentů na zprávy

zisky:

  • Schopnost prozkoumat soubor dat pomocí umělé inteligence, generovat zajímavé otázky a extrahovat citlivá data
  • Místo toho, aby umělá inteligence prováděla výpočty, měla metodu popsanou a provozovanou v auditovatelném nástroji a osvojila si zvyk ověřovat každé zjištění z nezpracovaných dat.
  • Pochopení, že je odpovědností novináře navrhnout odlehlé hodnoty a dokumentovat archivní vztahy a potvrdit je v původním zdroji.

Investigativní žurnalistika často začíná hromádkou: nabídkovou tabulkou o tisících řádcích, rozvahou o stovkách stran, uniklým e-mailovým archivem, open source sadou veřejných výdajů. Datová žurnalistika – praxe hledání vzorců, anomálií a vztahů v numerických a dokumentárních datech a jejich přeměna na zprávy – je přesně tím úkolem dát této mase smysl. V těchto hromadách, jejichž ruční procházení by zabralo celý lidský život, je umělá inteligence (AI) výkonným nástrojem pro první screening a generování nápadů: dokáže shrnout tabulku, extrahovat duplicitní jména v textovém archivu, navrhnout, jaké otázky položit pro analýzu, dokonce popsat kroky čištění dat. Ale řekněme jednu větu od začátku: AI je partnerem při analýze dat; Je to novinář, kdo rozhoduje o přesnosti a zpravodajské hodnotě výsledku a znovu zkoumá číslo z nezpracovaných dat. Riziko halucinací je zde nejnebezpečnější, v číslech.

Krok za krokem: prozkoumání souboru dat pomocí AI

Krok 1 — Seznamte se s daty. Nejprve pochopte sloupce, počet řádků, časové období, jednotky. Poznejte sami, co to je, než nahrajete surový soubor do AI; Jinak „nálezy“ AI zůstávají ve vzduchu.

Krok 2 — Extrahujte citlivá data. Pokud obsahuje osobní údaje (jméno, TR ID, adresa, zdraví), anonymizujte je, aniž byste je poskytli veřejnému nástroji AI, nebo odešlete pouze sloupce k analýze. Stopy uniklých dokumentů, které odhalují zdroj, jsou také odstraněny (jednotky 1 a 10).

Krok 3 — Vygenerujte vyhledávací otázky pomocí AI. "Jaké novinky by mohla tato datová sada skrývat?" Začněte tím, že řeknete. Umělá inteligence přichází se seznamem otázek, které je třeba položit: 10 nejlepších položek, opakující se dodavatelé, neobvyklé skoky, oblasti ponechané prázdné.

Krok 4 — NENECHTE SI ANALÝZU DĚLAT, POPISTE JI. Toto je kritický bod. Průměr nebo procento, které AI počítá v hlavě, je často špatné. Místo toho požádejte AI ​​o kroky, které byste spustili ve spolehlivém nástroji (tabulkový vzorec, dotaz, skript). Umělá inteligence tak dělá z kalkulu auditovatelný nástroj a pouze dává metodu.

Krok 5 — Ověřte nález. Podívejte se na každou anomálii, na kterou AI upozorní, tím, že se vrátíte k původní linii. Filtrujte tabulku a spočítejte tvrzení „Tato společnost vyhrála 31 ze 40 výběrových řízení“. Případná neověřená čísla se do zpráv nedostanou.

Krok 6 — Stanovte kontext. Samotné číslo není novinkou. Srovnání (loni, podobné instituce, poměr k počtu obyvatel), kontext a odborný názor je úkolem novináře.

Pozor: Nejčastější chybou datové žurnalistiky je, že AI řekne „vypočítej průměr této tabulky“ a vloží výsledek přímo do zpráv. AI je jazykový model, nikoli kalkulačka. Nechte nástroj spočítat, stačí požádat AI o metodu a interpretaci.

Analýza metadat a dokumentů

Investigativní žurnalistika se kromě číselných tabulek zabývá také rozsáhlými textovými archivy: emaily, zápisy, smlouvy. Umělá inteligence zde může navrhovat vztahové mapy jako „kdo s kým kdy mluvil“, „které téma se opakuje“, „která jména jsou zmíněna společně“. Opět platí, že pravidlo je stejné: AI dává počáteční mapu; Každý odkaz je potvrzen v originálním dokumentu, protože AI dokáže přesvědčivě vysvětlit odkaz, který neexistuje.

tři mini pouzdra

Případ 1 – Skrytá kondenzace. Reportér měl tabulku veřejných zakázek s 2 400 řádky. Nechal AI vytvořit průzkumné otázky; Otázka "kolik nabídek obdržel stejný dodavatel?" přišla do popředí. Reportér to nenechal AI spočítat; Spustil tabulkový vzorec navržený samotným YZ a zjistil, že jedna firma obdržela 380 (15,8 %) z 2 400 položek. Zkontroloval to ručně a číslo bylo správné. Počáteční „odhad“ AI říkal 22 % – takže pokud by se AI ​​mělo věřit, zprávy by byly špatné.

Případ 2 — Spořič času, archiv e-mailů. Ruční vyhledávání „jaká témata se dějí“ v archivu 6000 e-mailů by zabralo dny. AI ​​vytvořila náčrt tematických skupin za 15 minut; Z nich reportér vybral 3 slibné shluky a přečetl si původní emaily. Celková doba objevení se zkrátila na ~3 dny, ale každá nabídka, která byla zveřejněna, byla ověřena doslovně z původního e-mailu.

Případ 3 – Halucinace zachycena. Ekonomický reportér obdržel od YZ shrnutí, že „osobní náklady vzrostly o 60 % za jeden rok“ z rozvahy. Když se vrátil k surovému stolu, viděl, že nárůst byl 6% a že AI špatně přečetla jednu číslici. Jediná kontrola faktů zablokovala falešný a domýšlivý titulek jako „60% exploze“.

Kopírovatelné šablony

1) Otázky týkající se rozpoznávání a zjišťování datových souborů:

Dám vám záhlaví sloupců a prvních 20 řádků souboru dat. Vygenerujte 10 novinářských otázek, které LZE s těmito daty udělat: pokud jde o koncentraci, odlehlost, skok v čase, chybějící/prázdné oblasti, opakující se herce. Žádný výpočet čísel; stačí napsat, které otázky stojí za to položit a proč by mohly přinést novinky. Data: [nadpisy + ukázkové řádky]

2) Neprovádět výpočty, ale popsat:

Chci udělat následující analýzu: [např. zjistit celkovou částku nabídky a procento podílu každého dodavatele]. Chci to spustit sám v tabulce. Napište mi krok za krokem, které vzorce/nastavení pivotu nainstalovat. Výsledek výpočtu SEN; stačí zadat metodu. Moje sloupce: [názvy sloupců]

3) Odlehlý lov:

Níže uvedu souhrnné statistiky (min, max, průměr, medián). Vysvětlete, které hodnoty jsou neobvyklé/podezřelé a proč bych je měl kontrolovat kvůli novinkám. Nevynášejte konečné soudy; Zobrazí se kontrolní seznam ve formátu „následující řádky je třeba zkontrolovat ručně“. Shrnutí: [zde]

4) Mapa vztahu archivu dokumentů (návrh):

Dám vám soubor textu dokumentu. Vytiskněte následující jako NÁVRH: jména, která se často vyskytují společně, opakující se témata, významná data. Označte dokument, ze kterého každý odkaz pochází, například [B12]. Nepřidávejte žádné vztahy, které nejsou výslovně uvedeny v dokumentu. Dokumentace: [zde]

Slabá výzva / Silná výzva

Slabá výzva: "Analyzujte tuto tabulku a uveďte jakákoli významná zjištění."

Výsledek: Umělá inteligence tvoří procenta a průměry, představuje si anomálie, není jasné, na jaké lince je založena. Nelze to ověřit.

Výkonná výzva: "Dávám sloupce a prvních 20 řádků této tabulky. (1) Uveďte, které analýzy by mohly být zajímavé pro zprávy. (2) Navrhněte pro každou analýzu vzorec v tabulkovém procesoru, abych ji mohl spustit. (3) Nepočítat žádné výsledky. (4) Označit řádky ke kontrole, jako [S45]."

Rozdíl: Silná výzva ponechává výpočet na ovladatelném nástroji, redukuje AI na roli metody a směru; zabraňuje pronikání halucinací do čísla.

srovnávací graf

Jeviště

AI ano

Novinář ano

ověření

Rozpoznávání dat

Přehled sloupců/vzorů

Zná jednotku a kontext

Slovník zdrojových dat

objevné otázky

Vygeneruje seznam otázek

Vybírá hodnotu zpráv

výpočet

Popisuje metodu

Provozuje formuli ve vozidle

Ruční zajišťování

odlehlý

označí kandidáty

Podívá se na surovou linii

Filtrovat a počítat

Komentář/kontext

návrhový rám

Srovnání, experte

druhý zdroj

Časté chyby

  • Umět vypočítat umělou inteligenci. S AI vypočítat průměr, procento, součet atd. a použít výsledek; Umělá inteligence dělá chyby často, nechte vozidlo, aby to spočítalo.
  • Nenapojení nálezu na surovou linku. Psaní tvrzení „Tato firma vyhrála většinu výběrových řízení“ bez filtrování tabulky a počítání.
  • Publikování čísel bez kontextu. Vykazování holých čísel bez srovnání a poměru je zavádějící.
  • Nahrávání citlivých dat tak, jak jsou. Předání osobních údajů nebo dokumentu odhalujícího zdroj vozidlu bez jeho čištění.
  • Myslí si, že falešný vztah je pravdivý. Zpracování odkazu, který AI ​​„vidí“ v archivu, do mapy, aniž by to bylo potvrzeno v původním dokumentu.

V souhrnu

V datové žurnalistice je umělá inteligence partnerem pro objevování a vhled: skenuje hromadu, generuje otázky k položení, popisuje metodu analýzy, označuje kandidáty na odlehlé hodnoty. Ale nechat si AI spočítat číslo sama je ta nejriskantnější chyba; Zadávejte výpočet auditovatelnému nástroji, ověřte každé zjištění návratem k nezpracovaným datům a přidejte k číslu kontext a srovnání. V archivech dokumentů poskytuje AI počáteční mapu; Každý odkaz je potvrzen v původním dokumentu.

Aplikační úkol

Vezměte soubor dat, který máte (nebo je veřejně dostupný). Nejprve je nechte vygenerovat 10 otázek s výzvou „Otázky k průzkumu“. Vyberte otázku, získejte vzorec z AI s výzvou „Popište výpočet“ a spusťte jej sami. Poté požádejte přímo AI o stejný výpočet a porovnejte dva výsledky; Všimněte si rozdílu a jeho poučení.

kontrolní seznam

  • [ ] Rozuměl jsem sloupcům, jednotkám a citlivým polím, než jsem dal data do nástroje.
  • [ ] Nenechávám AI provádět výpočty; Popíšu metodu a spustím ji v auditovatelném nástroji.
  • [ ] Ručně ověřuji každý nález návratem na nezpracovaný řádek.
  • [ ] k číslu přidávám srovnání a kontext; Neuvádím holá čísla.
  • [ ] Potvrzuji každý vztah v archivu v původním dokumentu.