Vienetas 2 / 11

Duomenų analizė tiriamojoje žurnalistikoje: dokumentų šūsnių pavertimas naujienomis

Pelnas:

  • Galimybė tyrinėti duomenų rinkinį naudojant dirbtinį intelektą, generuoti aktualius klausimus ir išskirti neskelbtinus duomenis
  • Užuot turėję dirbtinį intelektą, atlikite skaičiavimus, aprašydami metodą ir paleiskite jį audituojamu įrankiu ir įpraskite kiekvieną radinį patikrinti iš neapdorotų duomenų.
  • Supratimas, kad žurnalisto pareiga yra sudaryti iškrypimus ir dokumentuoti archyvinius ryšius bei patvirtinti juos pirminiame šaltinyje.

Tiriamoji žurnalistika dažnai prasideda nuo krūvos: tūkstančių eilučių konkurso lentelė, šimtų puslapių balansas, nutekėjęs el. pašto archyvas, atvirojo kodo viešųjų išlaidų rinkinys. Duomenų žurnalistika – skaitinių ir dokumentinių duomenų modelių, anomalijų ir ryšių paieškos ir pavertimo naujienomis praktika yra būtent šios masės prasmės darbas. Šiose krūvose, kurias rankiniu būdu peržiūrėti prireiktų viso žmogaus gyvenimo, dirbtinis intelektas (AI) yra galingas pirmojo patikrinimo ir idėjų generavimo įrankis: jis gali apibendrinti lentelę, išgauti pasikartojančius pavadinimus teksto archyve, pasiūlyti, kokius klausimus užduoti analizei, net aprašyti duomenų valymo veiksmus. Bet iš pradžių padėkime vieną sakinį: AI yra duomenų analizės partneris; Žurnalistas nusprendžia rezultato tikslumą ir naujienų vertę ir iš naujo išnagrinėja skaičių iš neapdorotų duomenų. Haliucinacijų rizika čia yra pati pavojingiausia, skaičiuojant skaičiais.

Žingsnis po žingsnio: tyrinėkite duomenų rinkinį su AI

1 veiksmas – susipažinkite su duomenimis. Pirmiausia supraskite stulpelius, eilučių skaičių, dienų seką, vienetus. Prieš įkeldami neapdorotą failą į AI, žinokite, kas tai yra; Priešingu atveju AI „radiniai“ liks ore.

2 veiksmas. Išskleiskite neskelbtinus duomenis. Jei jame yra asmeninių duomenų (vardas, pavardė, TR ID, adresas, sveikatos būklė), anonimizuoti, nepateikdami viešajam AI įrankiui arba atsiųskite tik analizuojamus stulpelius. Taip pat pašalinami nutekintų dokumentų pėdsakai, atskleidžiantys šaltinį (1 ir 10 skyriai).

3 veiksmas – su AI generuokite atradimo klausimus. „Kokias naujienas gali slėpti šis duomenų rinkinys? Pradėkite sakydami. AI pateikia klausimų sąrašą: 10 geriausių prekių, pakartotiniai tiekėjai, neįprasti šuoliai, tuščios sritys.

4 veiksmas – NEREIKITE ANALIZĖS DIRBTI, APRAŠYKITE. Tai yra kritinis taškas. Vidurkis arba procentas, kurį AI apskaičiuoja pagal galvą, dažnai yra neteisingas. Vietoj to paprašykite AI veiksmų, kuriuos atliktumėte naudodami patikimą įrankį (skaičiuoklės formulę, užklausą, scenarijų). Taigi AI tiesiog pateikia metodą, kad skaičiavimas būtų audituojamas įrankis.

5 veiksmas – patikrinkite radinį. Pamatykite kiekvieną anomaliją, kurią nurodo AI, grįždami prie neapdorotos linijos. Filtruokite lentelę ir suskaičiuokite pretenziją „Ši įmonė laimėjo 31 iš 40 konkursų“. Nepatvirtinti numeriai nepateks į naujienas.

6 veiksmas – nustatykite kontekstą. Vien skaičius nėra naujiena. Palyginimas (pernai panašios institucijos, santykis su gyventojų skaičiumi), kontekstas ir ekspertinė nuomonė – žurnalisto darbas.

Dėmesio: AI pasakymas „apskaičiuokite šios lentelės vidurkį“ ir rezultato įtraukimas tiesiai į naujienas yra dažniausia duomenų žurnalistikos klaida, sukelianti atsisakymą. AI yra kalbos modelis, o ne skaičiuotuvas. Leiskite įrankiui atlikti skaičiavimus, tiesiog paprašykite AI metodo ir interpretacijos.

Metaduomenų ir dokumentų analizė

Be skaitinių lentelių, tiriamoji žurnalistika nagrinėja ir didelius tekstų archyvus: elektroninius laiškus, protokolus, sutartis. Čia dirbtinis intelektas gali parengti santykių žemėlapius, pvz., „kas kada kalbėjosi su kuo“, „kuri tema kartojama“, „kurie vardai minimi kartu“. Vėlgi, taisyklė ta pati: AI pateikia pradinį žemėlapį; Kiekviena nuoroda patvirtinama pirminiame dokumente, nes AI gali įtikinamai paaiškinti neegzistuojančią nuorodą.

trys mini dėklai

1 atvejis – paslėptas kondensatas. Žurnalistas turėjo viešųjų pirkimų lentelę su 2400 eilučių. Jis privertė dirbtinį intelektą pateikti tiriamuosius klausimus; Klausimas "kiek pasiūlymų gavo tas pats tiekėjas?" iškilo į pirmą planą. Žurnalistas neturėjo AI to apskaičiuoti; Jis panaudojo paties YZ pasiūlytą skaičiuoklės formulę ir nustatė, kad viena įmonė gavo 380 (15,8 %) iš 2400 prekių. Jis patikrino rankiniu būdu ir numeris buvo teisingas. Pradinis AI „įvertis“ teigė, kad 22% – taigi, jei AI būtų galima pasitikėti, naujienos būtų klaidingos.

2 atvejis – laiko taupymas, el. pašto archyvas. Rankiniu būdu paieška „kokios temos vyksta“ 6 000 el. laiškų archyve užtruktų kelias dienas. AI per 15 minučių sukūrė temų grupių metmenis; Iš jų reporteris atrinko 3 perspektyvias grupes ir perskaitė originalius el. Bendras atradimo laikas sutrumpėjo iki ~3 dienų, bet kiekviena paskelbta citata buvo pažodžiui patvirtinta iš pradinio el. laiško.

3 atvejis – pagauta haliucinacija. Ekonomikos reporteris iš YZ gavo suvestinę, kad „per vienerius metus personalo išlaidos padidėjo 60 proc.“ iš balanso. Grįžęs prie neapdorotos lentelės, jis pamatė, kad padidėjimas buvo 6% ir AI neteisingai perskaitė vieną skaitmenį. Vieno fakto patikrinimas užblokavo klaidingą ir pretenzingą antraštę, pavyzdžiui, „60 % sprogimas“.

Kopijuojami šablonai

1) Duomenų rinkinio atpažinimo ir atradimo klausimai:

Pateiksiu stulpelių antraštes ir pirmąsias 20 duomenų rinkinio eilučių. Sugeneruokite 10 žurnalistinių klausimų, kuriuos GALIMA atlikti naudojant šiuos duomenis: apie koncentraciją, nuokrypį, šuolį laiku, trūkstamas / tuščias sritis, pasikartojančius veikėjus. Nėra skaičių skaičiavimo; tiesiog parašykite, kuriuos klausimus verta užduoti ir kodėl jie gali būti naujienos.Duomenys: [antraštės + pavyzdinės eilutės]

2) Nedaryti skaičiavimų, o juos aprašyti:

Noriu atlikti tokią analizę: [pvz. rasti bendrą pasiūlymo sumą ir kiekvieno tiekėjo dalies procentą]. Noriu pats tai paleisti skaičiuoklėje. Žingsnis po žingsnio parašykite man, kurias formules / sukimosi parametrus įdiegti. SUP skaičiavimo rezultatas; tiesiog nurodykite metodą.Mano stulpeliai: [stulpelių pavadinimai]

3) Išskirtinė medžioklė:

Žemiau pateiksiu apibendrintą statistiką (min, max, vidurkis, mediana). Paaiškinkite, kurios vertybės yra neįprastos / įtartinos ir kodėl turėčiau jas patikrinti, ar nėra naujienų. Nepriimkite galutinių sprendimų; Rodomas kontrolinis sąrašas formatu „šios eilutės turėtų būti tikrinamos rankiniu būdu“. Santraukos: [čia]

4) Dokumentų archyvo santykių žemėlapis (juodraštis):

Pateiksiu jums dokumento teksto rinkinį. Išveskite šiuos duomenis kaip JUODRAŠTĮ: dažnai kartu pasitaikantys vardai, pasikartojančios temos, svarbios datos. Pažymėkite dokumentą, iš kurio gaunama kiekviena nuoroda, pvz., [B12]. Nepridėkite jokių ryšių, kurie nėra aiškiai nurodyti dokumente. Dokumentacija: [čia]

Silpnas raginimas / Stiprus raginimas

Silpnas raginimas: „Išanalizuokite šią diagramą ir nurodykite visas reikšmingas išvadas“.

Rezultatas: AI sudaro procentus ir vidurkius, įsivaizduoja anomalijas, neaišku, kuria linija jis pagrįstas. To negalima patikrinti.

Galingas raginimas: "Pateikiu šios lentelės stulpelius ir pirmąsias 20 eilučių. (1) Išvardykite, kurios analizės gali būti vertingos. (2) Pasiūlykite skaičiuoklės formulę kiekvienai analizei, kad galėčiau ją atlikti. (3) Neskaičiuokite jokių rezultatų. (4) Pažymėkite eilutes, kurias reikia patikrinti, pvz., [S45].

Skirtumas: stiprus raginimas apskaičiavimą palieka valdomam įrankiui, AI sumažina metodo ir krypties vaidmenį; neleidžia haliucinacijoms prasiskverbti į skaičių.

palyginimo diagrama

Scena

AI daro

Žurnalistas daro

patikrinimas

Duomenų atpažinimas

Stulpelio / modelio santrauka

Žino vienetą ir kontekstą

Šaltinio duomenų žodynas

atradimo klausimai

Sugeneruoja klausimų sąrašą

Parenka naujienų vertę

skaičiavimas

Aprašomas metodas

Paleidžia formulę transporto priemonėje

Rankinis aprūpinimas

išskirtinis

pažymi kandidatus

Žiūri į neapdorotą liniją

Filtruoti ir skaičiuoti

Komentaras/kontekstas

juodraščio rėmas

Palyginimas, ekspertas

antrasis šaltinis

Dažnos klaidos

  • AI skaičiavimas. AI apskaičiuoti vidurkį, procentą, sumą ir pan. ir naudoti rezultatą; AI dažnai daro klaidas, leiskite transporto priemonei atlikti skaičiavimus.
  • Nesusiejant radinio su neapdorota linija. Pretenzijos „Ši įmonė laimėjo daugumą konkursų“ rašymas nefiltruojant lentelės ir neskaičiuojant.
  • Skelbiame numerius be konteksto. Pateikti tik skaičius be palyginimo ir santykio yra klaidinanti.
  • Įkeliami neskelbtini duomenys, kokie yra. Asmens duomenų ar dokumento, atskleidžiančio šaltinį, davimas transporto priemonei jos neišvalius.
  • Galvoti, kad netikri santykiai yra tikri. Nuorodos, kurią AI „mato“ archyve, apdorojimas žemėlapyje, nepatvirtinus jos pirminiame dokumente.

Apibendrinant

Duomenų žurnalistikoje dirbtinis intelektas yra atradimų ir įžvalgų partneris: jis nuskaito krūvą, generuoja klausimus, kuriuos reikia užduoti, aprašo analizės metodą, pažymi kandidatus į nuokrypius. Tačiau DI apskaičiuoti patį skaičių yra rizikingiausia klaida; Skaičiavimą perduokite į audituojamą įrankį, patikrinkite kiekvieną radinį grįždami prie neapdorotų duomenų ir pridėkite kontekstą ir palyginkite skaičių. Dokumentų archyvuose AI pateikia pradinį žemėlapį; Kiekviena nuoroda patvirtinama pirminiame dokumente.

Taikymo užduotis

Paimkite turimą (arba viešai prieinamą) duomenų rinkinį. Pirmiausia paprašykite jų sugeneruoti 10 klausimų naudodami raginimą „Tyrimo klausimai“. Pasirinkite klausimą, gaukite formulę iš AI naudodami raginimą „Apibūdinti skaičiavimą“ ir paleiskite jį patys. Tada paprašykite AI tiesiogiai atlikti tą patį skaičiavimą ir palyginkite du rezultatus; Atkreipkite dėmesį į skirtumą ir jo pamoką.

kontrolinis sąrašas

  • [ ] Prieš pateikdamas duomenis įrankiui, supratau stulpelius, vienetus ir jautrius laukus.
  • [ ] Neleidžiu dirbtiniam intelektui atlikti skaičiavimus; Aprašau metodą ir paleidžiu jį tikrinamajame įrankyje.
  • [ ] Rankiniu būdu patikrinu kiekvieną radinį grįždamas į neapdorotą eilutę.
  • [ ] prie skaičiaus pridedu palyginimą ir kontekstą; Aš nepranešu plikų skaičių.
  • [ ] Patvirtinu visus santykius archyve pirminiame dokumente.