Единица 2 / 11

Анализа на податоци во истражувачко новинарство: Претворање купишта документи во вести

Добивки:

  • Способност да се истражува збир на податоци со вештачка интелигенција, да се генерираат прашања вредни за вести и да се извлечат чувствителни податоци
  • Наместо да имате вештачка интелигенција да ги правите пресметките, да го опишете методот и да го извршите во алатка за ревизија и да стекнете навика да го проверувате секое откритие од необработени податоци.
  • Разбирање дека е одговорност на новинарот да изготви одвоени податоци и да документира архивски односи и да ги потврди во оригиналниот извор.

Истражувачкото новинарство често започнува со куп: тендерска табела од илјадници линии, биланс од стотици страници, протечена архива на е-пошта, збир на јавни расходи со отворен код. Новинарството за податоци - практиката на пронаоѓање обрасци, аномалии и врски во нумерички и документарни податоци и нивно претворање во вести - е токму задачата да се разбере оваа маса. Во овие купишта, за кои би требало човечки живот да се прегледа рачно, вештачката интелигенција (ВИ) е моќна алатка за прв преглед и генерирање идеи: може да резимира табела, да извлече дупликат имиња во архива со текст, да предложи какви прашања да се постават за анализа, дури и да опише чекори за чистење на податоците. Но, да ставиме една реченица од почеток: ВИ е партнер во анализата на податоците; Новинарот е тој што одлучува за точноста и вредноста на вестите на резултатот и го преиспитува бројот од необработените податоци. Ризикот од халуцинација е најопасен овде, во бројки.

Чекор по чекор: истражување на збир на податоци со вештачка интелигенција

Чекор 1 - Запознајте ги податоците. Прво разберете ги колоните, бројот на редови, опсегот на датуми, единиците. Знајте сами што е тоа пред да ја вчитате необработената датотека во вештачката интелигенција; Инаку, „наодите“ на вештачката интелигенција остануваат во воздухот.

Чекор 2 - Извлечете чувствителни податоци. Ако содржи лични податоци (име, TR ID, адреса, здравје), анонимизирајте ги без да ги дадете на јавната алатка за вештачка интелигенција или испратете ги само колоните што треба да се анализираат. Се бришат и траги од протечени документи кои го откриваат изворот (Единици 1 и 10).

Чекор 3 - Создадете прашања за откривање со вештачка интелигенција. „Какви вести би можеле да кријат овој збир на податоци? Започнете со велејќи. Вештачката интелигенција доаѓа со листа на прашања што треба да се постават: топ 10 ставки, повторени добавувачи, невообичаени скокови, области оставени празни.

Чекор 4 - НЕМА ВИ ДА ЈА НАПРАВИ АНАЛИЗАТА, ОПИШИ ЈА. Ова е критичната точка. Просекот или процентот што вештачката интелигенција го пресметува во главата често е погрешен. Наместо тоа, прашајте ја вештачката интелигенција за чекори што би ги извршиле во сигурна алатка (формула за табеларни пресметки, барање, скрипта). Така што пресметувањето е алатка за ревизија, вештачката интелигенција само го дава методот.

Чекор 5 - Потврдете го наодот. Погледнете ја секоја аномалија што ја истакнува вештачката интелигенција со враќање на суровата линија. Филтрирајте ја табелата и избројте го тврдењето „Оваа фирма добила 31 од 40 тендери“. Сите непроверени бројки нема да влезат во вестите.

Чекор 6 - Воспоставете го контекстот. Бројката сама по себе не е новост. Споредбата (лани, слични институции, сооднос со населението), контекст и стручно мислење се работа на новинарот.

Внимание: Ако вештачката интелигенција вели „пресметај го просекот на оваа табела“ и го ставаш резултатот директно во вестите е најчеста грешка во новинарството за податоци што предизвикува отфрлање. ВИ е јазичен модел, а не калкулатор. Нека алатката направи математика, само прашајте ја вештачката интелигенција за методот и толкувањето.

Метаподатоци и анализа на документи

Покрај нумеричките табели, истражувачкото новинарство се занимава и со големи текстуални архиви: е-пошта, записници, договори. Овде, вештачката интелигенција може да нацрта мапи за врски како „кој кога разговарал со кого“, „која тема се повторува“, „кои имиња се спомнуваат заедно“. Повторно, правилото е исто: AI дава почетна карта; Секоја врска е потврдена во оригиналниот документ, бидејќи вештачката интелигенција може убедливо да објасни врска која не постои.

три мини футроли

Случај 1 - Скриена кондензација. Репортер имал табела за јавни набавки со 2.400 редови. Тој имаше ВИ да произведе истражувачки прашања; Прашањето „колку тендери добил истиот добавувач“? дојде до израз. Репортерот немаше вештачка интелигенција да го пресмета ова; Ја водел формулата за табеларни пресметки предложени од самиот YZ и открил дека една фирма добила 380 (15,8%) од 2.400 ставки. Рачно го провери и бројот беше точен. Првичната „проценка“ на вештачката интелигенција вели 22% - така што ако ѝ се верува на вештачката интелигенција, веста би била погрешна.

Случај 2 - Заштеда на време, архива на е-пошта. Ќе бидат потребни денови за рачно пребарување „кои теми се случуваат“ во архива од 6.000 е-пошта. Вештачката интелигенција создаде преглед на кластери за теми за 15 минути; Од нив, репортерот избра 3 ветувачки кластери и ги прочита оригиналните пораки. Вкупното време за откривање беше намалено на ~ 3 дена, но секој цитат што беше објавен беше дословно потврден од оригиналната е-пошта.

Случај 3 - Фатена халуцинација. Економски известувач добил резиме од YZ дека „кадровските трошоци се зголемиле за 60% за една година“ од билансот на состојба. Кога се вратил на сировата маса, видел дека зголемувањето е 6% и дека вештачката интелигенција погрешно прочитала една цифра. Една проверка на фактите блокираше лажен и претенциозен наслов како „60% експлозија“.

Шаблони за копирање

1) Прашања за препознавање и откривање на збирки податоци:

Ќе ви ги дадам насловите на колоните и првите 20 редови од множеството податоци. Создадете 10 новинарски прашања што МОЖЕ да се направат со овие податоци: во смисла на концентрација, оддалеченост, скок во времето, исчезнати/празни области, повторливи актери. Нема пресметка на броеви; само напишете кои прашања вреди да се постават и зошто тие би можеле да бидат вести. Податоци: [наслови + примероци]

2) Не правејќи пресметки, туку правејќи ги да опишете:

Сакам да ја направам следната анализа: [на пр. најдете го вкупниот износ на тендерот и процентот на учество на секој добавувач]. Сакам да го извршам ова сам во табела. Пишете ми чекор по чекор кои формули/поставки за вртење да ги инсталирам. Резултат од пресметката на SEN; само дајте го методот.Мои колони: [имиња на колони]

3) Извонреден лов:

Подолу ќе дадам сумарна статистика (мин, макс, просек, медијана). Објаснете кои вредности се невообичаени/сомнителни и зошто треба да ги проверам за вести. Не донесувајте конечни пресуди; Се појавува список за проверка во формат „следните редови треба да се проверат рачно“. Резиме: [тука]

4) Карта на односи со архивата на документи (нацрт):

Ќе ви дадам сет на текст на документот. Изнесете го следново како НАЦРТ: имиња кои често се појавуваат заедно, теми кои се повторуваат, значајни датуми. Обележете го документот од кој доаѓа секоја врска, како [B12]. Не додавајте никакви врски што не се експлицитно напишани во документот. Документација: [тука]

Слаб промпт / Силен промпт

Слаба порака: „Анализирајте ја оваа табела и наведете ги сите значајни наоди“.

Резултат: вештачката интелигенција сочинува проценти и просеци директно, замислува аномалии, не е јасно на која линија се заснова. Не може да се потврди.

Моќен потсетник: „Ги давам колоните и првите 20 редови од оваа табела. (1) Наведете кои анализи може да бидат вредни за вести. (2) Предложете формула за табеларни пресметки за секоја анализа за да можам да ја извршам. (3) Не пресметувајте никакви резултати. (4) Означете ги редовите што треба да се проверат, како [S45]."

Разлика: Силниот промпт ја препушта пресметката на контролираната алатка, намалувајќи ја вештачката интелигенција на улогата на методот и насоката; спречува халуцинација да протече во бројот.

споредбена табела

Фаза

Вештачката интелигенција прави

Новинарот го прави тоа

верификација

Препознавање податоци

Резиме на колона/шаблон

Ја знае единицата и контекстот

Речник на изворни податоци

прашања за откривање

Генерира листа на прашања

Избира вредност на вести

-

пресметка

Го опишува методот

Ја извршува формулата во возилото

Рачно обезбедување

надворешно

ги означува кандидатите

Гледа во сурова линија

Филтрирај и брои

Коментар/контекст

нацрт рамка

Споредба, експерт

втор извор

Вообичаени грешки

  • Пресметување на вештачката интелигенција. Имајќи вештачка интелигенција да пресмета просек, процент, вкупно итн. и да го искористи резултатот; Вештачката интелигенција често прави грешки, оставете го возилото да направи математика.
  • Не поврзување на наодот со суровата линија. Пишување на тврдењето „Оваа фирма добила најголем дел од тендерите“ без филтрирање на табелата и броење.
  • Објавување броеви без контекст. Пријавувањето голи бројки без споредба и сооднос е погрешно.
  • Се поставуваат чувствителни податоци како што се. Давање лични податоци или документ со кој се открива изворот на возилото без да се исчисти.
  • Мислејќи дека лажната врска е вистинита. Обработка на врската што вештачката интелигенција ја „гледа“ во архивата во картата без да се потврди во оригиналниот документ.

Сумирано

Во новинарството за податоци, вештачката интелигенција е партнер за откривање и увид: го скенира купот, генерира прашања што треба да се поставуваат, го опишува методот на анализа, ги означува кандидатите за оддалеченост. Но, тоа што вештачката интелигенција го пресметува самиот број е најризичната грешка; Пресметката ја нарачува на алатка за ревизија, проверете го секој наод со враќање на необработените податоци и додадете контекст и споредба на бројот. Во архивите на документи, вештачката интелигенција дава почетна мапа; Секоја врска е потврдена во оригиналниот документ.

Задача за апликација

Земете збир на податоци што го имате (или е јавно достапен). Прво, нека генерираат 10 прашања со промптот „Прашања за истражување“. Изберете прашање, земете ја формулата од вештачката интелигенција со промптот „Опишете ја пресметката“ и стартувајте ја сами. Потоа директно прашајте ја вештачката интелигенција за истата пресметка и споредете ги двата резултати; Забележете ја разликата и нејзината лекција.

листа за проверка

  • [ ] Ги разбрав колоните, единиците и чувствителните полиња пред да ги дадам податоците на алатката.
  • [ ] Не дозволувам вештачката интелигенција да ги прави пресметките; Го опишувам методот и го извршувам во алатката за ревизија.
  • [ ] Рачно го проверувам секој наод со враќање во необработениот ред.
  • [ ] Додавам споредба и контекст на бројот; Не ги пријавувам голите бројки.
  • [ ] Ја потврдувам секоја врска во архивата во оригиналниот документ.