Jedinica 11 / 11

Etika, biološka sigurnost, povjerljivost i znanstveni integritet

Dobici:

  • Sposobnost zaštite osjetljivih ljudskih/genetičkih podataka u skladu s KVKK, GDPR i pravilima etičkog povjerenstva i izbjegavanje njihovog davanja otvorenom modelu
  • Sposobnost propitivanja valjanosti rezultata procjenom rizika biološke sigurnosti/dvostruke uporabe i pristranosti stanovništva
  • Razumijevanje da se etička odgovornost ne može prenijeti na vozilo i da je nužan smisleni ljudski in-the-loop

Snažno korištenje umjetne inteligencije u biologiji nadopunjuje se odgovornim korištenjem. Biologija je osjetljivo područje koje dotiče ljudsko zdravlje, genetičku privatnost, okoliš pa čak i biosigurnost. U ovoj jedinici raspravljat ćemo o etičkim, pravnim i sigurnosnim odgovornostima s kojima ćete se suočiti kada koristite umjetnu inteligenciju u biološkim studijama. Ova cjelina je okvir izgrađen na principima provjere i poštenja u svim prethodnim cjelinama.

Osnovno načelo: AI je alat; Etička odgovornost uvijek leži na ljudima. "Predloženi model" nije izgovor.

Četiri područja odgovornosti

1. Privatnost podataka i ljudski podaci

Genetski, klinički ili zdravstveni podaci ljudskih sudionika iznimno su osjetljivi. Sekvenca DNK osobe može otkriti rizik od bolesti i identitet osobe i njezine rodbine; Čak se i genomski podaci za koje se misli da su anonimizirani mogu ponovno identificirati. Lijepljenje ovih podataka u javno dostupan AI model može kršiti zakone o zaštiti podataka (KVKK u Turskoj, GDPR u Europi) i odobrenja etičkog odbora (IRB/etičko povjerenstvo).

  • Nemojte davati osobne/kliničke podatke otvorenom modelu.
  • Izbjegavajte korištenje izvan opsega privole; Na što je sudionik pristao?
  • Odlučite se za poslovne/lokalne (on-premise) ili ugovorne alate za obradu podataka.

2. Biološka sigurnost i dvostruka uporaba

Neke su biološke informacije "dvostruke namjene": mogu biti i korisne i štetne; na primjer, sekvence patogena (uzročnika bolesti), proizvodnja toksina. Traženje od umjetne inteligencije informacija o poboljšanju opasnih patogena ili dizajniranju štetnih bioloških agenasa na većini je mjesta neetično i protuzakonito.

  • Nemojte postavljati opasne zahtjeve za dvostruku namjenu.
  • Slijedite smjernice odbora za biološku sigurnost (IBC) vaše ustanove.

3. Znanstvena čestitost

Sve što smo vidjeli u prethodnim jedinicama dolazi ovdje zajedno: nema lažnog pripisivanja, nema uljepšavanja podataka, nema p-hakiranja, nema selektivnog izvješćivanja. Umjetna inteligencija to može olakšati ili otežati; Razlika je u vašoj iskrenosti.

  • Prijavite sve rezultate (uključujući negativne).
  • Proglasiti korištenje umjetne inteligencije.
  • Podržite ponovljivost dijeljenjem neobrađenih podataka i koda (ako je moguće).

4. Pristranost i poštenje

AI modeli nose pristranosti podataka na kojima su obučeni. Genomske baze podataka uglavnom potječu iz populacija europskog podrijetla; to dovodi do lošijih predviđanja u drugim populacijama. Model slike može imati lošu izvedbu u uvjetima koji nisu dovoljno zastupljeni u podacima o obuci.

  • Pitajte na kojoj je populaciji/podacima model treniran.
  • Ocijenite vrijede li rezultati za sve skupine.
Savjet: Zapitajte se: "Ako dam ove podatke modelu, kome oni pripadaju i je li ta osoba dala dopuštenje?" Ako je odgovor nejasan, nemojte ga dati. Povreda povjerljivosti je nepovratna.

Korak po korak: odgovorna AI kontrola

  1. Klasificirajte izvor podataka: osobni/osjetljivi ili javni?
  2. Provjerite privolu i dopuštenja: je li ova upotreba pokrivena?
  3. Odaberite pravi alat: Sigurno/nativno okruženje za osjetljive podatke.
  4. Uzmite u obzir rizik dvostruke uporabe.
  5. Pristranost pitanja: Je li rezultat važeći u svim skupinama?
  6. Dokumentirati i prijaviti uporabu.

Predlošci upita koji se mogu kopirati

Pregledajte moj plan analize u nastavku iz etičke perspektive: navedite upozorenja u vezi s povjerljivošću podataka, pristankom sudionika, potencijalnom pristranošću i rizikom dvostruke upotrebe. Plan: [tekst] (Napomena: NE dijelim stvarne podatke o pacijentu, samo plan.)

Na koja pitanja o privatnosti i pristanku trebam odgovoriti prije upotrebe ovog skupa genomskih podataka? Izrađuje se popis za provjeru u smislu KVKK/GDPR i etičkog povjerenstva.

Kako trebam transparentno deklarirati alat za umjetnu inteligenciju koji koristim u odjeljku o metodi svog članka? Napiši primjer izjavne rečenice; koje informacije (alat, verzija, opseg upotrebe) treba sadržavati?

Kako mogu procijeniti imaju li rezultati ovog modela populacijsku pristranost? Navedite pitanja koja bih trebao postaviti o podacima o obuci i koracima provjere.

Slab upit / Jak upit

Slab: "Analizirajte genetske podatke sljedećeg pacijenta: [pravi podaci]."

Güçlü: "Postavljam plan analize koji radi s kliničkim genomskim podacima, ali ne dijelim stvarne podatke o pacijentima. Samo iz metodološke perspektive: koje mjere povjerljivosti trebam poduzeti, u kakvom okruženju trebam obrađivati ​​podatke, koje uvjete odobrenja i etičkog povjerenstva trebam ispuniti? Tijek možete prikazati lažnim podacima/podacima uzorka."

Razlika: stvarni osjetljivi podaci ne dijele se u snažnom odzivniku; Pita se samo metoda. Privatnost je očuvana, model i dalje pomaže.

tri mini kućišta

Slučaj 1 — Povreda privatnosti: Istraživač je zalijepio ono što je mislio da su anonimni podaci o pacijentu u otvoreni model kako bi se analizirali. Kad je etičko povjerenstvo za to saznalo, studija je obustavljena; Nije bilo ugovora o obradi podataka. Lekcija: osjetljivi podaci nikada ne ulaze u otvoreni model.

Slučaj 2 — Populaciona pristranost: Alat za ocjenjivanje poligenog rizika uvježban je na podacima europskog podrijetla; U drugoj populaciji, procjene rizika bile su znatno netočne. Kada je model predložio ispitivanje sastava podataka o obuci, tim je odlučio ne koristiti alat u toj populaciji. Lekcija: pristranost spašava ili šteti životima.

Slučaj 3 — Otkrivanje i transparentnost: Tim je napisao kod za čišćenje podataka pomoću umjetne inteligencije i to jasno naveo u odjeljku o metodi; Također je podijelio šifru. Recenzenti su to pozdravili jer je ponovljivost bila velika. Lekcija: transparentnost rađa povjerenje.

usporedna tablica

područje

sigurno ponašanje

rizično ponašanje

podaci o pacijentu

Lokalno/sigurno okruženje

Zalijepi za otvaranje modela

pristanak

Koristiti unutar opsega

Nemojte prekoračiti opseg

Biosigurnost

Izbjegavanje dvostruke upotrebe

opasna potražnja

cjelovitost

Prijavi sve rezultate

selektivno izvještavanje

pristranost

Upitajte stanovništvo

Nanesite naslijepo

prozirnost

Deklarirajte korištenje

skrivanje

Uobičajene greške

  • Davanje osjetljivih podataka otvorenom modelu: nepovratna povreda privatnosti.
  • Prekoračenje opsega privole: Korištenje nije odobreno od strane sudionika.
  • Ignoriranje pristranosti: Generaliziranje rezultata na sve skupine.
  • Prikrivanje upotrebe: Ne deklariranje doprinosa umjetne inteligencije.
  • Obrana "predloženog modela": pripisivanje odgovornosti vozilu.
Oprez: U biološkom radu s velikim posljedicama (klinička odluka, biološka sigurnost, podaci o ljudima) rezultati umjetne inteligencije nisu zamjena za kompetentnu stručnu provjeru i etički nadzor; samo ga ubrzava. Konačna odgovornost uvijek leži na ljudskom biću, zajedno s etičkim i znanstvenim posljedicama odluke.

Okoliš, ekologija i tradicijska znanja

Etička odgovornost nije ograničena na ljudske podatke. Oprez je također potreban pri korištenju umjetne inteligencije u ekologiji i konzervacijskoj biologiji. Na primjer, precizni podaci o lokaciji (koordinate kamere) ugrožene vrste osjetljivi su zbog opasnosti od krivolova; Objavljivanje ovih podataka otvorenom modelu ili javnosti moglo bi naškoditi vrsti. Slično tome, etička i pravna (kao što je Protokol iz Nagoye) pitanja nastaju kada se tradicionalno biološko znanje lokalnih zajednica (npr. korištenje biljke) koristi bez dopuštenja. Prije korištenja podataka, "kome ti podaci pripadaju i tko bi bio oštećen njihovim otkrivanjem?" Uvijek postavite pitanje.

Ljudski nadzor i konačna odluka

Bit cijelog ovog modula svodi se na jedno načelo: smisleni ljudski nadzor. AI proizvodi prijedlog, piše nacrt, pokazuje uzorak; Ali biološka, ​​klinička ili etička odluka nikad se ne temelji izravno na rezultatu modela. Osobito u područjima visokog rizika (dijagnoza, liječenje, odluka o očuvanju vrste, puštanje), uloga modela nije donositi odluke, već ubrzati odluku stručnjaka. Pristup "human-in-the-loop" nije slogan, već nužnost.

Da bi ovaj nadzor funkcionirao, nadzornik mora biti kompetentan. Slijepi pristanak ("model je rekao, prihvaćanje") nije previd. Pravi nadzor zahtijeva stručnost koja može dovesti u pitanje rezultat, uhvatiti njegovu grešku i odbaciti ga kada je to potrebno. Stoga umjetna inteligencija ne zamjenjuje stručnjaka; To stručnjaka čini još nezamjenjivijim. Onaj tko najbolje koristi vozilo je onaj koji njime najbolje upravlja.

Ukratko

Odgovorno korištenje umjetne inteligencije u biologiji pokriva četiri područja: privatnost podataka (zaštita osjetljivih ljudskih podataka), biosigurnost (izbjegavanje dvostruke upotrebe), znanstveni integritet (iskreno i potpuno izvješćivanje) i svijest o pristranosti (valjanost rezultata u svim skupinama). Nemojte davati osjetljive podatke otvorenom modelu, transparentno deklarirajte korištenje, dovodite u pitanje pristranost stanovništva. Etička odgovornost nikada se ne može prenijeti na agenta; Uvijek je u ljudima.

Zadatak aplikacije

Razmislite o scenariju iz vlastitog radnog prostora (npr. korištenje ljudskog skupa podataka ili modela slike). Neka AI osmisli etičku kontrolnu listu za ovaj scenarij (povjerljivost, pristanak, pristranost, dvostruka uporaba, transparentnost) bez dijeljenja stvarnih podataka. Za svaku stavku označite je kao "prikladnu/rizičnu/nesigurnu" u vašoj situaciji i napišite akcijski plan za one koje su rizične/nesigurne. Također napravite izjavu o korištenju umjetne inteligencije za svoj članak.

popis za provjeru

  • [ ] Nisam dao osjetljive/osobne podatke otvorenom modelu.
  • [ ] Provjerio sam opseg suglasnosti i etičkog povjerenstva.
  • [ ] Procijenio sam rizik dvostruke uporabe/biološke sigurnosti.
  • [ ] Pošteno sam prijavio sve rezultate.
  • [ ] Doveo sam u pitanje pristranost stanovništva/podataka.
  • [ ] Transparentno sam deklarirao korištenje umjetne inteligencije i preuzeo odgovornost.

Modul ispit

1. Student je upitao jezični model 'koliko nizova ima u ovoj FASTA datoteci?' pita, a manekenka odgovara '48'. Koji je najispravniji pristup?

  • A) Izravno pomoću broja 48 danog modelom; Model je pouzdan jer vidi datoteku
  • B) Pitajte broj još jednom i prihvatite ga kao točan ako su dva odgovora ista
  • C) Čitanje datoteke pomoću Biopythona, brojanje sekvenci s kodom i korištenje izlaza ✔
  • D) Ručno otvaranje datoteke i brojanje odlukom oka

Objašnjenje: Determinističke zadatke kao što su brojanje i mjerenje treba prepustiti kodu koji izvodite, a ne jezičnom modelu. Model ne 'pamti' broj, on proizvodi vjerojatnosnu vrijednost i može biti pogrešan; Brojanje pomoću alata poput Biopythona daje točne i ponovljive rezultate.

2. Želite prebrojati stanice na mikroskopskoj slici i izmjeriti površinu svake. Koji je najprikladniji pristup za ovaj zadatak?

  • A) Korištenje stručnog alata za segmentaciju kao što je Cellpose/StarDist i ručna provjera rezultata ✔
  • B) Zalijepite sliku u opći jezični model i pitajte 'koliko ćelija ima'
  • C) Opišite sliku modelu i tražite procijenjeni broj
  • D) Prihvaćanje broja piksela kao broja ćelija bez ikakve kalibracije

Objašnjenje: Segmentacija i mjerenje stanica nije domena općeg jezičnog modela, već specijaliziranih slikovnih modela (Cellpose, StarDist) posebno osposobljenih za ovaj zadatak. Jezični model piše kod koji poziva te alate; Ekspertni model vrši mjerenje, a biolog verificira rezultat.

3. Diplomant dodaje 8 izvora proizvedenih jezičnim modelom u uvod svog rada. Konzultant otkriva da 3 od njih uopće ne postoje. Kako bi se ova situacija mogla spriječiti?

  • A) Zamolivši model da ponovno proizvede resurse
  • B) Odabirom samo citata s DOI (ako postoji DOI, pravi je)
  • C) Zahtjev za popisom davanjem upute modelu da 'stane'
  • D) Neovisna provjera svakog citata na PubMed/doi.org i citiranje samo članaka koje je pročitao ✔

Objašnjenje: Opći jezični modeli nisu književna baza podataka; Umjesto da traži stvarne zapise, 'generira' atribucije koje zvuče realno (izmišljena atribucija). Svaki autorski redak i DOI ne bi se trebali koristiti bez neovisne provjere u izvorima kao što je PubMed/doi.org i citirati samo članke koji su stvarno pročitani.

4. Koji je najmoćniji način da se osigura točnost koda za čišćenje podataka koji je napisala umjetna inteligencija?

  • A) Ako kod radi bez grešaka, prihvatite ga kao točan.
  • B) Testiranje rezultata s malim poznatim uzorkom i provjera očekivanja s tvrdnjom ✔
  • C) Pitajte modela 'je li kod točan?' pitati i vjerovati odgovoru 'da'
  • D) Pokrenite kôd nekoliko puta i svaki put dobijete isti rezultat

Napomena: Samo zato što kod radi bez grešaka ne znači da je ispravan; 'krivi kod radi bez grešaka' je najopasnija situacija u biologiji. Testiranje s malim uzorkom čiji rezultat znate unaprijed i ugrađivanje očekivanja u kod s assertom najjači je štit od tihih pogrešnih rezultata.

5. U RNA-seq analizi testirano je 20 000 gena i za 3 800 gena utvrđeno je da su 'značajni' s p<0,05 bez korekcije. Što je glavni problem s ovim zaključkom?

  • A) Broj uzoraka je prevelik, treba ga smanjiti
  • B) p prag je previsok, trebalo je koristiti 0,10
  • C) Korekcija višestruke usporedbe (FDR) nije provedena; Postoji mnogo lažno pozitivnih rezultata ✔
  • D) Trebalo je testirati uzorke umjesto gena

Objašnjenje: Kada testirate tisuće gena istovremeno, mnogi se geni slučajno čine 'značajnima', čak i ako nema stvarne razlike; To se zove problem višestruke usporedbe. Rješenje je primijeniti korekciju FDR-a (stope lažnih otkrića) metodom kao što je Benjamini-Hochberg; Ispravkom se popis obično smanjuje na desetke do nekoliko stotina gena.

6. Najbolje podudaranje u rezultatu BLAST ima E-vrijednost 2,0. Što ovo znači?

  • A) Podudaranje je najvjerojatnije slučajno; ✔ nije pouzdano podudaranje
  • B) Spoj je vrlo jak; Što je veća e-vrijednost, to bolje
  • C) Slijed se podudarao u stopi od 2%
  • D) Između dva niza postoji razlika od 2 baze

Objašnjenje: E-vrijednost označava očekivanje da je podudaranje slučajno; Bolje je biti malen. E-vrijednost veća od 1 označava da je podudaranje najvjerojatnije slučajno. Za pouzdana podudaranja općenito se traže vrlo mali pragovi kao što je e < 1e-5.

7. U modelu AlphaFold, terminalna regija proteina pokazuje nizak pLDDT rezultat (<50). Kako tu regiju treba tumačiti?

  • A) AlphaFold je napravio pogrešku u ovoj regiji, regiju treba ukloniti iz analize
  • B) Ovo područje je definitivno alfa spirala
  • C) Model je potpuno nepouzdan, struktura se ne bi trebala koristiti
  • D) Regija je vjerojatno nepravilna/elastična; treba tumačiti kao 'nejasno', a ne kao 'netočno' ✔

Opis: pLDDT je lokalni rezultat pouzdanosti za svaku aminokiselinu; Vrijednosti ispod 50 često odražavaju uistinu nepravilne (fleksibilne, nefiksne) regije. Pogrešno je automatski brisati ove regije kao 'pogrešne pretpostavke'; Nizak rezultat treba tumačiti kao 'nesiguran/fleksibilan' i treba procijeniti njegovu biološku važnost.

8. Istraživač izvještava o područjima stanica samo u pikselima, a rezultati nisu u skladu s literaturom. Koji korak nedostaje?

  • A) Trebalo je izbrojati više stanica
  • B) Kalibracija mjerila (pretvorba piksela u mikrometar) nije izvršena, rezultati nisu pretvoreni u fizičke jedinice ✔
  • C) Alat za segmentaciju nije ispravno odabran
  • D) Razlučivost slike je previsoka

Objašnjenje: Kalibracija mjerila (koliko mikrometara po pikselu) neophodna je za izdvajanje fizičke veličine iz slike. Ako se ovaj korak preskoči, vrijednosti ostaju neusporedive, ovisno o postavkama mikroskopa. Površine se moraju pretvoriti u fizičke jedinice kao što su kvadratni mikrometri.

9. Student uzima 10 uzoraka tkiva od jednog miša i koristi 'n=10' u statistici. Zašto je to netočno?

  • A) 10 uzoraka je premalo za statistiku, potrebno ih je najmanje 30
  • B) Uzorci tkiva su morali biti uzeti iz različitih organa
  • C) Ovih 10 primjera su tehnička ponavljanja; biološki n je i dalje 1, to je takozvano ponavljanje ✔
  • D) Uzorci su nevažeći jer su uzeti istog dana

Objašnjenje: Ponovljena mjerenja uzeta od iste osobe tehnička su ponavljanja; gdje je statistički n broj bioloških jedinica (ovdje miševa). Razmatranje tehničkog ponavljanja kao biološkog (pseudoreplikacija) proizvodi lažni značaj. Pravilan dizajn znači rad s više pojedinaca.

10. Jedna analiza je pokazala p=0,03. Koje je ispravno tumačenje ove vrijednosti?

  • A) Postoji 3% šanse da vidite ovaj ili ekstremniji rezultat kada u stvarnosti nema razlike ✔
  • B) Vjerojatnost da je učinak stvaran je 97%
  • C) Vjerojatnost da je nulta hipoteza istinita je 3%
  • D) Rezultat je 97% ponovljiv

Objašnjenje: p-vrijednost nije 'vjerojatnost da je hipoteza istinita' ili 'vjerojatnost da je učinak istinit'. P-vrijednost je vjerojatnost da se razlika vidi kao ili ekstremnija od one opažene kada razlike zapravo nema. Stoga p=0,03 ne znači 'učinak je 97% stvaran'; rezultate također treba procijeniti prema veličini učinka i intervalu pouzdanosti.

11. U prezentaciji, razlika od 3% između dvije grupe prikazana je kao ogromna kompresijom y-osi na raspon od 95-100. Čega je ovo primjer?

  • A) Dobra tehnika vizualizacije; ističe razliku
  • B) Problem palete prilagođene daltonistima
  • C) Prihvatljiv izbor stila
  • D) Pogrešan i nepošten grafikon koji preuveličava razliku sa skraćenom osi ✔

Objašnjenje: Neinicijaliziranje osi od nule (skraćena os) dovodi gledatelja u zabludu vizualnim preuveličavanjem male razlike. Ovo je kršenje načela poštenja; Posebno u stupčastim dijagramima, os bi trebala počinjati od nule, a razlika bi trebala biti prikazana svojom stvarnom veličinom.

12. Istraživač lijepi ono što misli da su anonimni podaci o pacijentu u javnom jezičnom modelu kako bi se analizirali. Zašto je ovo ponašanje problematično?

  • A) Nema problema; podaci se mogu dijeliti ako su anonimni
  • B) Pružanje osjetljivih podataka o pacijentu otvorenom modelu predstavlja kršenje privatnosti i etičkih/pravnih pravila (KVKK/GDPR) i ne može se poništiti ✔
  • C) Problematično je samo zato što će analiza biti spora
  • D) Model je problematičan jer ne može razumjeti podatke

Opis: Genetski/klinički podaci pacijenta iznimno su osjetljivi; Čak se i genomski podaci za koje se misli da su anonimni mogu ponovno identificirati. Pružanje ovih podataka javnom modelu krši KVKK/GDPR i odobrenja etičkog odbora (IRB) i predstavlja nepovratnu povredu privatnosti. Osjetljive podatke treba obrađivati ​​u lokalnim/sigurnim, ugovorenim okruženjima.

13. U jednoj studiji, razlika za koju su mislili da je 'pacijent naspram kontrole' zapravo je nastala zbog toga što su uzorci obrađeni dva različita dana. Kako se zove ova situacija i kako se s njom postupa?

  • A) To je izvanredni učinak; točke treba izbrisati
  • B) To je nedostatak normalizacije; dovoljna je samo korekcija mjerila
  • C) To je skupni učinak; trebaju biti uravnoteženi u dizajnu i dodati modelu kao skupna varijabla ✔
  • D) p-hakiranje; test treba promijeniti

Objašnjenje: Tehnička razlika zbog serije uzorkovanja/dana obrade naziva se učinak serije i može se zamijeniti s biološkom razlikom. Ispravan pristup je uravnotežiti serije u dizajnu i dodati varijablu serije u statistički model (npr. '~serija + stanje'), čime se tehnički signal odvaja od biološkog signala.

14. Želite izračunati GC omjer DNA sekvence. Koji je ispravan i ponovljiv pristup?

  • A) Ispišite kod koji izračunava brzinu GC s Biopythonom, pokrenite ga i upotrijebite izlaz ✔
  • B) Dajte modelu slijed i zamolite ga da usmeno kaže brzinu GC
  • C) Potvrđivanje omjera danog modelom drugim modelom
  • D) Gledajući prvih 100 slova niza i pogađajući okom

Objašnjenje: stopa GC je deterministički izračun; treba temeljiti na kodu koji obrađuje niz, a ne na vrijednosti koju jezični model 'pamti'. Umjesto da ga model izračuna, ispis koda za izračunavanje alatom kao što je Biopython i njegovo pokretanje sami će dati točan rezultat koji daje isti rezultat svaki put kada ga pokrenete.