Unità 6 / 11

Analiżi tal-Immaġni u Identifikazzjoni tat-Tip/Ċellola

Qligħ:

  • Kapaċità li tissepara l-kompiti ta 'segmentazzjoni u klassifikazzjoni u tagħżel l-għodda lesta xierqa (Cellpose, StarDist, MegaDetector) għal kull
  • Kapaċità li jiġi estratt kejl affidabbli minn stampi billi tapplika kalibrazzjoni fuq skala u verifika manwali
  • Jifhmu l-ħtieġa li jiġu diretti tbassir ta 'punteġġ ta' kunfidenza baxx għall-validazzjoni umana u tikkonferma l-mudell barra mid-distribuzzjoni tat-taħriġ.

Il-bijoloġija hija xjenza viżwali: ċelluli taħt mikroskopju, kolonji f'dixx petri, annimali f'kamera tal-foresti, tikek tal-mard fuq werqa. L-għadd, il-kejl u l-klassifikazzjoni ta’ dawn l-immaġini kienu biċċa xogħol tedjanti u suġġettiva li kienet tieħu sigħat. L-intelliġenza artifiċjali, speċjalment it-tagħlim fil-fond (rikonoxximent tal-mudell b'netwerks newrali artifiċjali b'ħafna saffi) mudelli ta 'immaġni bbażati, aċċellerat u standardizzat dan ix-xogħol. F'din l-unità, se niddiskutu kif nużaw l-intelliġenza artifiċjali fl-analiżi tal-immaġni bijoloġiċi, għodod lesti u rekwiżiti ta 'validazzjoni.

Twissija mill-bidu: mudell jista '"jirrikonoxxi" ċellula jew speċi, iżda jista' wkoll jagħraf ħażin; l-għajnejn tal-bniedem u l-verifika tat-tikketta reali huma essenzjali għal deċiżjonijiet kritiċi.

Żewġ tipi ta 'kompiti tal-wiri

  • Segmentazzjoni: Separazzjoni u għadd ta' oġġetti (ċelluli, nuklei) fl-immaġini pixel b'pixel. Eżempju ta' għodod: Cellpose, StarDist. "Kemm hemm ċelluli f'din l-immaġni tal-mikroskopju u kemm hi kbira kull waħda?"
  • Klassifikazzjoni/sejba: Tgħid x'inhu fl-immaġini jew issib il-post tagħha. Eżempju: ir-rikonoxximent tal-ispeċi f'ritratt ta' nassa tal-kamera (iNaturalist, MegaDetector), il-klassifikazzjoni ta' jekk werqa għandhiex mard jew le.

Dawn iż-żewġ kompiti jeħtieġu għodod differenti. L-intelliġenza artifiċjali (LLM) tgħinek tagħżel l-għodda t-tajba, tikteb il-kodiċi ta 'installazzjoni u invokazzjoni, u tinterpreta l-output.

Tip: Fl-analiżi tal-immaġini, ħafna drabi m'għandekx bżonn tħarreġ mudell mill-bidu. Għodod imħarrġa minn qabel bħal Cellpose jaħdmu direttament fuq ħafna tipi ta 'ċelluli. Ipprova l-għodda lesta l-ewwel; iżda kkonferma r-riżultat manwalment f'diversi stampi.

Pass pass: għadd taċ-ċelloli fuq stampi tal-mikroskopju

  1. Ipprepara immaġini: Tkabbir konsistenti, illuminazzjoni; innota l-format tal-fajl (TIFF, eċċ.).
  2. Kalibrazzjoni tal-iskala: Kun af kemm mikrometri għal kull pixel (essenzjali għall-kejl tad-daqs).
  3. Agħżel għodda ta 'segmentazzjoni: StarDist jekk tbajja tal-qalba; Cellpose għaċ-ċitoplasma.
  4. Mexxi: Ipprova l-għodda fuq immaġni.
  5. Ivverifika manwalment: Qabbel iċ-ċelloli li jsib il-mudell mal-immaġni attwali; Għadd ċelluli magħquda/mitlufa.
  6. Lott: Jekk il-validazzjoni hija sodisfaċenti, applika għas-sett kollu.
  7. Rapport: Numru ta' ċelloli, distribuzzjoni tad-daqs; Metodu u preċiżjoni tad-dokument.

Mudelli fil-pront kopjabbli

Rwol: Int l-assistent tal-analiżi tal-bijoimmaġni. Kompitu: Ikteb il-kodiċi Python li jaqsam u jgħodd iċ-ċelloli f'immaġni tal-mikroskopju b'Cellpose. Input: image.tif, kanal wieħed. Output: għadd taċ-ċelluli u viżwalizzazzjoni tal-maskra. Agħti l-kodiċi tax-xogħol b'kummenti u ġġustifika l-għażla tal-mudell.

Kif nivvalida l-output tas-segmentazzjoni tiegħi? Issuġġerixxi metodu u metrika (preċiżjoni, recall, F1) biex tqabbel in-numru ta 'ċelluli misjuba mill-mudell mal-kampjun I magħduda manwalment. Ikteb il-kodiċi wkoll.

Spjega l-fluss tax-xogħol tal-MegaDetector għall-iskoperta tal-annimali fir-ritratti tiegħi tan-nassa tal-kamera. Spjega l-iffrankar ta 'ħin u r-riskju ta' negattivi foloz fl-eliminazzjoni ta 'frejms vojta.

Ikteb kodiċi li tagħmel konverżjoni minn pixel għal mikrometru b'informazzjoni tal-bar tal-iskala u tikkalkula l-erja ta 'kull ċellula f'mikrometri kwadri. Kalibrazzjoni: [X] pixel = [Y] mikrometru.

Pront dgħajjef / Pront qawwi

Dgħajjef: "Għodd iċ-ċelloli f'dan ir-ritratt."

Qawwija: "Għandi immaġni tan-nuklei mtebbgħin bid-DAPI (TIFF, kanal wieħed, 2048x2048, skala 0.32 µm/pixel). Ikteb kodiċi li ssegmenti u jgħodd in-nuklei bil-mudell 2D imħarreġ minn qabel ta' StarDist, li tagħti l-erja ta' kull nukleu f'mikrometri kwadri. Imbagħad żid 3 kodiċi manwali li tipproduċi kodiċi ta' preċiżjoni f'mikrometri kwadri. rapport."

Differenza: Il-pront qawwi għandu t-tip ta 'immaġni, pittura, riżoluzzjoni, skala u skema ta' verifika. Il-mudell juża l-għodda korretta u l-iskala korretta.

tliet każijiet żgħar

Każ 1 — Ċelloli konfluwenti: Student għadd 400 ċellula f'immaġni ta 'tessut dens b'Cellpose; Meta kont ingħadd bl-idejn, irriżulta li kien 560. Il-mudell għaqqad iċ-ċelloli li jmissu lil xulxin bħala ċellula waħda. L-AI ssuġġeriet li jiġi aġġustat il-parametru tad-dijametru taċ-ċellula u li jinbidel il-limitu tal-fluss; L-għadd tela 'għal 545. Lezzjoni: aġġusta l-parametri skond l-immaġni reali.

Każ 2 — Konfużjoni ta 'speċi: Fi proġett ta' ekoloġija, rikonoxximent awtomatiku ta 'speċi ripetutament ittikketta volpi bħala "qattus" f'immaġini bil-lejl. Il-mudell spjega li d-dawl baxx u l-iżbilanċ fid-dejta tat-taħriġ jistgħu jikkawżaw dan l-iżball; It-tim għadda t-tikketti ambigwi għall-validazzjoni umana. Lezzjoni: jekk il-punteġġ ta 'kunfidenza tal-mudell huwa baxx, il-verifika umana hija obbligatorja.

Każ 3 — Żball fl-iskala: Riċerkatur irrapporta żoni taċ-ċelluli f'pixels iżda nesa jikkonverti għal mikrometri; Ir-riżultat kien inkompatibbli mal-letteratura. Meta l-intelliġenza artifiċjali żiedet il-pass tal-kalibrazzjoni, il-valuri waqgħu f'medda raġonevoli. Lezzjoni: il-konverżjoni tal-unità fiżika hija kritika.

tabella ta 'tqabbil

Tfittxija

vettura xierqa

metrika ta' verifika

Segmentazzjoni tal-qalba

StarDist

F1 b'għadd manwali

Konfini taċ-ċitoplasma/ċellula

cellpose

IoU (rata ta' sovrappożizzjoni)

Identifikazzjoni tal-ispeċi (ħajja selvaġġa)

MegaDetector/iNaturalist

Punteġġ ta 'fiduċja + approvazzjoni umana

klassifikazzjoni tal-mard

Mudell imħarreġ apposta

Matriċi ta' konfużjoni

Żbalji komuni

  • Ipproċessar tal-lott mingħajr validazzjoni manwali: Propagazzjoni tal-iżball tal-mudell fid-dejta kollha.
  • Taqbeż il-kalibrazzjoni tal-iskala: Ma tikkonvertix l-unità tal-pixel għal unità fiżika.
  • Taċċetta tbassir b'punteġġi ta 'kunfidenza baxxi: Li ma tirreferix sitwazzjonijiet inċerti għall-bnedmin.
  • Tħalli l-parametri bħala default: Mhux tadatta s-settings bħad-dijametru taċ-ċellula għall-immaġni.
  • Immaġni barra d-distribuzzjoni tat-taħriġ: Blindly bl-użu tal-mudell fil-kundizzjoni li qatt ma rat (kulur differenti, tip).
Attenzjoni: Mudelli tal-immaġini jistgħu jaħdmu tajjeb fuq immaġini simili għad-dejta tat-taħriġ, iżda mhux mistennija b'mod ħażin taħt kundizzjonijiet differenti (tebgħa ġdida, speċi ġodda, mikroskopju differenti). Meta timxi għal sett ta 'dejta ġdid, tafdax il-mudell mingħajr ma tivvalidah manwalment fuq diversi stampi. Il-kunsens tal-bniedem huwa essenzjali għal deċiżjonijiet ta' konsegwenzi kbar bħall-konservazzjoni jew id-dijanjosi tal-ispeċi.

Mis-segmentazzjoni sal-kejl: lil hinn min-numri

L-għadd taċ-ċelloli huwa spiss l-ewwel pass; Il-valur intrinsiku estratti kejl dwar kull oġġett. Għexieren ta 'karatteristiċi għal kull ċellula, bħal żona, perimetru, tond, intensità tal-fluworexxenza (kemm huwa espress markatur), jistgħu jiġu kkalkulati minn maskra ta' segmentazzjoni. Il-funzjoni regionprops fil-librerija scikit-image tagħmel dan. L-AI tikteb kodiċi li estratti dan il-kejl u tferra 'r-riżultati f'tabella; tista’ wkoll tqabbel gruppi (eż. “Iċ-ċelloli ttrattati huma iżgħar mill-kontroll?”).

Oħroġ iż-żona, il-perimetru u l-intensità medja tal-fluworexxenza ta’ kull ċellula mill-maskra Cellpose b’reġjun scikit-image props. Ikteb ir-riżultat f'CSV; Qabbel il-gruppi ta 'kontroll u trattament fil-plott tal-kaxxa. Applika l-kalibrazzjoni tal-iskala (µm/pixel).

Tip: Tinsiex li tneħħi l-isfond meta tkejjel id-densità; Il-valuri ta 'intensità mhux ikkalibrati jiddependu fuq l-issettjar tal-mikroskopju u huma komparabbli mhux f'termini assoluti, iżda f'termini relattivi bejn gruppi meħuda taħt l-istess kundizzjoni.

Meta tħarreġ mudell: ftit dejta, tikkettjar bir-reqqa

Xi drabi l-għodod li jinsabu fuq l-ixkaffa mhumiex biżżejjed u trid tħarreġ il-mudell ta’ klassifikazzjoni tiegħek stess (eż. sintomu speċifiku ta’ marda). Hawn jispikkaw żewġ nases. L-ewwel hija t-tnixxija tad-dejta: l-immaġini tal-istess individwu/kampjun li qed jiġu inklużi kemm fis-settijiet tat-taħriġ kif ukoll tat-test jagħmlu l-mudell jidher aktar ta 'suċċess milli hu; tagħmel id-diviżjoni fil-livell individwali. It-tieni hija l-klassi żbilanċjata: jekk il-kampjuni tal-pazjent huma ftit, il-mudell juri preċiżjoni għolja billi jgħid "dejjem b'saħħtu" iżda huwa inutli; Ħares lejn is-sensittività (recall) u l-matriċi tal-konfużjoni minflok l-eżattezza. AI tikteb dan il-kodiċi ta 'taħriġ, iżda huwa xogħol tiegħek li jinnaviga dawn in-nases metodoloġiċi.

Kwalità tal-immaġni u proċessar minn qabel

Is-suċċess ta 'mudell tal-wiri jiddependi direttament fuq il-kwalità tal-immaġni li tipprovdi. Immaġini li huma barra mill-fokus, esposti żżejjed, baxxi b'kuntrast, jew meħuda b'ingrandimenti differenti se jħawdu anke l-aħjar mudell. C'est pourquoi passi sempliċi ta 'pre-ipproċessar qabel is-segmentazzjoni ħafna drabi jtejbu b'mod sinifikanti r-riżultat: korrezzjoni fl-isfond (tneħħi l-iżbilanċ tad-dawl), normalizzazzjoni tal-kuntrast u tnaqqis tal-ħoss. L-AI jikteb dan il-kodiċi ta 'preproċessar (b'scikit-image jew OpenCV); Imma inti tiddeċiedi liema korrezzjoni hija meħtieġa billi tħares lejn l-immaġni. Preproċessar eċċessiv huwa wkoll perikoluż: "tindif" wisq ta 'immaġni jista' jħassar l-istruttura bijoloġika attwali u jinbidel fi tisbiħ tad-dejta. Ir-regola hija din: l-ipproċessar minn qabel għandu jiġi applikat għall-immaġini kollha bl-istess mod predefinit, mhux magħmul b'mod selettiv wieħed wieħed biex isebbaħ ir-riżultat.

Applika preproċessar standard għall-immaġini tal-mikroskopju tiegħi qabel is-segmentazzjoni: korrezzjoni tal-isfond, normalizzazzjoni tal-kuntrast, tnaqqis żgħir tal-ħoss. Applika l-istess parametri għall-immaġini KOLLHA (mhux b'mod selettiv). Uri qabel/wara paragun. Uża scikit-image.

Fil-qosor

L-intelliġenza artifiċjali tiffranka ħafna ħin fl-analiżi tal-immaġni bijoloġika (segmentazzjoni taċ-ċelluli, sejbien ta 'speċi/mard). Għodod mhux disponibbli fuq l-ixkaffa bħal Cellpose, StarDist, MegaDetector isolvu l-biċċa l-kbira tal-kompiti mingħajr taħriġ mill-bidu. Madankollu, ir-riżultat għandu jiġi vverifikat manwalment, l-iskala għandha tiġi kkalibrata, u punteġġi ta 'kunfidenza baxxi għandhom ikunu diretti lejn il-bnedmin. Il-mudell mhuwiex affidabbli barra mid-distribuzzjoni tat-taħriġ; Il-konferma hija essenzjali meta tiċċaqlaq għal data ġdida.

Kompitu ta' applikazzjoni

Ħu immaġni tal-mikroskopju (jew kampjun tad-dejta). Ħalli l-intelliġenza artifiċjali tikteb u tħaddem kodiċi li ssegmenti u tgħodd iċ-ċelloli b'Cellpose jew StarDist. Qabbel bl-idejn għadd iċ-ċelloli li l-mudell isib f'mill-inqas immaġini waħda; Innota kemm ċelluli ġew mitlufa/magħquda. Irrapporta l-erjas taċ-ċelluli f'mikrometri kwadri billi żżid il-kalibrazzjoni tal-iskala.

lista ta' kontroll

  • [ ] Żidt it-tip tal-immaġni, il-pittura u r-riżoluzzjoni mal-pront.
  • [ ] Applikajt il-kalibrazzjoni tal-iskala (pixel-mikrometer).
  • [ ] Ivverifikajt manwalment ir-riżultat fuq mill-inqas immaġini waħda.
  • [ ] Issettja l-parametri tas-segmentazzjoni skont l-immaġini.
  • [ ] Bgħatt tbassir b'punteġġi ta' kunfidenza baxxi lill-validazzjoni umana.
  • [ ] Ma kontx afdajt il-mudell mingħajr ma kkonfermah fis-sett tad-dejta l-ġdid.