Добици:
- Способност да се изгради јасна хипотеза, тачне контроле, рандомизација, заслепљивање и претходна анализа снаге у експериментални дизајн
- Способност разликовања биолошког понављања од техничког понављања и избегавања грешке псеудорепликације
- Способност спречавања п-хацкинга на првом месту фиксирањем плана анализе пре експеримента (претходно снимање)
Најскупља грешка у биологији је лоше осмишљен експеримент. Нетачна анализа може се касније исправити; Али подаци прикупљени са недовољним бројем понављања, неконтролисаним или мешовитим варијаблама не могу се повратити никаквом статистиком. "Смеће унутра, смеће напоље." Зато експеримент мора бити исправно осмишљен пре него што почне. Вештачка интелигенција је моћан партнер у размишљању у овој фази пројектовања: призива контролне групе, пише код који врши анализу снаге (израчунавајући број узорака потребних да би се ухватила тражена разлика), доводи у питање збуњујуће варијабле. Али коначна одлука о дизајну је ваша са знањем о домену.
У овој јединици ћемо разговарати о компонентама доброг експерименталног дизајна и о томе како користити вештачку интелигенцију у овом процесу.
Компоненте доброг експерименталног дизајна
- Јасна хипотеза: Проверљива, мерљива тврдња. Као "Овај лек успорава раст ћелија."
- Независна и зависна варијабла: Шта мењате (доза лека), шта мерите (број ћелија)?
- Контролна група: Група за поређење која није имала интервенцију. Без тога не можете знати разлог за разлику.
- Репликација: Биолошка репликација (различити појединци/културе) се разликује од техничке репликације (поновно мерење истог узорка); Права моћ је у биолошком понављању.
- Случајна дистрибуција узорака у групе и редослед обраде; смањује пристрасност.
- Заслепљивање: Особа која врши мерење не зна која је група; спречава субјективну пристрасност.
- Анализа снаге: Унапред се израчунава колико је узорака потребно да би се ухватио очекивани ефекат са вероватноћом од 80%.
Савет: Дајте експериментални дизајн АИ да га „критикује“. „Која контрола недостаје у овом плану, која збуњујућа варијабла ми је недостајала?“ Питање открива празнине које не можете видети када размишљате сами.
Анализа снаге: зашто и како
Веома мали узорак може учинити да се чак и стварна разлика чини „безначајном“ (мала снага); Узорак који је превелик је губитак ресурса и може учинити да безначајне разлике изгледају „значајне“. Тачан број се налази анализом снаге и зависи од: очекиване величине ефекта, прихваћених стопа грешака (алфа и бета) и варијабилности података.
Улога: Ви сте помоћник за дизајн експеримента и биостатистику. Задатак: Извршите анализу снаге за експеримент упоређујући две групе. Напишите код који израчунава број потребних узорака по групи са очекиваном величином ефекта Цохен-ов д = 0,8, алфа = 0,05, снага = 0,80. модели статистике и објасните претпоставке.
Покрећете код; на пример добићете резултат попут „26 узорака по групи“. Упоредите ово са буџетом експеримента и направите реалан план.
Корак по корак: осмишљавање експеримента
- Напишите хипотезу: Једна реченица, мерљива.
- Дефинишите варијабле: независне, зависне, одржаване константне.
- Идентификујте контроле: негативна контрола, позитивна контрола, контрола возила.
- Наведите миксере: време, серија, температура, експериментатор — како ће се они контролисати?
- Извршите анализу снаге: Израчунајте потребан број понављања.
- Планирајте рандомизацију и заслепљивање.
- Напишите план анализе унапред: Одредите који тест ћете користити пре експеримента (спречава п-хаковање).
Шаблони упита који се могу копирати
Критикујте мој експериментални план. Пронађите слабости у смислу: контролне групе, броја понављања, рандомизације, заслепљивања, збуњујућих фактора. Предложите конкретну корекцију за сваки недостатак. План: [текст]
Објасните примером разлику између биолошког понављања и техничког понављања. По мом искуству [објашњење] који би требало да буде колико и зашто?
Желим да поправим свој план анализе ПРЕ експеримента. Принос: [дизајн]. Који је статистички тест одговарајући, које претпоставке треба да проверим, да ли ће бити више поређења? Пишите корак по корак.
Слаби промпт / Јаки промпт
Слабо: „Дизајнирајте експеримент.“
Стронг: „Желим да тестирам да ли је дрога
Разлика: У снажном промпту, хипотеза, варијабле, време мерења и доступне контроле су јасни; Модел даје конкретне повратне информације прилагођене терену.
три мини кофера
Случај 1 — Ефекат ивице: Један тим је експериментисао на плочи са 96 јажица; Резултати су били чудни. Вештачка интелигенција је подсетила да се ивични бунари плоче понашају другачије због испаравања (ефекат ивице) и предложила је да се ивице користе као контроле и да се узорци дистрибуирају насумично. Конзистентност се повећава у понављању.
Случај 2 — Псеудорепликација: Ученик је узео 10 узорака ткива од једног миша и рекао „н=10“. Међутим, ово је 10 техничких понављања; биолошко н је и даље 1. Када је модел објаснио ову разлику, ученик је редизајнирао експеримент са 6 мишева. Лекција: статистичко н је биолошка јединица.
Случај 3 — Недовољна снага: Једна група је тестирала 4 узорка по групи и пропустила прави ефекат (п=0,09). Анализа снаге је показала да 4 узорка дају само 35% снаге. Да је модел унапред израчунао тачан број узорака, експеримент би или био постављен са довољном снагом или не би уопште почео. Лекција: израчунајте снагу унапред, не касније.
упоредни графикон
концепт
Исправна примена
честа грешка
опет
Бројите биолошко понављање
размишљати о техничком понављању
контролу
Негативан+позитив+носач
неконтролисани експеримент
Рандомизација
Групирајте и поредајте насумично
Секвенцијална обрада
моћ
Израчунајте пре експеримента
не осврћи се
план анализе
пин унапред
Одабир тестова на основу података
Уобичајене грешке
- Прескакање контролне групе: чини узрок разлике неразумљивим.
- Псеудо-понављање: Разматрање техничког понављања као биолошког н производи псеудо-значај.
- Не врши се анализа снаге: недовољно или расипно узорковање.
- Игнорисање збуњујућих фактора: Ефекти као што су серија, локација, време искривљују резултат.
- Избор теста анализе након тога: Тражење теста који даје резултат који желите (п-хаковање).
Опрез: АИ вам даје статистику и предлоге за дизајн, али захтева познавање домена о биолошком значењу експеримента и контроли која је заправо потребна. Ниједна анализа не може спасити лоше осмишљен експеримент; Разјасните дизајн пре него што експеримент почне, по могућности са статистичаром.
С обзиром на изворе варијабилности
Неопјевани херој доброг дизајна је размишљање унапријед о томе одакле долази варијабилност података. Биолошка варијабилност (природна разлика између појединаца) је неизбежна и оно што желите да проучавате; Техничка варијабилност (грешка пипете, одступање уређаја, разлика у дану) је бука и треба је смањити. Начин да се то двоје одвоји је у дизајну: дистрибуирати техничку варијабилност са рандомизацијом и заслепљивањем, узорковати биолошку варијабилност са довољним понављањем.
Корисно је да почнете тако што АИ наведе могуће изворе варијабилности у вашем експерименту. На пример, у експерименту са ћелијском културом: број пролаза (колико пута су ћелије подељене), средња серија, локација инкубатора, време жетве. Познавање ових извора вам омогућава да одлучите које ћете задржати константним, а које ћете насумично поређати.
Наведите све могуће изворе варијабилности (биолошке и техничке) у следећем експерименту; Предложите „задржи фиксно“, „насумично“ или „сачувај и додај моделу као променљиву“ за сваки. Експеримент: [опис]
Предрегистрација: најмоћније средство интегритета
Најмоћнији облик фиксирања плана анализе пре експеримента је предрегистрација: снимање ваше хипотезе, величине узорка и плана анализе на локацији са временским ознакама пре прикупљања података. Ово елиминише каснију сумњу „Покушао сам са анализом док нисам добио оно што сам желео“ и увелико повећава кредибилитет вашег рада. АИ вам може помоћи да нацртате свој термински лист, разјасните хипотезу и напишете план анализе. На тај начин ћете успоставити најјачи штит против п-хаковања, што ћемо видети у јединици 8, пре него што експеримент почне.
Разлике у дизајну према врсти експеримента
Не прати сваки биолошки експеримент исти образац; Дизајн се разликује у зависности од врсте проблема. Експеримент доза-одговор захтева вишеструке дозе и модел криве; Једна доза није довољна. У експерименту временске серије, размак и зависност мерних тачака (поновно мерење исте особе) одређују дизајн. У теренској/еколошкој студији, насумично узорковање и просторна зависност (сличност оближњих тачака) долазе до изражаја. Ви кажете АИ тип вашег експеримента и питате „који су елементи дизајна критични за овај тип?“ Питање: омогућава вам да рано ухватите занемарену компоненту. Али запамтите: модел подсећа на опште принципе, он не познаје биолошке детаље вашег система.
Укратко
Солидан експеримент; Заснован је на јасној хипотези, тачним контролама, довољним биолошким репликацијама, рандомизацији, заслепљивању и унапред израчунатој снази. АИ је моћан партнер који подсећа на ове компоненте, пише код за анализу снаге и критикује ваш план. Али биолошко значење и коначна одлука о дизајну је ваша. Поправљање плана анализе пре експеримента је противотров за замку п-хаковања коју ћемо видети у следећој јединици.
Задатак апликације
Опишите експеримент који имате на уму (или пример) у једном пасусу: хипотеза, варијабле, контроле, планирана репликација. Имали сте вештачку интелигенцију да критикује овај план; Наведите недостајуће контроле и миксере. Затим одштампајте код за анализу снаге (са вашим д и алфа вредностима) и нека израчуна број потребних узорака. Ревидирајте свој план уз ове повратне информације.
контролна листа
- [ ] Написао сам своју хипотезу у једној мерљивој реченици.
- [ ] Одредио сам неопходне контролне групе (негативне/позитивне/носиоце).
- [ ] Правилно сам разлучио биолошко и техничко понављање.
- [ ] Урадио сам анализу снаге пре експеримента.
- [ ] Планирао сам рандомизацију и заслепљивање.
- [ ] Поправио сам тест анализе а да нисам видео податке.