Yunit 11 / 12

Kontrol ng Tao, Transparency, Bias at Etika

Mga nadagdag:

  • Pagkilala sa tatlong modelo ng kontrol ng tao (sa loop, sa loop, sa command)
  • Pagkilala at pagpapagaan ng mga panganib ng bias at diskriminasyon sa output ng AI
  • Pagsasalin ng mga prinsipyo ng transparency at pagpapaliwanag sa mga konkretong aplikasyon

Ang isang AI system ay maaaring teknikal na gumana nang perpekto ngunit mali pa rin: maaari itong sistematikong alisin ang isang grupo, hindi maipaliwanag ang dahilan ng desisyon nito, o humantong sa mga tao na tanggapin ito nang walang pagtatanong. Sa yunit na ito, isinasalin namin ang "malambot" ngunit pinaka mapagpasyang bahagi ng pamamahala—kontrol ng tao, pamamahala ng bias, transparency, at etika—sa mga kongkretong kasanayan. Ang layunin ay hindi malabong slogan tulad ng "huwag magtiwala sa AI"; Ang mga ito ay gumaganang mekanismo na nagpapakita kung paano i-audit ang isang output, bawasan ang bias, at magtatag ng transparency.

Tatlong modelo ng kontrol ng tao

Ang pangangasiwa ng tao ay nangangahulugan na ang tao ay nagpapanatili ng kontrol sa mga desisyong ginawa ng AI. May tatlong pangunahing modelo at kinakailangang piliin ang tamang modelo ayon sa panganib.

modelo

Ibig sabihin

Kung saan magkasya

Tao sa loop

Inaprubahan ng isang tao ang bawat desisyon

Mga desisyong may mataas na peligro at may epekto

Tao sa loop

Gumagana ang AI, sinusubaybayan at nakikialam ang mga tao kung kinakailangan

Katamtamang panganib, mataas na dami ng mga transaksyon

Man in command

Ang tao ay nagdidisenyo ng sistema, nagtatakda ng mga limitasyon nito, maaaring isara ito

Pangkalahatang antas ng pamamahala

Para sa mga desisyon na makabuluhang nakakaapekto sa tao (trabaho, kredito, pangangalagang pangkalusugan), mas gusto ang human-in-the-loop na modelo: Ang AI ay nagbibigay ng payo, ngunit isang karampatang tao ang gumagawa ng pangwakas na desisyon. "Sinabi kaya ng AI" ay hindi kailanman isang dahilan; Ang responsibilidad ay palaging nasa tao.

Pansin: Hindi sapat na "sa papel" ang kontrol ng tao. Kung awtomatikong inaprubahan ng tao ang mungkahi ng AI (rubber-stamping), walang tunay na kontrol. Para maging makabuluhan ang pag-audit, dapat makita ng isang tao ang katwiran, tanungin ito, at tunay na magsabi ng "hindi."

Panganib ng pagtatangi at diskriminasyon

Ang bias ay kapag ang AI ay sistematikong nagpipinsala o nagpapabuti sa ilang grupo. Ang pinagmulan nito ay kadalasang nagsasanay ng data: kung mayroong diskriminasyon sa makasaysayang data, ang AI ​​ay natututo at nagpapanatili nito - kahit na sinusukat ito.

Mga praktikal na hakbang upang mabawasan ang bias:

  1. Suriin ang mga sensitibong variable: Suriin ang epekto ng mga field gaya ng kasarian, edad, etnisidad sa desisyon.
  2. Mga resulta ng pagsubok ayon sa mga grupo: Gumagawa ba ang system ng iba't ibang mga rate ng pagtanggi/pagtanggap sa iba't ibang grupo?
  3. Mag-ingat sa mga proxy variable: Ang mga field gaya ng "kapitbahayan" o "paaralan" ay maaaring pahiwatig na nagpapahiwatig ng pagkakaiba-iba ng etniko/uri.
  4. Magtatag ng regular na pagsubaybay: Ang bias ay patuloy na sinusubok, hindi lamang isang beses; Maaari itong bumalik habang nagbabago ang data.

tatlong mini case

Case 1 — Rubber stamp. Sa isang bangko, inaprubahan ng mga opisyal ng pautang ang marka ng AI nang hindi sinusuri ito; Sabi nila "nakalkula na ito ng sistema". Ipinapakita ng isang pag-audit na sa 498 sa 500 pagsusumite, ang tao ay gumawa ng eksaktong kaparehong desisyon gaya ng AI — kaya walang tunay na pagsusuri. Solusyon: hilingin sa mga tao na makita ang pangangatwiran, hulaan ang desisyon sa isang tiyak na lawak, at mangailangan ng "bakit sumasang-ayon/hindi sumasang-ayon" na tala.

Kaso 2 — Implicit bias. Ang isang nagre-recruit na AI ay mas mababa ang marka ng mga babaeng kandidato, kahit na hindi ito gumagamit ng kasarian. saan galing? Dahil karamihan sa mga nakaraang data ay kasama ang mga lalaki sa isang partikular na posisyon, natutunan ng modelo ang hindi direktang diskriminasyon sa pamamagitan ng proxy variable gaya ng "walang tigil na karera." Ang pagsubok na nakabase sa grupo ay nagpapakita nito; Kinukuha ng team ang mga surrogate variable at sinusubaybayan ang resulta.

Kaso 3 — Magtiwala nang may transparency. Sa pagtatasa ng pinsala na pinapagana ng AI nito, ipinapaalam ng isang kompanya ng insurance sa bawat customer na "ang desisyon ay pinapagana ng AI, maaari silang mag-apela at humiling ng pagsusuri ng tao." Ang rate ng pagtutol ay mas mababa kaysa sa inaasahan dahil naiintindihan at pinagkakatiwalaan ng mga customer ang proseso. Ang transparency ay nagdaragdag ng tiwala habang binabawasan ang panganib.

Transparency at explainability

Ang transparency ay tungkol sa pagpapalinaw sa mga nauugnay na tao na ang isang AI ay kumikilos at kung paano ito gumagana. Ang pagpapaliwanag ay nangangahulugan ng kakayahang ipaliwanag ang dahilan ng isang desisyon sa isang nauunawaang paraan. Mga konkretong aplikasyon:

  • "Nakikipag-usap ka sa isang AI" na notification sa AI na nakikipag-ugnayan sa tao.
  • "Ang desisyong ito ay batay sa mga sumusunod na salik" na paliwanag sa mga awtomatikong pagpapasya.
  • Malinaw na ipakita ang landas sa pag-apela at humiling ng pagsusuri ng tao.
  • Para sa mga panloob na koponan: dokumentasyon at pagtatala ng kung ano ang ginagawa ng modelo.
Hint: Magtanong ng desisyon ng AI "ano ang tatlong nangungunang salik na nakaimpluwensya sa desisyong ito?" Subukan ito sa tanong. Kung hindi ito magawang maunawaan ng system at malaki ang epekto ng desisyon sa tao, hindi pa handa ang system na iyon para sa responsableng paggamit.

Automation bias: sariling bitag

Kahit na naitatag ang transparency at pangangasiwa ng tao, mayroong mapanlinlang na panganib sa panig ng tao: bias sa automation. Ito ang ugali ng mga tao na magtiwala sa output ng isang makina nang higit pa sa kanilang sariling paghuhusga. Dahil ang on-screen na panukala ng AI ay lumalabas na "layunin at kalkulado," ang isa ay natutukso na tanggapin ito nang walang pagtatanong — ito ang sikolohikal na pinagmulan ng rubber stamp.

May mga konkretong paraan para mabawasan ito. Hikayatin muna ang kontra-opinyon: tanungin ang taong nag-aapruba sa desisyon na "Bakit ako maaaring hindi sumasang-ayon sa AI?" Hilingin sa kanya na isipin ang tungkol sa tanong. Pagkatapos ay ipakita ang marka ng kumpiyansa: ipahiwatig kung gaano tiwala ang AI; Markahan ang mga output ng mababang kumpiyansa nang hiwalay. Pagkatapos ay mag-set up ng alerto sa salungatan: Kung nilalabag ng rekomendasyon ng AI ang panuntunan ng institusyon o ang data na magagamit ng tao, iha-highlight ito ng system. Panghuli, ilapat ang dalawang prinsipyo ng tao sa mga kritikal na desisyon; Ang nag-iisang approver ay mas madaling kapitan ng automation bias.

Babala: Ang pagsasabi ng "may pag-apruba ng tao" ay hindi nangangahulugan ng pagiging malaya sa pagkiling sa automation. Ang tao ay dapat magkaroon ng parehong awtoridad, oras, at tamang impormasyon upang tanungin ang AI. Ang isang system na pumipilit sa nag-aapruba na gumawa ng 200 desisyon sa loob ng 3 segundo ay hindi aktwal na nag-aalok ng tunay na kontrol ng tao.

Mga nakopyang template

TEMPLATE 1 — Pagpili ng modelo ng kontrol ng tao: "Aling modelo ng kontrol ng tao ang angkop para sa sumusunod na paggamit ng AI [ilarawan ang paggamit]: sa loop, sa loop, o sa command? Magrekomenda nang may katwiran, isinasaalang-alang ang panganib at epekto sa indibidwal. Tukuyin kung anong kontrol ang dapat kong idagdag upang maiwasan ang panganib ng rubber stamp."

TEMPLATE 2 — Bias testing plan: "Gumuhit ng [describe usage] bias testing plan para sa sumusunod na suporta sa pagpapasya AI: aling mga grupo ang dapat kong ihambing, anong sukatan ang dapat kong sukatin (rejection/acceptance rate, atbp.), anong mga surrogate variable ang dapat kong hanapin, gaano kadalas ko dapat ulitin ang pagsubok? Isulat ito nang sunud-sunod."

TEMPLATE 3 — Text ng paglalarawan ng desisyon: "Sumulat ng isang simpleng text ng paglalarawan para sa isang personalized na automated na desisyon: kung ang desisyon ay pinapagana ng AI, mga pangunahing salik na nakakaimpluwensya sa desisyon, isang paraan upang umapela at humiling ng pagsusuri ng tao. Hindi paratang, magalang na tono, 120 salita o mas kaunti."

TEMPLATE 4 — Checklist ng etikal na pagsusuri: "Maghanda ng checklist ng pagsusuri sa etika bago mag-publish ng paggamit ng AI: pagiging patas/diskriminasyon, transparency, kontrol ng tao, privacy, seguridad, pananagutan. Magsama ng 1-2 malinaw na tanong na sasagutin sa ilalim ng bawat heading."

Mahinang prompt / Malakas na prompt

MAHINA: “Patas ba ang pagre-recruit ng AI na ito?”-> Ang modelo ay nagbibigay ng pangkalahatang sagot tulad ng 'dapat maging patas'; ay hindi nagbibigay ng nasusubok na paraan at pagsukat ng bias. STRONG: "Mag-set up ng bias testing plan para sa recruiting support AI na ito: isang paraan para ihambing ang mga rate ng pagtanggap sa mga pangkat ng kasarian at edad, mga variable na proxy na isasaalang-alang, katanggap-tanggap na limitasyon ng pagkakaiba, at dalas ng pagsubaybay. Magdagdag din ng kontrol para matiyak na ang tao ang gagawa ng panghuling desisyon." -> Ang modelo ay gumagawa ng isang nasusukat, nauulit na mekanismo ng pagiging patas.

Mga karaniwang pagkakamali

  • Iniwan ang kontrol ng tao "sa papel" at awtomatikong pag-apruba sa rekomendasyon ng AI (rubber stamp).
  • Ang pag-iwan ng mga desisyon na makabuluhang nakakaapekto sa tao nang hindi sinusubaybayan sa halip na sa loop.
  • Isinasaalang-alang ang pagkiling na nalutas dahil lamang sa "binura ko ang sensitibong variable"; nilaktawan ang mga variable ng proxy.
  • Isang beses ang pagsubok ng bias at hindi ito patuloy na sinusubaybayan.
  • Nilaktawan ang transparency dahil "ito ay isang teknikal na detalye, hindi mauunawaan ng user."
  • Paggamit ng isang sistema na hindi maipaliwanag ang dahilan ng desisyon sa mga kritikal na desisyon.
  • Iniiwan ang etikal na pagsusuri hanggang matapos ang paglalathala, na nagsasabing "tingnan natin mamaya."

Sa buod

  • Ang kontrol ng tao ay ipinatupad sa tatlong modelo; Sa mga desisyon na nakakaapekto sa mga tao, mas pinipili ang mga tao sa cycle.
  • Ang kontrol ay dapat na makabuluhan; Ang rubber stamp (auto-approve) ay hindi ang aktwal na audit.
  • Ang bias ay madalas na nagmumula sa data ng pagsasanay; Ang mga sensitibo at kahalili na variable ay dapat na masuri at patuloy na subaybayan.
  • Ang transparency at explainability ay nangangailangan ng malinaw na pagpapakita sa user na ang AI ay nasa laro at ang dahilan para sa desisyon.
  • Ang etikal na pagsusuri ay nangyayari bago ang paglalathala; ang responsibilidad ay laging nasa tao, "sabi ni AI" ay walang dahilan.

Gawain ng aplikasyon

Pumili ng proseso ng pagpapasya ng AI na nakakaapekto sa mga tao sa iyong organisasyon (halimbawa, pagsusuri ng aplikasyon). Tukuyin ang naaangkop na modelo ng kontrol ng tao para sa prosesong ito na may katwiran at magdisenyo ng isang kongkretong kontrol upang maiwasan ang pag-stamp ng goma (hal. kinakailangan upang makita ang katwiran, sample na pagsusuri). Pagkatapos ay magsulat ng plano sa pagsubok ng bias: tukuyin kung aling mga pangkat ang iyong ihahambing, sa anong sukatan, gaano kadalas, at kung aling mga variable ng proxy ang iyong bibigyan ng pansin. Panghuli, mag-draft ng text ng pagpapaliwanag ng desisyon na ipapakita sa tao sa panahon ng prosesong ito at magsama ng path ng apela/pagsusuri ng tao.

checklist

  • [ ] Pinili ko ang modelo ng kontrol ng tao na angkop sa proseso.
  • [ ] Nagdisenyo ako ng konkretong kontrol na pipigil sa rubber stamp.
  • [ ] Naghanda ako ng plano sa pagsubok ng bias (mga pangkat, sukatan, dalas).
  • [ ] Sinuri ko ang panganib ng mga kahalili na variable.
  • [ ] Sumulat ako ng text explanation ng desisyon para sa tao.
  • [ ] Malinaw kong ipinakita ang landas sa pag-apela at pagsusuri ng tao.
  • [ ] Isinagawa ko ang pagsusuri sa etika bago ilathala.