Enhet 10 / 12

Fördomar, diskriminering och etik: Rättvis och kulturellt lyhörd användning

Vinster:

  • Att känna igen när AI skapar fördomar genom träningsdata, inramning, dubbelmoral och smicker
  • Förmåga att upprätta en kontroll mot partiskhet med neutrala frågor, evidens-stereotyp diskriminering och omvänd vinkeltest
  • Förmåga att översätta stigmatiserande språk till ett beskrivande och respektfullt språk genom att använda kulturell kunskap som en uppmärksamhetspunkt snarare än en definitiv regel

Det sociala arbetets raison d'être är rättvisa och människovärde; Kärnan i yrket är ett åtagande att varje individ är lika värde, diskriminering motarbetas och utsatta grupper skyddas. Artificiell intelligens medför en risk som i det tysta kan skada just dessa värden: partiskhet. AI lär sig av historiska data; Om dessa data inkluderar ojämlikheter, stereotyper och diskriminering i samhället, lär sig AI dem och återskapar dem på ett flytande, "objektivt" språk. I händerna på en socialarbetare kan detta översättas till en systematiskt mer negativ bedömning av en grupp, en stereotypisering av en familj eller ett missförstånd av en kultur. I den här enheten lär du dig att känna igen AI-bias, kontrollera mot den och använda AI med rättvisa och kulturell känslighet.

Ett faktum från början: AI är inte neutral, den verkar neutral. Den farligaste fördomen är den som presenteras i ett säkert och professionellt språk; eftersom det accepteras utan att ifrågasätta. Ditt jobb som socialarbetare är att synliggöra denna osynliga snedvridning och övervaka om resultatet strider mot dina professionella värderingar.

Var kommer AI-bias ifrån och hur ser det ut?

  • Träningsdatabias. AI lär sig av texter som speglar ojämlikheter i samhället. Stereotyper om vissa etniska grupper, fattiga, funktionshindrade, vissa stadsdelar eller kön kan läcka in i produktionen.
  • Språk och inramningsbias. AI kan framställa en grupp som passiv, "problematisk" eller ett "objekt i behov av hjälp"; annan grupp som ämnen. Samma beteende kan tolkas som "kulturellt" av en grupp och "problematiskt" av en annan grupp.
  • Brist på representation. AI kan felaktigt eller ytligt förstå grupper som är underrepresenterade i data (små populationer, sällsynta fall).
  • Smicker (sycophancy). AI:n tenderar att bekräfta din underförstådda uppfattning; En partisk fråga ger en partisk bekräftelse.

Dessa fördomar är särskilt farliga inom socialt arbete eftersom resultatet direkt berör verkliga människors liv – en bedömning, en rapport, en remiss.

Varning: "AI:n utvärderade det på det sättet" är ett varningstecken, inte en motivering. När du ser resultat som porträtterar en grupp eller individ negativt, är den första frågan "är den baserad på bevis eller baserad på stereotyper?" borde vara.

Steg för steg: revision mot bias

  1. Fråga neutralt. Ställ frågor som inte antyder eller leder; Inte "förklara varför den här familjen är försumlig", utan "vad kan dessa observationer betyda, vilka är de alternativa förklaringarna?" be.
  2. Skilj mellan bevis och stereotyp. För varje negativt påstående, fråga: är det baserat på de konkreta bevisen jag har framför mig, eller är det baserat på ett allmänt antagande om en grupp?
  3. Testa från motsatt vinkel. Tänk på samma situation för en annan grupp: "Om klienten hade en annan socioekonomisk/etnisk bakgrund, skulle AI skriva det på samma språk?"
  4. Sök kulturell känslighet. Fråga om det kulturella sammanhanget för ett beteende; men ta kulturell kunskap som en möjlighet och en varning, inte en absolut regel (undvik stereotyp).
  5. Rengör präglingstungan. Översätt det till ett språk som beskriver situationen, inte personen, och som också ser styrkorna.

tre minifodral

Fall 1 — Den omvända vinkeln visade förspänning. En expert lät AI sammanfatta två liknande fall; den enda skillnaden var familjernas socioekonomiska status. YZ skrev i tonen "hög risk för vanvård" för familjen med låg inkomst, och i tonen "förälder tvingad att bete sig" för familjen med hög inkomst. Experten insåg denna dubbelmoral och destillerade båda bedömningarna till ett evidensbaserat, jämställt språk.

Fall 2 – Kulturell misstolkning korrigerad. YZ inramade situationen för ett barn som bor med storfamilj som "gränsfrågor och en blandad hemmiljö." Experten visste att inom familjens kulturella sammanhang var den utökade familjen en kraftfull källa till stöd och skydd. AI hade förvandlat en kulturell kraft till ett problem. Granskningen har korrigerats för att erkänna detta stöd som en resurs.

Fall 3 – Ledande fråga skapade partiskhet. "Skriv ner varför den här pappan är opålitlig", frågade en praktikant till AI. AI producerade en text som porträtterar fadern negativt (smickrande) utan några bevis. Handledaren ändrade frågan: "Vilka är observationerna om fadern, vilka kan vara hans styrkor och svagheter?" Resultatet har blivit balanserat och evidensbaserat. Lektion: en partisk fråga ger ett partiskt svar.

Fyra kopierbara mallar

1) Begär en neutral, balanserad utvärdering:

När du sammanfattar följande observationer presenterar du både möjliga styrkor och möjliga problem på ett BALANSERT sätt och ENDAST baserat på bevis. Gör inga slutsatser baserade på stereotyper. Om en kommentar inte förlitar sig på observation, skriv "otillräckliga bevis". Observationer: [klistra in observationer]

2) Förspänningskontroll (test av motsatt vinkel):

Kolla in recensionstexten nedan. Finns det uttalanden som förmedlar en ogrundad stereotyp på grund av klientens socioekonomiska status, etnicitet, religion, kön, funktionshinder eller grannskap? För varje fråga, fråga: "Skulle detta vara skrivet på samma språk om klienten var från en annan grupp?" Flagga problemmeningar.Text: [klistra in text]

3) Kulturell kontext (icke-stereotyp):

Ge MÖJLIGHETER för vad följande beteende/situation kan betyda i olika kulturella sammanhang. Ge dessa som punkter att beakta, inte som absoluta regler; Betona att det finns individuella skillnader i varje samhälle. Generalisera inte om en enskild grupp. Situation: [skrivsituation]

4) Avtryck av tungrengöring:

I texten nedan hittar du adjektiv som dömer eller stigmatiserar personen (t.ex. "försumlig", "osamarbetsvillig", "problematisk"). För varje, ersätt samma faktum med ett alternativ som är beskrivande, respektfullt och erkänner styrkorna. Lägger till ny information.Text: [klistra in text]

Svag prompt / Stark prompt

Svag uppmaning:

Förklara varför den här familjen är otillräcklig när det gäller att uppfostra barn.

Denna fråga antar resultatet från början ("otillräcklig"). AI, med sin tendens till smicker, kommer att producera en evidensfri och partisk text som bekräftar detta antagande. Om frågan är partisk kommer svaret också att vara partiskt.

Kraftfull uppmaning:

Baserat på följande observationer, lista både denna familjs styrkor i barnuppfostran och områden av intresse på ett BALANSERT och endast bevis. Anta inte resultatet från början; Om bevisen är otillräckliga, ange det. Undvik stereotyper. Observationer: [klistra in observationer]

Skillnaden: en balanserad fråga som inte antar resultatet och ber om bevis förhindrar partiskhet i första hand.

Typer av partiskhet och motåtgärder

Typ av partiskhet

Hur ser det ut

motåtgärd

träningsdata

gruppstereotyp

Skillnad mellan bevis och mönster

inramning

Passivt/negativt språk

Balanserat, ämnescentrerat språk

dubbelmoral

Samma beteende, annan ton

omvänd vinkeltest

kulturell blindhet

Att förvandla kulturell makt till ett problem

Fråga om kulturella sammanhang

smicker

bekräfta innebörden

Ställ inte neutrala frågor

bristande representation

Ytligt/missförstånd

Lokal/expertbekräftelse

Vanliga misstag

  • Ställer fördomsfulla frågor. En fråga som förutsätter en slutsats ger ett partiskt svar; neutralt problem.
  • Lita på ett självsäkert språk. Professionell ton gör inte partiskhet korrekt; titta på bevisen.
  • Att betrakta kulturell kunskap som en definitiv regel. Ta det som en möjlighet och uppmärksamhet; Undvik stereotyper.
  • Lägger inte märke till dubbelmoralen. Testa hur samma beteende skrivs i olika grupper.
  • Misstag stämpeln som bevis. Det är en "vårdslös" bedömning; Beskriv fenomenet, döm inte personen.

Sammanfattningsvis

AI är inte neutral, den verkar neutral; Den återger ojämlikheter och stereotyper i utbildningsdata på ett flytande språk. I socialt arbete kan detta leda till orättvisa utvärderingar av verkliga människor. Erkänn bias (utbildningsdata, inramning, dubbelmoral, kulturell blindhet, smicker), kontrollera mot det (neutral fråga, evidens-mönsterseparation, vinkeltestning, kulturell känslighet, stigmatisering), och filtrera varje output genom professionens värderingar om rättvisa och heder. Det sista etiska filtret är alltid du.

Applikationsuppgift

Låt AI:n sammanfatta samma uppsättning fiktiva observationer med två olika gruppprofiler (t.ex. olika socioekonomisk status) och jämför med "omvänd vinkeltest" om toner/språk skiljer sig åt. Prova sedan en neutral fråga med en medvetet partisk fråga ("förklara varför den är otillräcklig") och undersök skillnaden i resultat. Till sist, applicera mallen "rengöring av vattenmärkesspråk" på en text.

checklista

  • [ ] Jag formulerade mina frågor neutralt, utan att anta resultatet.
  • [ ] Jag kontrollerade varje negativt påstående med hjälp av evidens-stereotypskillnaden.
  • [ ] Jag kontrollerade dubbelmoralen med det omvända vinkeltestet.
  • [ ] Jag använde kulturell kunskap som en försiktighetspunkt, inte en absolut regel.
  • [ ] Jag ersatte stigmatiserande språk med beskrivande, respektfullt språk.