단위 8 / 12

편견, 표현 및 문화적 민감성

이득:

  • 인공 지능 모델의 문화적, 성별, 진단적 편견이 심리학의 맥락에서 어떻게 해를 끼치는지 사례를 통해 인식합니다.
  • 다양한 그룹, 언어 및 문화에 대한 출력을 테스트하는 편향 검사를 구현하는 기능
  • 서구 중심의 규범과 낙인찍는 언어를 바로잡는 신속하고 검증적인 기술 개발 능력

인공지능(AI)은 중립적이지 않습니다. AI 모델은 인터넷의 방대한 텍스트 더미에서 학습하며, 모델의 "세계관"은 누구의 목소리가 더 많이 포함되어 있고 누구의 목소리가 덜 포함되어 있는지에 따라 왜곡됩니다. 이러한 왜곡을 편향이라고 합니다. 심리학의 편견은 일반적인 기술적 결함이 아닙니다. 이는 개인의 평가, 진단 및 치료에 직접적인 영향을 미칠 수 있습니다. 어떤 문화에서는 증상이 "정상"으로 읽혀지고 다른 문화에서는 "병리적"으로 읽힐 수 있습니다. 행동은 한 성별에서는 "주장"으로, 다른 성별에서는 "공격성"으로 구성될 수 있습니다. AI는 이러한 역사적 편견을 학습하고 복제할 수 있습니다. 이 단원에서는 심리학의 맥락에서 AI의 편견을 인식하고 다양한 그룹, 언어 및 문화에 대한 결과를 감사하는 방법을 배웁니다.

편견은 어디에서 왔으며 어떻게 해를 끼치나요?

AI 편향에는 세 가지 주요 원인이 있습니다.

  1. 훈련 데이터 불균형. 모델은 주로 특정 언어, 문화, 시대의 텍스트로 훈련됩니다. 심리학 문헌의 대부분은 교육을 받고 산업화된 서구 사회에서 나왔습니다. 그러므로 AI의 "정상적인 인간" 가정은 이 좁은 표본을 반영합니다.
  2. 역사적 편견을 포함합니다. 과거 특정 집단을 병리화하고 낙인찍었던 텍스트도 데이터에 포함된다. 모델은 이러한 패턴을 학습합니다.
  3. 표현력이 부족합니다. 모델에는 과소대표 집단(다양한 인종, 언어, 성적 취향, 장애)에 대한 정보가 부족하거나 고정관념이 있습니다.

피해는 명백합니다. AI는 증상을 한 그룹에서는 더 심각하고 다른 그룹에서는 더 경미하다고 평가할 수 있습니다. 문화적 표현(애도 의식, 종교적 경험)을 증상으로 잘못 간주할 수 있습니다. 그것은 낙인을 찍는 진부한 언어를 생산할 수 있습니다.

주의: AI의 결과가 "객관적인 과학"으로 보이더라도 학습한 편견이 있을 수 있습니다. 특히 문화, 성별, 성적 지향, 사회 경제적 집단이 다른 경우에는 각 결과를 "모든 집단에 공평한가?"로 간주합니다. 질문으로 필터링합니다.

심리학과 관련된 편견의 유형

편견의 유형

심리학에서 보기

위험

문화적 편견

서구적 규범을 보편적인 것으로 간주

문화적 표현을 병리학으로 착각하지 마십시오

성별 편견

같은 행동이라도 성별에 따라 다르게 해석

진단적 차이

진단 편향

특정 집단을 특정 진단을 받기 쉬운 집단으로 묘사

과/과소 진단

언어 편향

지배적인 언어에서는 더 "숙련"되지만 다른 언어에서는 피상적입니다.

불평등한 평가

스탬핑

진단을 통해 개인을 식별하는 언어

굴욕적인 프레이밍

단계별: 바이어스 제어

  1. 출력을 "누구를 위해 작성되었습니까?"로 변경할 수 있습니다. 질문. 기본 주제는 누구입니까? 그는 일반적으로 교육받은 서양인의 "보통" 사람입니다.
  2. 다양한 그룹으로 테스트해 보세요. 다양한 문화, 성별, 연령의 맥락에서 동일한 프롬프트를 반복합니다. 댓글이 바뀌나요?
  3. 낙인이 있는 혀를 스캔합니다. 진단을 받은 사람을 식별하는 올바른 표현("정신분열증" 대신 "정신분열증을 겪고 있는 사람").
  4. 문화적 맥락을 추가하세요. AI에게 내담자의 문화적/언어적 맥락을 알려주고 “이러한 맥락에서 정상적일 수 있는 표현을 병리로 간주하지 말라”고 말했다.
  5. 전문가와 커뮤니티의 눈. 문화적 문제에 대해 확신이 없다면 해당 문화를 알고 있는 동료에게 문의하세요.
  6. 사람들이 결정하게 하세요. 편견 검사도 AI에 맡겨지지 않습니다. 정의의 최종 판단은 당신의 것입니다.
팁: 출력이 편향되었는지 테스트하는 실용적인 방법은 프롬프트에서 단일 속성(성별, 문화, 연령)을 변경하고 동일한 질문을 다시 묻는 것입니다. 이번 변경으로 해석이 '부당하게' 바뀌면 편견이 있는 것입니다.

세 개의 미니 케이스

사례 1 - 문화적 표현을 병리화함. 전문가는 애도 과정에서 다른 문화권의 고객이 “고인과 대화하고 있다”고 AI에 알려준다. AI는 이를 “정신병적 증상일 수 있다”고 규정합니다. 그러나 이는 해당 내담자의 문화에서 일반적이고 정상적인 슬픔의 표현입니다. 전문가는 문화적 맥락을 알고 있기 때문에 AI의 출력을 거부합니다. 맥락을 모르는 사람이 심각한 오판을 할 수도 있다.

사례 2 — 성별 편견 테스트. 수사관은 동일한 사건 요약을 AI에 두 번 제공합니다. 그것은 단지 그 사람의 성별을 바꾸는 것뿐입니다. '여성' 버전에서는 AI가 '정서적 불안정'을 강조하는 반면, '남성' 버전에서는 동일한 행동을 '스트레스 반응'으로 규정합니다. 이는 모델의 성별 편향을 명확하게 보여줍니다. 연구자는 이러한 차이점을 문서화하고 이러한 인식을 바탕으로 결과를 사용합니다.

사례 3 — 낙인을 찍는 언어 교정. 한 보고서 초안에서는 AI가 "병든 경계선"이라고 말합니다. 전문가는 이것을 자신의 진단으로 사람을 식별하고 이를 "정의된 경계선 성격 패턴을 가진 개인"과 같이 그 사람에 초점을 맞춘 언어로 번역하는 낙인을 찍는 언어로 봅니다. 언어의 작은 변화가 고객의 존엄성을 보호하는 데 큰 차이를 만듭니다.

복사 가능한 프롬프트 및 템플릿

편견이 있는지 다음 텍스트를 확인하세요. 문화, 성별, 성적 취향, 연령 또는 사회경제적 편견을 나타내는 진술을 표시하세요. 또한 서구의 규범이 보편적이라고 생각하는 가정도 보여주세요. 각각에 대해 더 공정한 대안을 제안하세요.텍스트: [text]

다음 상황을 평가하는 데 도움을 주세요. 그러나 내담자의 문화적 맥락은 [문화/언어]입니다. 이러한 맥락에서 정상일 수 있는 표현을 병리학으로 제시합니다. 문화적 사항에 대해 확신이 없다면 "문화적으로 다를 수 있으므로 전문가에게 문의하세요."라고 말하세요. 상태: [익명 상태]

진단을 통해 개인을 식별하는 이 텍스트의 낙인을 찍는 표현(예: "정신분열증", "경계선")을 개인의 중심에 두고 그들의 존엄성을 보존하는 언어로 번역하십시오. 내용을 바꾸지 말고 언어를 인간답게 만드세요. 텍스트: [텍스트]

다음 사례 요약을 두 번 평가하겠습니다. 한 번은 주제 [특성 A], 다른 하나는 [특성 B]입니다. 두 평가 사이에 불공평한 차이가 있는 걸까요? 그렇다면 편견 때문일까요? Compare.Abstract: [익명 초록]

약한 프롬프트 / 강한 프롬프트

약한 프롬프트: "이 클라이언트의 동작이 정상입니까, 비정상입니까?"

이 프롬프트는 "정상"이 누구를 위한 것인지 묻지 않습니다. AI는 서구 중심의 비문화적인 '정상'을 가정하고 문화적 표현을 병리화할 수 있습니다.

강력한 프롬프트: "이 고객은 [문화/언어적 맥락]에 속해 있습니다. 이 행동이 해당 문화적 맥락에서 정상적인 표현인지 아니면 주의가 필요한 신호인지 설명하고 두 가지를 별도로 논의합니다. 확정적인 판단을 내리지 말고 문화적 맥락을 아는 전문가와 상담하도록 상기시켜주세요."

이 프롬프트는 맥락을 중심에 두고 문화적 오해를 방지하며 결정은 전문가에게 맡깁니다.

일반적인 실수

  • AI 출력을 "객관적"으로 착각합니다. 모델에 편향이 있다는 사실을 망각하고 결과를 과학적 사실로 받아들입니다.
  • 서양의 규범을 보편적인 것으로 간주합니다. 단일 문화에 따라 "정상"을 정의하고 다양한 표현을 병리화합니다.
  • 낙인을 찍는 언어를 알아차리지 못함. 진단을 받은 사람을 식별하는 언어를 "기술적 언어"로 착각합니다.
  • 편견을 테스트하지 않습니다. 다른 그룹에 동일한 프롬프트를 시도하지 않고 일관성을 확인합니다.
  • 모르는 문화에서 혼자 결정을 내리는 것. 그 문화를 아는 동료와 상의 없이 판단하는 것.

요약하면

AI는 편향된 세계의 텍스트를 학습하기 때문에 편향되어 있습니다. 심리학에서 이러한 편견은 문화, 성별, 진단, 언어 및 낙인의 형태로 실질적인 피해로 해석됩니다. 각 결과를 "이것이 모든 그룹에 공평한가?"라는 질문과 비교하십시오. 그것을 긴장시키십시오; 다른 그룹으로 동일한 프롬프트를 테스트합니다. 프롬프트에 문화적 맥락을 추가하세요. 낙인을 찍는 언어를 사람 중심의 언어로 바꾸십시오. 익숙하지 않은 문화에 대해 전문가/커뮤니티의 시선을 찾으세요. 편견의 통제를 포함한 정의의 판단은 인간에게서 나온다.

응용과제

사례 요약(익명)을 준비합니다. AI에게 두 번 줘; 한 가지 특성(성별, 문화 또는 연령)만 변경합니다. 두 개의 인쇄물을 나란히 놓고 불공평한 차이가 있는지 조사합니다. 또한 AI가 보고서 단락의 낙인을 찍는 문구를 사람 중심의 언어로 번역하고 차이점을 기록하게 하세요.

체크리스트

  • [ ] 출력을 "이것은 모든 그룹에 공평합니까?"로 변경합니다. 나는 질문을했다.
  • [ ] 다른 그룹/문화를 대상으로 동일한 프롬프트를 테스트했습니다.
  • [ ] 프롬프트에 문화적 맥락을 추가했습니다. 나는 문화적 표현을 병리화하지 않았습니다.
  • [ ] 낙인찍는 언어를 사람중심의 언어로 바꾸었습니다.
  • [ ] 나는 내가 잘 모르는 문화적 문제에 대해 전문가/동료에게 조언을 구했습니다.
  • [ ] 공정성의 최종 결정은 AI가 아닌 내 판단에 맡겼다.