Einheit 11 / 12

Menschliche Kontrolle, Transparenz, Voreingenommenheit und Ethik

Gewinne:

  • Unterscheidung von drei Modellen menschlicher Kontrolle (in the loop, on the loop, in command)
  • Risiken von Voreingenommenheit und Diskriminierung bei der KI-Ausgabe erkennen und mindern
  • Die Prinzipien der Transparenz und Erklärbarkeit in konkrete Anwendungen übersetzen

Ein KI-System kann technisch einwandfrei funktionieren, aber dennoch falsch liegen: Es kann eine Gruppe systematisch eliminieren, den Grund für seine Entscheidung nicht erklären oder Menschen dazu verleiten, sie ohne Fragen zu akzeptieren. In dieser Einheit übersetzen wir die „weiche“, aber entscheidendste Seite der Governance – menschliche Kontrolle, Voreingenommenheitsmanagement, Transparenz und Ethik – in konkrete Praktiken. Das Ziel sind nicht vage Slogans wie „Vertraue der KI nicht“; Dabei handelt es sich um Arbeitsmechanismen, die zeigen, wie ein Ergebnis geprüft, Voreingenommenheit reduziert und Transparenz hergestellt werden kann.

Drei Modelle menschlicher Kontrolle

Menschliche Kontrolle bedeutet, dass der Mensch die Kontrolle über die von der KI getroffenen Entscheidungen behält. Es gibt drei Grundmodelle und es ist notwendig, je nach Risiko das richtige Modell auszuwählen.

Modell

Bedeutung

Wo es passt

Mensch auf dem Laufenden

Eine Person stimmt jeder Entscheidung zu

Risikoreiche, wirkungsvolle Entscheidungen

Mensch auf dem Laufenden

KI funktioniert, der Mensch überwacht und greift bei Bedarf ein

Mittleres Risiko, Transaktionen mit hohem Volumen

Mann im Kommando

Der Mensch gestaltet das System, setzt seine Grenzen und kann es schließen

Gesamtebene der Governance

Bei Entscheidungen, die die Person erheblich betreffen (Beschäftigung, Kredit, Gesundheitsversorgung), wird das Human-in-the-Loop-Modell bevorzugt: KI gibt Ratschläge, aber ein kompetenter Mensch trifft die endgültige Entscheidung. „KI hat es gesagt“ ist nie eine Entschuldigung; Die Verantwortung liegt immer beim Menschen.

Achtung: Es reicht nicht aus, dass die menschliche Kontrolle „auf dem Papier“ steht. Wenn der Mensch dem Vorschlag der KI automatisch zustimmt (Absegnung), gibt es keine wirkliche Kontrolle. Damit Auditing sinnvoll ist, muss man in der Lage sein, die Gründe zu erkennen, sie zu hinterfragen und wirklich „Nein“ zu sagen.

Gefahr von Vorurteilen und Diskriminierung

Von Bias spricht man, wenn KI bestimmte Gruppen systematisch benachteiligt oder begünstigt. Ihre Quelle sind oft Trainingsdaten: Wenn es in historischen Daten zu Diskriminierungen kommt, lernt und pflegt die KI diese – und skaliert sie sogar.

Praktische Schritte zur Reduzierung von Voreingenommenheit:

  1. Überprüfen Sie sensible Variablen: Überprüfen Sie die Auswirkung von Feldern wie Geschlecht, Alter und ethnischer Zugehörigkeit auf die Entscheidung.
  2. Testergebnisse nach Gruppen: Erzeugt das System unterschiedliche Ablehnungs-/Akzeptanzraten in verschiedenen Gruppen?
  3. Vorsicht vor Proxy-Variablen: Felder wie „Nachbarschaft“ oder „Schule“ können implizit eine ethnische/Klassenunterscheidung vermitteln.
  4. Richten Sie eine regelmäßige Überwachung ein: Bias wird kontinuierlich und nicht nur einmal getestet; Es kann wieder auftreten, wenn sich die Daten ändern.

drei Mini-Koffer

Fall 1 – Stempel. Bei einer Bank genehmigen Kreditsachbearbeiter den KI-Score, ohne ihn zu überprüfen; Sie sagen: „Das System hat es bereits berechnet“. Eine Prüfung zeigt, dass in 498 von 500 Einsendungen der Mensch genau die gleiche Entscheidung getroffen hat wie die KI – eine wirkliche Überprüfung gibt es also nicht. Lösung: Von den Leuten verlangen, dass sie die Begründung sehen, die Entscheidung bis zu einem gewissen Grad hinterfragen und einen Hinweis mit der Aufschrift „Warum zustimmen/nicht zustimmen“ verlangen.

Fall 2 – Implizite Voreingenommenheit. Eine Rekrutierungs-KI bewertet weibliche Kandidaten schlechter, obwohl sie das Geschlecht überhaupt nicht berücksichtigt. Wovon? Da die bisherigen Daten hauptsächlich Männer in einer bestimmten Position umfassten, lernte das Modell indirekte Diskriminierung durch Proxy-Variablen wie „ununterbrochene Karriere“. Gruppenbasierte Tests zeigen dies; Das Team extrahiert Ersatzvariablen und überwacht das Ergebnis.

Fall 3 – Vertrauen mit Transparenz. In ihrer KI-gestützten Schadensbeurteilung informiert eine Versicherungsgesellschaft jeden Kunden darüber, dass „die Entscheidung KI-gestützte ist, sie Berufung einlegen und eine menschliche Überprüfung beantragen können.“ Die Einspruchsquote ist geringer als erwartet, da die Kunden den Prozess verstehen und ihm vertrauen. Transparenz erhöht das Vertrauen und reduziert gleichzeitig das Risiko.

Transparenz und Erklärbarkeit

Bei Transparenz geht es darum, den relevanten Personen klar zu machen, dass eine KI im Einsatz ist und wie sie funktioniert. Erklärbarkeit bedeutet, den Grund einer Entscheidung verständlich erklären zu können. Konkrete Anwendungen:

  • Benachrichtigung „Sie sprechen mit einer KI“ über die Interaktion der KI mit der Person.
  • „Diese Entscheidung basierte auf den folgenden Faktoren“-Erklärung in automatischen Entscheidungen.
  • Stellen Sie klar dar, wie Sie Einspruch einlegen können, und fordern Sie eine menschliche Überprüfung an.
  • Für interne Teams: Dokumentation und Aufzeichnung dessen, was das Modell tut.
Hinweis: Fragen Sie eine KI-Entscheidung: „Was waren die drei wichtigsten Faktoren, die diese Entscheidung beeinflusst haben?“ Testen Sie es mit der Frage. Wenn das System dies nicht nachvollziehbar machen kann und die Entscheidung erhebliche Auswirkungen auf die Person hat, ist das System noch nicht bereit für einen verantwortungsvollen Einsatz.

Automatisierungsbias: die eigene Falle

Selbst wenn Transparenz und menschliche Kontrolle gewährleistet sind, besteht auf menschlicher Seite ein heimtückisches Risiko: Automatisierungsverzerrung. Dies ist die Tendenz der Menschen, der Leistung einer Maschine mehr zu vertrauen als ihrem eigenen Urteilsvermögen. Da der KI-Vorschlag auf dem Bildschirm „objektiv und kalkuliert“ erscheint, ist man versucht, ihn ohne zu hinterfragen anzunehmen – das ist der psychologische Ursprung des Stempels.

Es gibt konkrete Möglichkeiten, dies zu reduzieren. Ermutigen Sie zunächst zur Gegenmeinung: Fragen Sie die Person, die die Entscheidung genehmigt: „Warum könnte ich mit der KI nicht einverstanden sein?“ Bitten Sie ihn, über die Frage nachzudenken. Zeigen Sie dann den Konfidenzwert an: Geben Sie an, wie sicher die KI ist. Markieren Sie Ausgaben mit geringer Konfidenz separat. Richten Sie dann eine Konfliktwarnung ein: Verstößt die KI-Empfehlung gegen die Regel der Institution oder die dem Menschen zur Verfügung stehenden Daten, weist das System darauf hin. Wenden Sie schließlich die beiden menschlichen Prinzipien auf kritische Entscheidungen an; Ein einzelner Genehmiger ist anfälliger für Automatisierungsverzerrungen.

Achtung: Zu sagen „es gibt menschliche Zustimmung“, bedeutet nicht, frei von Automatisierungsvoreingenommenheit zu sein. Der Mensch muss sowohl die Autorität als auch die Zeit und die richtigen Informationen haben, um die KI zu befragen. Ein System, das den Genehmiger dazu zwingt, 200 Entscheidungen in 3 Sekunden zu treffen, bietet eigentlich keine echte menschliche Kontrolle.

Kopierbare Vorlagen

VORLAGE 1 – Auswahl des menschlichen Kontrollmodells: „Welches menschliche Kontrollmodell eignet sich für die folgende KI-Nutzung [beschreiben Sie die Verwendung]: in der Schleife, auf der Schleife oder als Befehlshaber? Empfehlen Sie es mit Begründung unter Berücksichtigung des Risikos und der Auswirkungen auf den Einzelnen. Geben Sie an, welche Kontrolle ich hinzufügen sollte, um das Stempelrisiko zu vermeiden.“

VORLAGE 2 – Bias-Testplan: „Erstellen Sie einen [Verwendung beschreiben] Bias-Testplan für die folgende Entscheidungsunterstützungs-KI: Welche Gruppen sollte ich vergleichen, welche Metrik sollte ich messen (Ablehnungs-/Akzeptanzrate usw.), nach welchen Ersatzvariablen sollte ich suchen, wie oft sollte ich den Test wiederholen? Schreiben Sie ihn Schritt für Schritt auf.“

VORLAGE 3 – Entscheidungsbeschreibungstext: „Verfassen Sie einen einfachen Beschreibungstext für eine personalisierte automatisierte Entscheidung: ob die Entscheidung KI-gestützt war, Schlüsselfaktoren, die die Entscheidung beeinflussten, eine Möglichkeit, Berufung einzulegen und eine menschliche Überprüfung zu beantragen. Nicht anklagender, respektvoller Ton, 120 Wörter oder weniger.“

VORLAGE 4 – Checkliste für ethische Überprüfungen: „Bereiten Sie eine Checkliste für ethische Überprüfungen vor, bevor Sie eine KI-Nutzung veröffentlichen: Fairness/Diskriminierung, Transparenz, menschliche Kontrolle, Privatsphäre, Sicherheit, Rechenschaftspflicht. Fügen Sie unter jeder Überschrift 1-2 klare Fragen hinzu, die beantwortet werden müssen.“

Schwache Eingabeaufforderung / Starke Eingabeaufforderung

SCHWACH: „Ist diese Rekrutierungs-KI fair?“ -> Das Modell gibt eine allgemeine Antwort wie „Es sollte fair sein“; bietet keine überprüfbare Methode und Bias-Messung. STARK: „Erstellen Sie einen Bias-Testplan für diese KI zur Rekrutierungsunterstützung: eine Methode zum Vergleich der Akzeptanzraten über Geschlecht und Altersgruppen hinweg, zu berücksichtigende Proxy-Variablen, den akzeptablen Differenzschwellenwert und die Überwachungshäufigkeit. Fügen Sie außerdem Kontrolle hinzu, um sicherzustellen, dass der Mensch die endgültige Entscheidung trifft.“ -> Das Modell erzeugt einen messbaren, wiederholbaren Fairnessmechanismus.

Häufige Fehler

  • Die menschliche Kontrolle „auf dem Papier“ belassen und die KI-Empfehlung automatisch genehmigen (Stempel).
  • Lassen Sie Entscheidungen, die die Person erheblich betreffen, unbeaufsichtigt und nicht auf dem Laufenden.
  • In Anbetracht der Tatsache, dass die Verzerrung behoben wurde, nur weil „ich die sensible Variable gelöscht habe“; Überspringen von Proxy-Variablen.
  • Bias einmal testen und nicht ständig überwachen.
  • Auf Transparenz verzichten, weil „es ein technisches Detail ist, das der Benutzer nicht versteht“.
  • Verwendung eines Systems, das bei kritischen Entscheidungen den Entscheidungsgrund nicht erklären kann.
  • Die ethische Bewertung erst nach der Veröffentlichung aufschieben und sagen: „Wir werden später sehen.“

Zusammenfassend

  • Die menschliche Kontrolle wird in drei Modellen implementiert; Bei Entscheidungen, die Menschen betreffen, werden Menschen im Kreislauf bevorzugt.
  • Kontrolle muss sinnvoll sein; Der Stempel (automatische Genehmigung) ist nicht das eigentliche Audit.
  • Verzerrungen ergeben sich oft aus den Trainingsdaten; Sensible Variablen und Ersatzvariablen sollten getestet und ständig überwacht werden.
  • Transparenz und Erklärbarkeit erfordern, dem Nutzer klar darzustellen, dass die KI im Spiel ist und den Grund für die Entscheidung.
  • Vor der Veröffentlichung erfolgt eine ethische Überprüfung; Die Verantwortung liegt immer beim Menschen, „KI hat es gesagt“ ist keine Entschuldigung.

Anwendungsaufgabe

Wählen Sie einen KI-Entscheidungsprozess, der sich auf die Menschen in Ihrem Unternehmen auswirkt (z. B. Bewerbungsbewertung). Bestimmen Sie das geeignete menschliche Kontrollmodell für diesen Prozess mit Begründung und entwerfen Sie eine konkrete Kontrolle, um ein Abnicken zu verhindern (z. B. Anforderung, eine Begründung zu sehen, Stichprobenprüfung). Schreiben Sie dann einen Bias-Testplan: Geben Sie an, welche Gruppen Sie vergleichen, mit welcher Metrik, wie oft und auf welche Proxy-Variablen Sie achten möchten. Entwerfen Sie abschließend einen Entscheidungserklärungstext, der der Person während dieses Prozesses angezeigt wird, und enthalten Sie einen Einspruchs-/menschlichen Überprüfungspfad.

Checkliste

  • [ ] Ich habe das für den Prozess geeignete menschliche Kontrollmodell ausgewählt.
  • [ ] Ich habe eine konkrete Kontrolle entworfen, die den Stempel verhindern soll.
  • [ ] Ich habe einen Bias-Testplan erstellt (Gruppen, Metrik, Häufigkeit).
  • [ ] Ich habe das Risiko von Ersatzvariablen bewertet.
  • [ ] Ich habe einen Entscheidungserklärungstext für die Person geschrieben.
  • [ ] Ich habe den Weg zur Berufung und zur menschlichen Überprüfung klar dargelegt.
  • [ ] Ich habe die Ethikprüfung vor der Veröffentlichung durchgeführt.