Enhet 10 / 11

Incident Response och Business Continuity

Vinster:

  • Förmåga att klassificera AI-specifika incidenttyper och designa en responscykel
  • Förmåga att definiera roller, befogenheter och juridiska rapporteringsskyldigheter inför evenemanget
  • Förmåga att etablera permanenta förbättringar med kontinuitet i verksamheten och skuldfri postmortem

Oavsett hur väl du försvarar det, en dag kommer något att gå fel: en nyckel kommer att läcka, en injektion kommer att fungera, en leverantör kommer att krascha eller en utdata kommer att skada en kund. Det som gör en mogen institution mogen är inte frånvaron av händelser, utan att vara förberedd och snabb när en händelse inträffar. I den här enheten kommer vi att lära oss en AI-specifik incidentresponsplan, roller, steg och affärskontinuitet.

Varför är incidentresponsen annorlunda i AI?

I en klassisk säkerhetsincident räcker det ofta med "stäng av systemet, isolera". Det finns ytterligare dimensioner för AI-händelser: händelsen kanske inte finns i en kod utan i modellens beteende (t.ex. systematisk felaktig/förspänd utdata); beviset finns i prompten/svarsloggarna; och "ångra" är ibland inte möjligt eftersom den felaktiga utmatningen redan har blivit ett beslut. Därför bör AI-incidentplanen täcka både klassisk säkerhet och modellbeteende.

Observera: Vid tidpunkten för händelsen skrivs ingen plan, den genomförs. Vem som ska ringa vem, vem som har befogenhet att "stoppa systemet" och hur kommunikationen ska gå till måste beslutas innan evenemanget.

AI-händelsetyper

  • Dataläcka: PII eller konfidentiell data har läckt ut (via prompt, logg eller utdata).
  • Säkerhetsbrott: Läckt nyckel, lyckad injektion, obehörig åtkomst.
  • Skadlig/biased output: Modellen producerade systematiskt ett felaktigt, diskriminerande eller farligt svar.
  • Serviceavbrott: Leverantören kraschade eller nådde hastighetsgränsen; Systemet kan inte svara.
  • Missbruk: Systemet användes för ett skadligt syfte som det inte var designat för.

Steg för steg: Incident Response Cycle

  1. Upptäckt. Ett övervakningslarm, användarklagomål eller granskningsresultat avslöjar incidenten.
  2. Sortera och prioritera. Ge nivåer baserade på påverkan och spridning (t.ex. P1 kritisk – P3 låg).
  3. Innehålla. Stoppa spridningen: återkalla nyckeln, stäng av funktionen, dra systemet till skrivskyddat.
  4. Utrota och återhämta dig. Åtgärda grundorsaken, återgå till säkert tillstånd.
  5. Anmäl det. Informera juridiska/kontraktsmässiga anmälningsskyldigheter (som KVKK 72 timmar) och de som berörs i tid.
  6. Efterundersökning (obduktion). Utan att skylla på, dokumentera grundorsaken och permanent åtgärd.

Roller och ansvar

Det ska vara tydligt vem som gör vad i en incident: incidentchef (enda person som fattar beslutet), teknisk respons (stoppa/reparera systemet), kommunikation (kund/ledning/regulator), lag/efterlevnad (rapporteringsskyldighet). I små team kan en person ta flera roller, men rollerna måste vara skrivna.

Fyra kopieringsbara mallar

Uppmaning om händelseklassificering:

Klassificera följande händelse: {{ event_description }}Identifiera:- Typ: dataläcka / säkerhetsintrång / skadlig utmatning / avbrott / missbruk- Effekt: hur många personer/poster, vilken dataklass, pengar/efterlevnadskonsekvenser?- Spridning: stoppad eller pågående?- Prioritet: P1 / P2 / P3: vad ska först kontrolleras steget + motivering- Första kontrollsteget?

Checklista för första svar (inneslutning):

Under de första 30 minuterna när incidenten bekräftas:- [ ] Inaktivera den berörda funktionen/verktyget eller ställ in den på skrivskyddad- [ ] Avbryt misstänkta nycklar/sessioner- [ ] Bevara bevis (frysa relevanta loggar, registrera trace_id)- [ ] Meddela incidentbefälhavaren och nödvändiga roller- [ ] Distribuera ett flöde tillfälligt säkert läge / backup

Aviseringsutkast:

Skriv ett utkast till intern anmälan för följande incident: {{ incident_summary }}Måste innehålla: vad som hände (på icke-tekniskt språk), när det märktes, vilken data/vem som påverkades, vad som har gjorts hittills, nästa steg, från vilka ytterligare information kan erhållas. Inkludera inte spekulationer eller anklagelser.

Postmortem skelett:

Granskning efter händelse (ingen skuld):- Tidslinje: upptäckt -> kontroll -> återhämtning (minut)- Rotorsak: teknik + processstorlek- Vad som gick bra / vad som gick dåligt- Permanenta korrigeringar (vem, när)- Övervakning/kontroll för att fånga denna händelse förr än senare

Svag prompt / Stark prompt

dåligt tillvägagångssätt

Starkt förhållningssätt

Improviserad på evenemanget utan en plan

Förskriven plan, roller och befogenheter

Säg först "vem är skyldig"

Först inneslutning, sedan obduktion utan skuld

Fördröjning/hoppa över avisering

Meddelande inom den lagliga perioden (t.ex. 72 timmar)

Väntar på att samma händelse ska hända igen

Utvinner permanent kontroll från obduktion

Tre minifodral

Fall 1 — Fångad inom 72-timmarsregeln. En anställd på ett företag märkte att 1 200 kundposter lämnades exponerade i en logg på grund av felkonfiguration. Tack vare den skriftliga planen var räddningsledaren tydlig; Teamet stängde åtkomsten på 40 minuter och lagen gjorde KVKK-meddelandet inom 72 timmar. Tidig rapportering minskade avsevärt brottsrisk och skada på rykte.

Fall 2 – Skrivskyddat läge hanterade avbrottet. Huvudmodellleverantören gick ut i 3 timmar. Företagets affärskontinuitetsplan inkluderade byte till en backup-leverantör och "safe mode" (endast viktiga funktioner). Även om användarna förlorade full funktionalitet överlevde systemet; kritiska operationer upphörde inte.

Fall 3 — Postmortem förhindrade återfall. En lyckad indirekt injektion läckte en annan användares data till en assistent. Icke-klandrande postmortem visade att grundorsaken var bristen på <data>-isolering. Lade till permanent fix (isolering + utdataskanning + ett regressionstest); Samma klass av attack var inte framgångsrik igen.

Tips: Genomför obduktionen utan skuld. Syftet är inte att hitta människor, utan att stärka systemet på ett sätt som inte tillåter samma incident igen. En skuldkultur får människor att gömma saker, och detta är det farligaste.

Vanliga misstag

  • Att inte förbereda en skriftlig plan och rollfördelning innan evenemanget.
  • Att hamna i ett argument/skuld innan man tar kontroll.
  • Saknade juridiska anmälningsskyldigheter (KVKK/GDPR-deadlines).
  • Återställa systemet utan att bevara bevis (loggar).
  • Överväger inte en backup-leverantör/säkert läge för kontinuitet i verksamheten.
  • Att inte göra en obduktion och lämna utrymme för att samma händelse ska upprepas.

Sammanfattningsvis

  • Mognad är inte frånvaron av händelser; Det innebär att vara förberedd och snabb när det händer.
  • AI-händelser kan vara i modellbeteende snarare än kod; beviset finns i prompten/svarsloggarna och återföring är inte alltid möjlig.
  • Svarscykel: detektera, klassificera, innehålla, återhämta, rapportera, obduktion.
  • Roller och myndigheter (incidentchef, teknisk, kommunikation, juridisk) bör vara skriftliga före evenemanget.
  • Säkerhetskopieringsleverantör/säkert läge för affärskontinuitet; Skuldfri obduktion och permanent korrigering är avgörande för efterdyningarna av händelsen.

Applikationsuppgift

Skriv ett utkast till incidentresponsplan för ditt eget AI-system: lista de tre mest troliga incidenttyperna, identifiera en första 30-minuters checklista för inneslutning och roller för var och en. Gör sedan en bordsövning: Spela upp scenariot "nyckel läckt" steg för steg och peka ut och korrigera eventuella saknade/tvetydiga punkter i din plan.

checklista

  • [ ] Det finns en skriftlig incidenthanteringsplan och rollfördelning.
  • [ ] Det är tydligt vem som har befogenhet att "stoppa systemet".
  • [ ] De första 30 minuterna checklistan för inneslutning är klar.
  • [ ] Juridiska anmälningstider och ansvarig person definieras.
  • [ ] Säkerhetskopieringsleverantör/säkert läge planerad för kontinuitet i verksamheten.
  • [ ] Skuldfri obduktion och permanent korrigering utförs för varje incident.