Jedinica 3 / 11

Pitanja za intervju i strukturirana procjena

Dobici:

  • Sposobnost generiranja pitanja vezanih za poziciju, kompetencija i bihevioralnih intervjua
  • Sposobnost kreiranja poštenog i uporedivog vodiča za evaluaciju (rubrika)
  • Prepoznajte ograničenja AI u procjeni intervjua i zadržite ljudsko prosuđivanje

Intervju je najodlučnija, ali najsubjektivnija faza zapošljavanja. Dva različita anketara mogu vrlo različito ocijeniti istog kandidata; jer svi postavljaju različita pitanja, pridaju važnost različitim stvarima i često svoje odluke zasnivaju na "osjećajima". Istraživanja pokazuju da su nestrukturirani intervjui loši u predviđanju uspjeha zapošljavanja; međutim, pokazuje da su strukturirani intervjui jedan od najjačih prediktora. Veštačka inteligencija (AI) je najpraktičniji alat za smanjenje ove subjektivnosti: pitanja vezana za poziciju daju zajednički vodič za procenu i konzistentnu strukturu. U ovoj jedinici naučit ćemo kako izgraditi pošten, uporediv i odbranjiv proces intervjua s AI.

Uslovi: Strukturirani intervju je intervju u kojem se svim kandidatima postavljaju ista pitanja zasnovana na kompetencijama, a odgovori se boduju na zajedničkoj skali. Rubrika (vodič za evaluaciju) je tabela koja definira koliko bodova će svako pitanje dobiti za koji odgovor. Pitanje ponašanja postavlja pitanje šta je kandidat zapravo radio u prošlosti („Pričajte mi o trenutku kada ste riješili konflikt”) — jer je prošlo ponašanje najbolji pokazatelj budućeg ponašanja. Situaciono pitanje postavlja pitanje šta biste uradili u hipotetičkom scenariju. STAR je okvir koji se koristi za strukturiranje odgovora kandidata: situacija, zadatak, akcija, rezultat.

Dizajn intervjua korak po korak

  1. Identifikujte kompetencije. Zapišite 4-6 kritičnih kompetencija pozicije (npr. rješavanje problema, timski rad, tehnička dubina).
  2. Generirajte pitanja za svaku kompetenciju. Postavljajte pitanja ponašanja i situacije od AI.
  3. Napravite rubriku. Za svako pitanje definirajte kako izgleda "slab/dovoljan/jak" odgovor.
  4. Pripremite dodatna pitanja. Ako kandidat odgovara površno, idite dublje.
  5. Provedite reviziju diskriminacije. Neka se lista pitanja pregleda pravno i etički.
  6. Prikupite rezultate i interpretirajte ih s čovjekom. AI prilagođava rezultat; Tim odlučuje.

Vaša uloga: stručnjak za ljudske resurse koji dizajnira strukturirani intervju. Pozicija: viši programer softvera Kritične kompetencije: rješavanje problema, kvalitet koda, timska komunikacija, agilnost učenja. Za svaku kompetenciju: - 2 pitanja o ponašanju (na osnovu prethodnog iskustva) - 1 situacijsko pitanje (hipotetički scenario) - 2 dodatna pitanja za svako pitanje Pitanja ne smiju biti diskovana. Ne pitajte o ličnom životu/vjeri/politici/dječijem planu. Naslovi rezultate prema kompetencijama.

Savjet: Eksplicitno uputite AI da “pita o ličnom životu, bračnom statusu, planovima za djecu, vjeri, politici, zdravlju.” Ovakva pitanja su diskriminatorna i rizična u smislu Zakona o radu i jednakog tretmana. AI može prekoračiti ovu granicu čak i uz dobre namjere.

Rubrika: Alat za smanjenje subjektivnosti

Bez rubrike, rezultati variraju u zavisnosti od raspoloženja anketara. Rubrika dovodi sve na istu stranicu tako što unaprijed definira "kako izgleda jak odgovor".

Napišite rubriku na skali od 1-5 za sljedeće pitanje za intervju. Pitanje: "Šta ste uradili kada se ispostavilo da je tehnička odluka pogrešna na projektu?" Definirajte sljedeće nivoe u rubrici: 1 (slab): tipičan odgovor i nedostajući signali3 (dovoljan): tipičan odgovor i pozitivni signali5 (jak): tipičan odgovor i jaki signali Navedite primjere ponašanja koje se može uočiti za svaki nivo (kao što je preuzimanje odgovornosti, analiza korijenskog uzroka, učenje).

Kada primijenite rubrike na sva pitanja, ocjene koje su dali različiti anketari se približavaju; ovo se zove konzistentnost među ocjenjivačima. Prikupljanje rezultata u zajedničkom šablonu donosi odluku na osnovu dokaza, a ne na jednoj rečenici "svidjelo mi se".

Slaba prompt / jaka prompt

Slab upit: Dajte pitanja za intervju za programera softvera.

Zaključak: opća pitanja koja možete pronaći na internetu; Nema rubrike, nema usklađivanja kompetencija, nema garancije pravičnosti.

Snažan upit: [Pozicija + kritičke kompetencije + bihevioralni/situacijski zahtjev za pitanje + diskriminatorna zabrana pitanja + 1-5 rubrika za svako pitanje + dodatna pitanja]

Rezultat: komplet za intervju koji se može bodovati i koji se može braniti, a koji je primjenjiv na sve kandidate.

Evaluacija odgovora sa AI: Ograničenja

AI vam može pomoći da organizujete vaše beleške intervjua po rubrikama; Ali ovdje je potrebno snažno upozorenje: AI ne može vidjeti ton glasa kandidata, iskrenost, stvarnu kompetenciju; Čita samo belešku koju napišete. Dakle, uloga AI je da strukturira vaša zapažanja - a ne da donosi odluke.

Organizirajte moje bilješke s intervjua ispod pod naslovima kompetencija prema rubrici koju sam dao. Za svaku kompetenciju: - sumirajte dokaze u bilješkama - pokažite kojem nivou odgovara u rubrici - označite gdje nedostaju/nejasni dokazi Završite rezultat za mene; samo uredite dokaze.<notes>[vaše beleške intervjua]</notes>

Odgovarajuća uloga AI

Neprikladna uloga AI

Kreiranje pitanja i rubrika

Bodovanje i eliminacija kandidata sam

Organiziranje bilješki anketara prema rubrici

Odluka putem video/audio "analize emocija"

Označavanje nedosljednosti u bilješkama

Presude poput "Ovaj kandidat laže"

Upozorenje o pitanju/napomeni koja sadrži pristrasnost

Finaliziranje odluke o zapošljavanju

Oprez: Alati zasnovani na AI „procjeni kandidata kroz izraz lica/analizu tona glasa” su naučno upitni i predstavljaju ozbiljan rizik od diskriminacije. Nemojte davati ovlaštenje za odlučivanje takvim alatima; Mnoge zemlje i okviri (npr. Zakon o veštačkoj inteligenciji EU) smatraju da su takvi sistemi koji se koriste u regrutaciji visoko rizični.

Tri mini futrole

Slučaj 1 — Dobitak konzistentnosti. Maloprodajni lanac je ocjenjivao 8 kandidata za menadžere trgovine sa 3 različita anketara i rezultati su bili nedosljedni. Stvorena je zajednička rubrika sa AI. U drugom krugu, razlika u rezultatima anketara (istog kandidata) smanjena je sa prosječnih 1,8 bodova na 0,6 bodova; odluke su postale odbranjivije.

Slučaj 2 — Uhvatiti diskriminatorno pitanje. Na listi pitanja koju je pripremio, jedan menadžer je upitao: "Imate malo dijete, možete li ostati prekovremeno?" On je postavio pitanje. Kada je AI rečeno da "provjeri pitanja za diskriminaciju", ovo pitanje je označeno i postavljeno: "Ova uloga zahtijeva povremeni prekovremeni rad; koja je vaša podobnost za ovo?" Zamijenjena je neutralnom verzijom koju svako može pitati. Na taj način je očuvana pravda i spriječen rizik od moguće žalbe.

Slučaj 3 — Konfigurisanje bilješki. Jedan panel za intervjue imao je razbacane bilješke. AI je organizirao bilješke po rubričkim naslovima i pokazao kojim kompetencijama nedostaju dokazi. Panel je održao drugu kratku diskusiju o nedostajućoj kompetenciji i doneo čvršću odluku. AI nije odlučila; uredio informacije koje su donijele odluku.

Uobičajene greške

  • Intervju bez rubrika. Postavljanje pitanja, a ne pripremanje vodiča za bodovanje, čuva subjektivnost.
  • Postavljanje različitih pitanja kandidatima. Uporedivost je moguća samo kroz uobičajena pitanja.
  • Neka AI odluči. AI nema dovoljno podataka da donese konačan sud o kandidatu.
  • Ne moderiranje diskriminatornih pitanja. Čak i dobronamjerni anketari mogu napisati opravdano rizična pitanja; AI kontrola je sigurnosna mreža.
  • Oslanjajući se na alate za analizu emocija/lice. Naučna osnova je slaba, a rizik od diskriminacije je visok.
  • Pisanje bilješke dugo nakon sastanka. Vodite bilješke dok su zapažanja svježa; AI radi samo onoliko dobro koliko vi to pišete.

Ukratko

Fer intervju; To znači uobičajena pitanja, jasnu rubriku i očuvanje ljudskog prosuđivanja. AI je izvrstan asistent u stvaranju prva dva od ovog tria: pitanja zasnovana na kompetencijama specifičnim za poziciju, vodiči za odbranjivo bodovanje i praćenje diskriminacije. Ali stvarna evaluacija kandidata i odluka o zapošljavanju — pripada ljudskom posmatranju i odgovornosti.

Zadatak aplikacije

Odaberite poziciju. (1) Identifikujte 4 kritične kompetencije. (2) Generirajte bihejvioralna/situaciona pitanja i dodatna pitanja uz pomoć gornjeg upita. (3) Napravite 1-5 rubrika za 3 najkritičnija pitanja. (4) Proslijedite listu pitanja kroz prompt "provjera diskriminacije". (5) Neka AI uredi uzorak bilješke o intervjuu prema rubrici i sami dajte konačan rezultat.

kontrolna lista

  • [ ] Jesu li pitanja mapirana kritičnim kompetencijama?
  • [ ] Da li je standardizovan tako da se svim kandidatima postavljaju ista pitanja?
  • [ ] Postoji li 1-5 rubrika za svako kritično pitanje?
  • [ ] Jesu li pitanja provjerena na diskriminaciju?
  • [ ] Da li je konačna procjena i odluka prepuštena čovjeku?
  • [ ] Da li su izbjegnuti rizični alati kao što je “analiza emocija/lice”?