Jedinica 3 / 11

Pitanja za intervju i strukturirana procjena

Dobici:

  • Sposobnost generiranja pitanja za intervju specifična za poziciju, kompetencija i ponašanja
  • Sposobnost stvaranja poštenog i usporedivog vodiča za evaluaciju (rubrika)
  • Prepoznajte ograničenja umjetne inteligencije u procjeni intervjua i zadržite ljudsku prosudbu

Intervju je najodlučnija, ali i najsubjektivnija faza zapošljavanja. Dva različita ispitivača mogu vrlo različito ocijeniti istog kandidata; jer svatko postavlja različita pitanja, pridaje važnost različitim stvarima i često svoje odluke temelji na "osjećajima". Istraživanja pokazuju da su nestrukturirani intervjui loši u predviđanju uspjeha pri zapošljavanju; međutim, pokazuje da su strukturirani intervjui jedan od najjačih prediktora. Umjetna inteligencija (AI) je najpraktičniji alat za smanjenje ove subjektivnosti: pitanja specifična za položaj daju zajednički vodič za procjenu i dosljednu strukturu. U ovoj jedinici naučit ćemo kako izgraditi pošten, usporediv i obranjiv proces intervjua s AI.

Uvjeti: Strukturirani intervju je intervju u kojem se svim kandidatima postavljaju ista pitanja koja se temelje na kompetencijama, a odgovori se boduju na zajedničkoj ljestvici. Rubrika (vodič za ocjenjivanje) je tablica koja definira koliko će bodova dobiti pojedino pitanje za koji odgovor. Bihevioralno pitanje pita što je kandidat zapravo učinio u prošlosti ("Recite mi nešto o trenutku kad ste riješili sukob") - jer je prošlo ponašanje najbolji pokazatelj budućeg ponašanja. Situacijsko pitanje pita što biste učinili u hipotetskom scenariju. STAR je okvir koji se koristi za strukturiranje odgovora kandidata: Situacija, Zadatak, Radnja, Rezultat.

Dizajn intervjua korak po korak

  1. Identificirajte kompetencije. Zapišite 4-6 ključnih kompetencija radnog mjesta (npr. rješavanje problema, timski rad, tehnička dubina).
  2. Generirajte pitanja za svaku kompetenciju. Postavite AI pitanja o ponašanju i situaciji.
  3. Stvorite rubriku. Za svako pitanje definirajte kako izgleda odgovor "slab/dovoljan/jak".
  4. Pripremite dodatna pitanja. Ako kandidat odgovori površno, idite dublje.
  5. Provedite reviziju diskriminacije. Neka popis pitanja bude pravno i etički pregledan.
  6. Prikupite bodove i protumačite ih s čovjekom. AI prilagođava rezultat; Tim odlučuje.

Vaša uloga: stručnjak za ljudske resurse koji osmišljava strukturirani intervju. Pozicija: viši programer softvera. Kritične kompetencije: rješavanje problema, kvaliteta koda, timska komunikacija, agilnost učenja. Za svaku kompetenciju:- 2 bihevioralna pitanja (temeljena na prošlom iskustvu)- 1 situacijsko pitanje (hipotetski scenarij)- 2 dodatna pitanja za svako pitanje. Pitanja ne bi trebala biti diskriminirajuća; Ne pitajte o osobnom životu/vjeri/politici/planu za dijete. Naslovite rezultat prema kompetencijama.

Savjet: eksplicitno uputite AI da "pita o osobnom životu, bračnom statusu, planovima za dijete, vjeri, politici, zdravlju." Ovakva pitanja su i diskriminirajuća i rizična u smislu Zakona o radu i jednakog tretmana. AI može prekoračiti ovu granicu čak i s dobrim namjerama.

Rubrika: Alat za smanjenje subjektivnosti

Bez rubrike, rezultati variraju ovisno o raspoloženju ispitivača. Rubrika dovodi sve na istu stranicu tako što unaprijed definira "kako izgleda snažan odgovor".

Napišite rubriku na ljestvici od 1-5 za sljedeće pitanje za intervju. Pitanje: "Što ste učinili kada se tehnička odluka na projektu pokazala pogrešnom?" Definirajte sljedeće razine u rubrici: 1 (slabo): tipičan odgovor i nedostajući signali3 (dovoljno): tipičan odgovor i pozitivni signali5 (jako): tipičan odgovor i jaki signali Navedite primjere vidljivih ponašanja za svaku razinu (kao što je preuzimanje odgovornosti, analiza uzroka, učenje).

Kada primijenite rubrike na sva pitanja, rezultati koje su dali različiti anketari konvergiraju; to se zove dosljednost između ocjenjivača. Prikupljanje rezultata u zajednički predložak donosi odluku na temelju dokaza, a ne jedne rečenice "Svidjelo mi se".

Slab upit / Jak upit

Slab upit: postavite pitanja za intervju za programera softvera.

Zaključak: opća pitanja koja možete pronaći na internetu; Nema rubrike, nema podudaranja kompetencija, nema jamstva pravednosti.

Snažan upit: [Položaj + kritične kompetencije + zahtjev za bihevioralno/situacijsko pitanje + zabrana diskriminirajućeg pitanja + 1-5 rubrika za svako pitanje + dodatna pitanja]

Rezultat: komplet za intervju koji se može bodovati i koji se može obraniti i koji je primjenjiv na sve kandidate.

Procjena odgovora pomoću AI: Ograničenja

AI može pomoći organizirati vaše bilješke s intervjua po rubrikama; Ali ovdje je potrebno snažno upozorenje: umjetna inteligencija ne može vidjeti kandidatov ton glasa, iskrenost, stvarnu kompetenciju; Čita samo bilješku koju napišete. Stoga je uloga umjetne inteligencije strukturirati vaša opažanja, a ne donositi odluke.

Organizirajte moje bilješke s intervjua u nastavku pod naslovima kompetencija prema rubrici koju sam dao. Za svaku kompetenciju: - sažeti dokaze u bilješkama - pokazati kojoj razini odgovara u rubrici - označiti gdje dokazi nedostaju/nejasno Finalizirati ocjenu za mene; samo uredite dokaze.<notes>[vaše bilješke s intervjua]</notes>

Prikladna uloga umjetne inteligencije

Neprikladna uloga umjetne inteligencije

Izrada pitanja i rubrika

Samo bodovanje i eliminacija kandidata

Organiziranje bilježaka anketara prema rubrici

Odluka putem video/audio "analize emocija"

Označavanje nedosljednosti u bilješkama

Prosudbe poput "Ovaj kandidat laže"

Upozorenje o pitanju/napomeni koja sadrži pristranost

Finalizacija odluke o zapošljavanju

Oprez: alati temeljeni na umjetnoj inteligenciji za "procjenu kandidata putem analize izraza lica/tona glasa" znanstveno su upitni i predstavljaju ozbiljan rizik od diskriminacije. Ne dajte ovlasti za odlučivanje takvim alatima; Mnoge zemlje i okviri (npr. Zakon o umjetnoj inteligenciji EU-a) smatraju da su takvi sustavi koji se koriste pri zapošljavanju visokorizični.

Tri mini kućišta

Slučaj 1 — Dobitak dosljednosti. Maloprodajni lanac ocjenjivao je 8 kandidata za voditelje trgovine s 3 različita anketara i rezultati su bili nedosljedni. S umjetnom inteligencijom stvorena je zajednička rubrika. U drugom krugu razlika u ocjenama između anketara (istom kandidatu) smanjila se s prosječnih 1,8 bodova na 0,6 bodova; odluke su postale branjivije.

Slučaj 2 — Hvatanje diskriminirajućeg pitanja. Na popisu pitanja koje je pripremio, voditelj je pitao: "Imate malo dijete, možete li ostati prekovremeno?" Postavio je pitanje. Kada je umjetnoj inteligenciji rečeno da "provjeri pitanja za diskriminaciju", ovo je pitanje označeno i upitano "Ova uloga zahtijeva povremeni prekovremeni rad; koliko ste prikladni za ovo?" Zamijenjena je neutralnom verzijom koju svatko može pitati. Time je zadržana pravda i spriječen rizik od eventualne tužbe.

Slučaj 3 — Konfiguriranje bilješki. Jedan panel za intervjue imao je razbacane bilješke. AI je organizirao bilješke po naslovima rubrika i pokazao za koje kompetencije nedostaju dokazi. Panel je održao drugu kratku raspravu o nedostajućoj kompetenciji i donio solidniju odluku. AI ​​nije odlučio; uredio informacije koje su donijele odluku.

Uobičajene greške

  • Intervju bez rubrika. Postavljanje pitanja i nepripremanje vodiča za bodovanje čuva subjektivnost.
  • Postavljanje različitih pitanja kandidatima. Usporedivost je moguća samo kroz uobičajena pitanja.
  • Neka AI odluči. AI nema dovoljno podataka za donošenje konačnog suda o kandidatu.
  • Ne moderiranje diskriminirajućih pitanja. Čak i dobronamjerni anketari mogu napisati opravdano riskantna pitanja; AI kontrola je sigurnosna mreža.
  • Oslanjanje na alate za "analizu emocija/lica". Znanstvena osnova je slaba, a rizik od diskriminacije visok.
  • Pisanje bilješke dugo nakon sastanka. Vodite bilješke dok su zapažanja svježa; AI radi samo onoliko koliko ga vi napišete.

Ukratko

Pošten intervju; To znači uobičajena pitanja, jasnu rubriku i očuvanje ljudske prosudbe. AI je izvrstan pomoćnik u izradi prva dva od ovog trojca: pitanja koja se temelje na kompetencijama specifična za položaj, obranjivi vodiči za bodovanje i praćenje diskriminacije. Ali stvarna procjena kandidata i odluka o zapošljavanju — pripada ljudskom promatranju i odgovornosti.

Zadatak aplikacije

Odaberite poziciju. (1) Identificirajte 4 kritične kompetencije. (2) Generirajte bihevioralna/situacijska pitanja i dodatna pitanja s gornjim upitom. (3) Napravite 1-5 rubrika za 3 najkritičnija pitanja. (4) Provucite popis pitanja kroz upit "provjera diskriminacije". (5) Neka AI uredi uzorak bilješke s intervjua prema rubrici i sam daj konačnu ocjenu.

popis za provjeru

  • [ ] Jesu li pitanja preslikana na kritične kompetencije?
  • [ ] Je li standardiziran tako da se svim kandidatima postavljaju ista pitanja?
  • [ ] Postoji li 1-5 rubrika za svako kritično pitanje?
  • [ ] Jesu li pitanja provjerena za diskriminaciju?
  • [ ] Je li konačna ocjena i odluka prepuštena čovjeku?
  • [ ] Jesu li riskantni alati kao što je "analiza emocija/lica" izbjegnuti?