Jednotka 3 / 11

Otázky na pohovor a štruktúrované hodnotenie

zisky:

  • Schopnosť vytvárať otázky na pohovory špecifické pre danú pozíciu, na základe kompetencií a správania
  • Schopnosť vytvoriť spravodlivú a porovnateľnú príručku hodnotenia (rubrika)
  • Uvedomte si obmedzenia AI pri hodnotení rozhovorov a zachovajte si ľudský úsudok

Pohovor je najrozhodujúcejšou, ale najsubjektívnejšou fázou náboru. Dvaja rôzni anketári môžu hodnotiť toho istého kandidáta veľmi odlišne; pretože každý si kladie iné otázky, pripisuje dôležitosť iným veciam a často sa rozhoduje na základe „pocitov“. Výskum ukazuje, že neštruktúrované pohovory sú slabé pri predpovedaní úspešnosti prijímania zamestnancov; ukazuje však, že štruktúrované rozhovory sú jedným z najsilnejších prediktorov. Umelá inteligencia (AI) je najpraktickejším nástrojom na zníženie tejto subjektivity: otázky špecifické pre pozíciu vytvárajú spoločnú príručku hodnotenia a konzistentnú štruktúru. V tejto lekcii sa naučíme, ako vybudovať spravodlivý, porovnateľný a obhájiteľný proces rozhovoru s AI.

Podmienky: Štruktúrovaný pohovor je pohovor, v ktorom sa všetkým kandidátom kladú rovnaké otázky založené na kompetenciách a odpovede sa hodnotia podľa spoločnej stupnice. Rubrika (príručka hodnotenia) je tabuľka, ktorá definuje, koľko bodov získa každá otázka za ktorú odpoveď. Behaviorálna otázka sa pýta, čo kandidát skutočne urobil v minulosti („Povedz mi, kedy si vyriešil konflikt“) — pretože minulé správanie je najlepším indikátorom budúceho správania. Situačná otázka sa pýta, čo by ste robili v hypotetickom scenári. STAR je rámec používaný na štruktúrovanie odpovede kandidáta: situácia, úloha, akcia, výsledok.

Návrh rozhovoru krok za krokom

  1. Identifikujte kompetencie. Zapíšte si 4-6 kritických kompetencií pozície (napr. riešenie problémov, tímová práca, technická hĺbka).
  2. Vytvorte otázky pre každú kompetenciu. Opýtajte sa AI na behaviorálne a situačné otázky.
  3. Vytvorte rubriku. Pri každej otázke definujte, ako vyzerá odpoveď „slabá/dostatočná/silná“.
  4. Pripravte si doplňujúce otázky. Ak kandidát odpovedá povrchne, choďte hlbšie.
  5. Vykonajte diskriminačný audit. Nechajte si skontrolovať zoznam otázok z právneho a etického hľadiska.
  6. Zbierajte skóre a interpretujte ich s človekom. AI upravuje skóre; Rozhoduje tím.

Vaša úloha: HR špecialista navrhujúci štruktúrovaný rozhovor. Pozícia: Senior Software DeveloperKritické kompetencie: riešenie problémov, kvalita kódu, tímová komunikácia, agilita učenia. Pre každú kompetenciu:- 2 behaviorálne otázky (na základe minulých skúseností)- 1 situačná otázka (hypotetický scenár)- 2 doplňujúce otázky pre každú otázku Otázky by nemali byť diskriminačné; Nepýtajte sa na osobný život/náboženstvo/politiku/plán dieťaťa. Výstup pomenujte podľa kompetencií.

Tip: Explicitne nariaďte AI, aby sa „pýtala na osobný život, rodinný stav, plány detí, náboženstvo, politiku, zdravie“. Takéto otázky sú diskriminačné a rizikové z hľadiska pracovného práva a rovnakého zaobchádzania. AI môže túto hranicu prekročiť aj s dobrým úmyslom.

Rubrika: Nástroj na zníženie subjektivity

Bez rubriky sa skóre líši v závislosti od nálady anketára. Rubrika dostane všetkých na rovnakú stránku preddefinovaním toho, „ako vyzerá silná odpoveď“.

Napíšte rubriku na stupnici od 1 do 5 pre nasledujúcu otázku na pohovore. Otázka: Čo ste urobili, keď sa technické rozhodnutie v projekte ukázalo ako nesprávne? Definujte nasledujúce úrovne v rubrike: 1 (slabé): typická odpoveď a chýbajúce signály3 (dostatočné): typická odpoveď a pozitívne signály5 (silné): typická odpoveď a silné signály Uveďte príklady pozorovateľného správania pre každú úroveň (ako je prevzatie zodpovednosti, analýza základných príčin, učenie sa).

Keď použijete rubriky na všetky otázky, skóre udelené rôznymi anketármi sa zblíži; toto sa nazýva medzihodnotiteľská konzistencia. Zhromažďovanie skóre v spoločnej šablóne robí rozhodnutie založené skôr na dôkazoch než na jedinej vete „páčilo sa mi to“.

Slabá výzva / silná výzva

Slabá výzva: Položte otázky na pohovor pre vývojárov softvéru.

Záver: všeobecné otázky, ktoré môžete nájsť na internete; Žiadna rubrika, žiadne porovnávanie kompetencií, žiadna záruka férovosti.

Silná výzva: [Pozícia + kritické kompetencie + žiadosť o otázky týkajúce sa správania/situácie + zákaz diskriminačných otázok + 1 – 5 rubrik pre každú otázku + doplňujúce otázky]

Výsledok: skórovateľná a obhájiteľná súprava pohovorov, ktorá je použiteľná pre všetkých kandidátov.

Hodnotenie odpovede pomocou AI: Limity

AI vám môže pomôcť usporiadať vaše poznámky k pohovoru podľa rubriky; Tu je však potrebné dôrazné varovanie: AI nevidí tón hlasu kandidáta, úprimnosť, skutočnú kompetenciu; Prečíta iba poznámku, ktorú napíšete. Úlohou AI je teda štruktúrovať vaše pozorovania – nie robiť rozhodnutia.

Usporiadajte moje poznámky k pohovoru nižšie pod nadpismi kompetencií podľa rubriky, ktorú som uviedol. Pre každú kompetenciu: - zhrnúť dôkazy do poznámok - v rubrike uviesť, ktorej úrovni zodpovedá - označiť, kde chýbajú/nejasné dôkazy Dokončite hodnotenie za mňa; stačí upraviť dôkazy.<notes>[vaše poznámky k rozhovoru]</notes>

Vhodná úloha AI

Nevhodná úloha AI

Vytváranie otázok a rubrik

Samotné bodovanie a vylúčenie kandidáta

Usporiadanie poznámok anketára podľa rubriky

Rozhodnutie pomocou video/audio „analýzy emócií“

Označenie nejednotnosti v poznámkach

Rozsudky ako „Tento kandidát klame“

Upozornenie na otázku/poznámku obsahujúcu zaujatosť

Dokončenie rozhodnutia o prijatí do zamestnania

Upozornenie: Nástroje na „hodnotenie kandidátov prostredníctvom analýzy výrazu tváre/tónu hlasu“ založené na AI sú vedecky sporné a predstavujú vážne riziko diskriminácie. Nedávajte rozhodovaciu právomoc takýmto nástrojom; Mnohé krajiny a rámce (napr. zákon EÚ o umelej inteligencii) považujú takéto systémy používané pri nábore za vysoko rizikové.

Tri mini puzdrá

Prípad 1 – Získanie konzistencie. Maloobchodný reťazec hodnotil 8 kandidátov na manažéra predajne s 3 rôznymi anketármi a skóre bolo nekonzistentné. S AI bola vytvorená spoločná rubrika. V druhom kole sa rozdiel v skóre medzi anketármi (k tomu istému kandidátovi) znížil z priemerných 1,8 bodu na 0,6 bodu; rozhodnutia sa stali viac obhájiteľnými.

Prípad 2 – Zachytenie diskriminačnej otázky. V zozname otázok, ktoré pripravil, sa manažér opýtal: "Máte malé dieťa, môžete zostať nadčas?" Položil otázku. Keď bolo AI ​​povedané, aby „skontrolovala otázky týkajúce sa diskriminácie“, táto otázka bola označená a spýtala sa: „Táto rola si vyžaduje občasné nadčasy; ako sa na to hodíte?“ Nahradila ho neutrálna verzia, ktorú si môže pýtať každý. Spravodlivosť tak zostala zachovaná a predišlo sa riziku prípadnej sťažnosti.

Prípad 3 – Konfigurácia poznámok. Jeden panel rozhovoru mal rozhádzané poznámky. AI ​​usporiadala poznámky podľa rubrik a ukázala, ktorým kompetenciám chýbajú dôkazy. Panel uskutočnil druhú krátku diskusiu o chýbajúcej kompetencii a prijal solídnejšie rozhodnutie. AI sa nerozhodla; upravil informácie, ktoré viedli k rozhodnutiu.

Časté chyby

  • Rozhovor bez rubrík. Vytváranie otázok a nepripravovanie bodovacej príručky zachováva subjektivitu.
  • Kladenie rôznych otázok kandidátom. Porovnateľnosť je možná len prostredníctvom bežných otázok.
  • Nechajte rozhodnúť AI. AI nemá dostatok údajov na to, aby urobila konečný úsudok o kandidátovi.
  • Nemoderovanie diskriminačných otázok. Dokonca aj dobre mienení anketári môžu písať legitímne riskantné otázky; AI ovládanie je bezpečnostná sieť.
  • Spoliehanie sa na nástroje „analýzy emócií/tváre“. Vedecký základ je slabý a riziko diskriminácie vysoké.
  • Písanie poznámky dlho po stretnutí. Robte si poznámky, kým sú pozorovania čerstvé; AI funguje len tak dobre ako píšeš.

V súhrne

Spravodlivý rozhovor; Znamená to bežné otázky, jasnú rubriku a zachovanie ľudského úsudku. Umelá inteligencia je vynikajúcim pomocníkom pri vytváraní prvých dvoch z tohto tria: otázky založené na kompetenciách špecifické pre danú pozíciu, obhájiteľné skórovacie príručky a monitorovanie diskriminácie. Samotné hodnotenie kandidáta a rozhodnutie o prijatí do zamestnania však patrí k ľudskému pozorovaniu a zodpovednosti.

Aplikačná úloha

Vyberte si polohu. (1) Identifikujte 4 kritické kompetencie. (2) Vytvorte behaviorálne/situačné otázky a doplňujúce otázky s výzvou vyššie. (3) Vytvorte 1-5 rubrik pre 3 najkritickejšie otázky. (4) Prejdite zoznam otázok cez výzvu „kontrola diskriminácie“. (5) Nechajte AI upraviť vzorovú poznámku z rozhovoru podľa rubriky a sami si dajte konečné skóre.

kontrolný zoznam

  • [ ] Sú otázky zaradené do kritických kompetencií?
  • [ ] Je to štandardizované, aby všetci kandidáti dostávali rovnaké otázky?
  • [ ] Existuje 1 – 5 rubrik pre každú kritickú otázku?
  • [ ] Boli otázky skontrolované z hľadiska diskriminácie?
  • [ ] Je konečné hodnotenie a rozhodnutie ponechané na človeka?
  • [ ] Vyhýbali ste sa rizikovým nástrojom, ako je „analýza emócií/tváre“?