יחידה 3 / 11

שאלות ראיון והערכה מובנית

רווחים:

  • יכולת לייצר שאלות ראיון ספציפיות לתפקיד, מיומנות והתנהגות
  • יכולת ליצור מדריך הערכה הוגן ובר-השוואה (רובריקה)
  • להכיר במגבלות של AI בהערכת ראיונות ולשמור על שיקול דעת אנושי

הראיון הוא השלב המכריע ביותר אך הסובייקטיבי ביותר בגיוס. שני מראיינים שונים עשויים להעריך את אותו מועמד בצורה שונה מאוד; כי כל אחד שואל שאלות שונות, מייחס חשיבות לדברים שונים ולרוב מבסס את החלטותיו על "רגשות". מחקרים מראים שראיונות לא מובנים גרועים בניבוי הצלחת גיוס עובדים; עם זאת, זה מראה שראיונות מובנים הם אחד המנבאים החזקים ביותר. בינה מלאכותית (AI) היא הכלי המעשי ביותר לצמצום הסובייקטיביות הזו: שאלות ספציפיות לתפקיד מייצרות מדריך הערכה משותף ומבנה עקבי. ביחידה זו נלמד כיצד לבנות תהליך ראיונות הוגן, בר השוואה ובעל הגנה עם AI.

מונחים: ראיון מובנה הוא ראיון שבו כל המועמדים נשאלים את אותן שאלות מבוססות יכולת והתשובות ניתנות לציון בסולם משותף. רובריקה (מדריך הערכה) היא טבלה המגדירה כמה נקודות תקבל כל שאלה עבור איזו תשובה. השאלה ההתנהגותית שואלת מה המועמד עשה בפועל בעבר ("ספר לי על הפעם שבה פתרת סכסוך") - מכיוון שהתנהגות בעבר היא האינדיקטור הטוב ביותר להתנהגות עתידית. השאלה המצבית שואלת מה היית עושה בתרחיש היפותטי. STAR היא מסגרת המשמשת למבנה תשובת המועמד: מצב, משימה, פעולה, תוצאה.

עיצוב ראיון צעד אחר צעד

  1. זיהוי מיומנויות. רשום 4-6 יכולות קריטיות של התפקיד (למשל פתרון בעיות, עבודת צוות, עומק טכני).
  2. צור שאלות עבור כל מיומנות. שאל שאלות התנהגותיות ומצביות מה-AI.
  3. צור רובריקה. לכל שאלה הגדירו איך נראית תשובה "חלשה/מספיקה/חזקה".
  4. הכן שאלות המשך. אם המועמד עונה בצורה שטחית, העמיקו יותר.
  5. ערוך ביקורת אפליה. יש לבדוק את רשימת השאלות מבחינה משפטית ואתית.
  6. אסוף את הציונים ופרש אותם עם אדם. AI מתאים את הציון; הצוות מחליט.

תפקידך: מומחה משאבי אנוש בעיצוב ראיון מובנה. תפקיד: מפתח תוכנה בכיר מיומנויות קריטיות: פתרון בעיות, איכות קוד, תקשורת צוות, זריזות למידה. לכל כישור:- 2 שאלות התנהגותיות (בהתבסס על ניסיון העבר)- שאלה מצבית אחת (תרחיש היפותטי)- 2 שאלות המשך לכל שאלה שאלות לא אמורות להיות מפלות; אל תשאל על חיים אישיים/דת/פוליטיקה/תכנית ילדים. תן את התפוקה לפי מיומנויות.

טיפ: הנחה במפורש את הבינה המלאכותית "לשאול על חיים אישיים, מצב משפחתי, תוכניות ילדים, דת, פוליטיקה, בריאות." שאלות כאלה הן מפלות ומסוכנות מבחינת דיני העבודה ויחס שווה. AI יכול לחרוג מגבול זה אפילו עם כוונות טובות.

כותרת: כלי להפחתת סובייקטיביות

ללא רובריקה, הציונים משתנים בהתאם למצב הרוח של המראיין. הרובריקה משיגה את כולם על אותו עמוד על ידי הגדרה מראש של "איך נראית תשובה חזקה".

כתוב רובריקה בסולם של 1-5 עבור שאלת הראיון הבאה. שאלה: "מה עשית כשהחלטה טכנית התבררה כשגויה בפרויקט?" הגדירו את הרמות הבאות ברובריקה: 1 (חלש): תשובה אופיינית ואותות חסרים3 (מספיק): תשובה אופיינית ואותות חיוביים5 (חזקים): תשובה אופיינית ואותות חזקים תנו דוגמאות להתנהגות נצפית לכל רמה (כגון לקיחת אחריות, ניתוח שורש, למידה).

כאשר אתה מיישם את רובריקות על כל השאלות, הציונים שניתנו על ידי מראיינים שונים מתכנסים; זה נקרא עקביות בין-דירוג. איסוף הציונים בתבנית משותפת מקבל את ההחלטה על סמך ראיות ולא על משפט "אהבתי" בודד.

הנחיה חלשה / הנחיה חזקה

הנחיה חלשה: תן שאלות ראיון למפתחי תוכנה.

מסקנה: שאלות כלליות שתוכלו למצוא באינטרנט; ללא רובריקה, ללא התאמת יכולות, ללא ערובה להוגנות.

הנחיה חזקה: [עמדה + כישורים קריטיים + בקשת שאלה התנהגותית/מצבית + איסור על שאלות מפלה + 1-5 רובריקות לכל שאלה + שאלות המשך]

התוצאה: ערכת ראיונות ניתנת לניקוד הניתנת להגנה המתאימה לכל המועמדים.

הערכת תשובות עם AI: גבולות

AI יכול לעזור לארגן את הערות הראיונות שלך לפי רובריקה; אבל יש צורך באזהרה חזקה כאן: בינה מלאכותית לא יכולה לראות את טון הדיבור של המועמד, את הכנות, את יכולתו האמיתית; זה קורא רק את ההערה שאתה כותב. אז תפקידה של AI הוא לבנות את התצפיות שלך - לא לקבל החלטות.

ארגן את הערות הראיון שלי למטה תחת כותרות מיומנות לפי הרובריקה שנתתי. לכל יכולת: - סכם את ההוכחות בהערות - הראה לאיזו רמה היא מתאימה ברובריקה - סמן היכן חסרות ראיות/לא ברורות סיים את הניקוד עבורי; פשוט ערוך את הראיות.<notes>[הערות הראיונות שלך]</notes>

תפקיד מתאים של AI

תפקיד לא הולם של AI

יצירת שאלות ורובריקות

ניקוד והדחה של המועמד לבד

ארגון הערות המראיין לפי רובריקה

החלטה על ידי וידאו/שמע "ניתוח רגשות"

סימון חוסר עקביות בהערות

פסקי דין כמו "המועמד הזה משקר"

אזהרה לגבי שאלה/הערה המכילה הטיה

סיום החלטת הגיוס

זהירות: כלים מבוססי AI "הערכת מועמדים באמצעות הבעת פנים/ניתוח גוון קול" מוטלים בספק מבחינה מדעית ומהווים סיכון רציני לאפליה. אין לתת סמכות החלטה לכלים כאלה; מדינות ומסגרות רבות (למשל חוק הבינה המלאכותית של האיחוד האירופי) רואים במערכות כאלה המשמשות בגיוס סיכון גבוה.

שלושה מיני מארזים

מקרה 1 - רווח עקביות. רשת קמעונאית העריכה 8 מועמדים למנהלי חנויות עם 3 מראיינים שונים והציונים לא היו עקביים. רובריקה משותפת נוצרה עם AI. בסיבוב השני ירד הפרש הציונים בין המראיינים (לאותו מועמד) מממוצע של 1.8 נקודות ל-0.6 נקודות; החלטות הפכו ניתנות להגנה.

מקרה 2 - תופס את השאלה המפלה. ברשימת השאלות שהכין שאל מנהל: "יש לך ילד קטן, אתה יכול להישאר שעות נוספות?" הוא הציג את השאלה. כאשר נאמר ל-AI "לבדוק שאלות לאפליה" השאלה הזו סומנה ונשאלה "תפקיד זה דורש שעות נוספות מדי פעם; מה ההתאמה שלך לזה?" הוא הוחלף בגרסה ניטרלית שכל אחד יכול לשאול. כך נשמר הצדק ונמנע הסיכון לתלונה אפשרית.

מקרה 3 - הגדרת הערות. פאנל ראיונות אחד פיזר הערות. ה-AI אירגן את ההערות לפי כותרות רובריקות והראה לאילו מיומנויות חסרות ראיות. הפאנל ערך דיון קצר שני על הכשירות החסרה וקיבל החלטה מוצקה יותר. ה-AI לא החליט; ערך את המידע שהזין את ההחלטה.

טעויות נפוצות

  • ראיון ללא רובריקות. הפקת שאלות ואי הכנת מדריך ניקוד שומרת על סובייקטיביות.
  • שאילת שאלות שונות למועמדים. ניתן להשוות רק באמצעות שאלות נפוצות.
  • תן ל-AI להחליט. ל-AI אין מספיק נתונים כדי לעשות פסק דין סופי לגבי המועמד.
  • לא ממתן שאלות מפלות. אפילו מראיינים בעלי כוונות טובות יכולים לכתוב שאלות מסוכנות באופן לגיטימי; בקרת AI היא רשת הביטחון.
  • הסתמכות על כלי "ניתוח רגש/פנים". הבסיס המדעי חלש והסיכון לאפליה גבוה.
  • כתיבת הפתק זמן רב לאחר הפגישה. רשום הערות בזמן שהתצפיות טריות; AI עובד טוב רק כמו שאתה כותב אותו.

לסיכום

ראיון הוגן; זה אומר שאלות נפוצות, רובריקה ברורה ושמירה על שיקול הדעת האנושי. בינה מלאכותית היא עוזר מצוין בהפקת השניים הראשונים של השלישייה הזו: שאלות מבוססות כישורים ספציפיים לתפקיד, מדריכי ניקוד בני הגנה וניטור אפליה. אבל ההערכה בפועל של המועמד והחלטת הגיוס - שייכת להתבוננות ואחריות אנושית.

משימת יישום

בחר עמדה. (1) זהה 4 כישורים קריטיים. (2) צור שאלות התנהגותיות/מצביות ושאלות המשך עם ההנחיה שלמעלה. (3) צור 1-5 רובריקות עבור 3 השאלות הקריטיות ביותר. (4) העבירו את רשימת השאלות דרך שורת "בדיקת האפליה". (5) בקש מ-AI לערוך הערת ראיון לדוגמה לפי הכלל ולתת את הציון הסופי בעצמך.

רשימת בדיקה

  • [ ] האם השאלות ממופות לכישורים קריטיים?
  • [ ] האם זה סטנדרטי כך שכל המועמדים נשאלים את אותן שאלות?
  • [ ] האם יש 1-5 רובריקות לכל שאלה קריטית?
  • [ ] האם השאלות נבדקו לאפליה?
  • [ ] האם ההערכה וההחלטה הסופית נותרו בידי האדם?
  • [ ] האם נמנעו כלים מסוכנים כגון "ניתוח רגשות/פנים"?