Unidad 3 / 11

Preguntas de la entrevista y evaluación estructurada

Ganancias:

  • Capacidad para generar preguntas de entrevista conductuales, basadas en competencias y específicas para el puesto.
  • Capacidad para crear una guía de evaluación (rúbrica) justa y comparable.
  • Reconocer las limitaciones de la IA en la evaluación de entrevistas y conservar el juicio humano

La entrevista es la etapa más decisiva pero más subjetiva del reclutamiento. Dos entrevistadores diferentes pueden evaluar al mismo candidato de manera muy diferente; porque cada uno hace preguntas diferentes, da importancia a cosas diferentes y, a menudo, basa sus decisiones en "sentimientos". Las investigaciones muestran que las entrevistas no estructuradas no sirven para predecir el éxito de la contratación; sin embargo, muestra que las entrevistas estructuradas son uno de los predictores más sólidos. La inteligencia artificial (IA) es la herramienta más práctica para reducir esta subjetividad: las preguntas específicas del puesto producen una guía de evaluación común y una estructura consistente. En esta unidad, aprenderemos cómo construir un proceso de entrevista justo, comparable y defendible con IA.

Términos: Una entrevista estructurada es una entrevista en la que a todos los candidatos se les hacen las mismas preguntas basadas en competencias y las respuestas se califican en una escala común. La rúbrica (guía de evaluación) es una tabla que define cuántos puntos recibirá cada pregunta por cada respuesta. La pregunta de comportamiento pregunta qué ha hecho realmente el candidato en el pasado (“Cuéntame sobre una vez que resolviste un conflicto”), porque el comportamiento pasado es el mejor indicador del comportamiento futuro. La pregunta situacional pregunta qué haría usted en un escenario hipotético. STAR es un marco utilizado para estructurar la respuesta del candidato: situación, tarea, acción, resultado.

Diseño de entrevista paso a paso

  1. Identificar competencias. Escriba de 4 a 6 competencias críticas del puesto (por ejemplo, resolución de problemas, trabajo en equipo, profundidad técnica).
  2. Generar preguntas para cada competencia. Haga preguntas de comportamiento y situacionales a la IA.
  3. Crea una rúbrica. Para cada pregunta, defina cómo sería una respuesta "débil/suficiente/fuerte".
  4. Prepare preguntas de seguimiento. Si el candidato responde superficialmente, profundice.
  5. Realizar una auditoría de discriminación. Hacer revisar la lista de preguntas de manera legal y ética.
  6. Recoge las partituras e interpretalas con un humano. La IA ajusta la puntuación; El equipo decide.

Su función: especialista en recursos humanos que diseña entrevistas estructuradas. Puesto: desarrollador de software senior. Competencias críticas: resolución de problemas, calidad del código, comunicación en equipo, agilidad de aprendizaje. Para cada competencia: - 2 preguntas de comportamiento (basadas en experiencias pasadas) - 1 pregunta situacional (escenario hipotético) - 2 preguntas de seguimiento para cada pregunta Las preguntas no deben ser discriminatorias; No preguntes sobre vida personal/religión/política/plan infantil. Titular el resultado según las competencias.

Consejo: indique explícitamente a la IA que "pregunte sobre la vida personal, el estado civil, los planes infantiles, la religión, la política y la salud". Estas cuestiones son discriminatorias y arriesgadas en términos de derecho laboral y de igualdad de trato. La IA puede superar este límite incluso con buenas intenciones.

Rúbrica: Herramienta para reducir la subjetividad

Sin rúbrica, las puntuaciones varían según el estado de ánimo del entrevistador. La rúbrica pone a todos en la misma página al predefinir "cómo se ve una respuesta sólida".

Escriba una rúbrica en una escala del 1 al 5 para la siguiente pregunta de la entrevista. Pregunta: "¿Qué hiciste cuando una decisión técnica resultó ser incorrecta en un proyecto?" Defina los siguientes niveles en la rúbrica: 1 (débil): respuesta típica y señales faltantes 3 (suficiente): respuesta típica y señales positivas 5 (fuerte): respuesta típica y señales fuertes Dé ejemplos de comportamiento observable para cada nivel (como asumir responsabilidad, análisis de causa raíz, aprendizaje).

Cuando se aplican las rúbricas a todas las preguntas, las puntuaciones dadas por diferentes entrevistadores convergen; esto se llama coherencia entre evaluadores. Recopilar las puntuaciones en una plantilla común hace que la decisión se base en evidencia en lugar de una sola frase de "Me gustó".

Aviso débil / Aviso fuerte

Mensaje débil:Haga preguntas de entrevista para desarrolladores de software.

Conclusión: preguntas generales que puedes encontrar en internet; Sin rúbricas, sin comparación de competencias, sin garantía de equidad.

Mensaje fuerte: [Posición + competencias críticas + solicitud de pregunta conductual/situacional + prohibición de preguntas discriminatorias + 1-5 rúbricas para cada pregunta + preguntas de seguimiento]

El resultado: un kit de entrevista defendible y puntuable que se aplica a todos los candidatos.

Evaluación de respuestas con IA: límites

La IA puede ayudarle a organizar las notas de su entrevista por rúbrica; Pero aquí se necesita una fuerte advertencia: la IA no puede ver el tono de voz, la sinceridad y la competencia real del candidato; Solo lee la nota que escribes. Entonces, el papel de la IA es estructurar sus observaciones, no tomar decisiones.

Organice las notas de mi entrevista a continuación bajo los títulos de competencias de acuerdo con la rúbrica que proporcioné. Para cada competencia: - resumir la evidencia en las notas - mostrar a qué nivel corresponde en la rúbrica - marcar donde falta evidencia/no está clara Finalizar la puntuación por mí; simplemente edite la evidencia.<notes>[sus notas de entrevista]</notes>

Papel apropiado de la IA

Papel inadecuado de la IA

Crear preguntas y rúbricas

Puntuar y eliminar al candidato solo.

Organizar las notas del entrevistador según la rúbrica

Decisión por vídeo/audio "análisis de emociones"

Marcar inconsistencia en las notas.

Juicios como "Este candidato miente"

Advertencia sobre una pregunta/nota que contiene prejuicios

Finalizar la decisión de contratación

Precaución: Las herramientas de “evaluación de candidatos mediante análisis de expresión facial/tono de voz” basadas en inteligencia artificial son científicamente cuestionables y plantean un grave riesgo de discriminación. No conceda autoridad de decisión a dichas herramientas; Muchos países y marcos (por ejemplo, la Ley de Inteligencia Artificial de la UE) consideran que estos sistemas utilizados en la contratación son de alto riesgo.

Tres mini estuches

Caso 1: Ganancia de consistencia. Una cadena minorista estaba evaluando a 8 candidatos a gerente de tienda con 3 entrevistadores diferentes y las puntuaciones eran inconsistentes. Se creó una rúbrica común con IA. En la segunda vuelta, la diferencia de puntuaciones entre los entrevistadores (al mismo candidato) disminuyó de una media de 1,8 puntos a 0,6 puntos; Las decisiones se volvieron más defendibles.

Caso 2: Captar la cuestión discriminatoria. En la lista de preguntas que preparó, un gerente preguntó: "Tienes un niño pequeño, ¿puedes quedarte horas extras?". Él hizo la pregunta. Cuando se le dijo a la IA que "verificara las preguntas para detectar discriminación", esta pregunta se marcó y se le preguntó: "Este rol requiere horas extras ocasionales; ¿cuál es su idoneidad para esto?" Ha sido reemplazada por una versión neutral que cualquiera puede preguntar. Así se mantuvo la justicia y se evitó el riesgo de una posible denuncia.

Caso 3: Configuración de notas. Un panel de entrevistas tenía notas dispersas. La IA organizó las notas por rúbricas y mostró qué competencias faltaban evidencia. El panel mantuvo una segunda breve discusión sobre la competencia faltante y tomó una decisión más sólida. La IA no decidió; Editó la información que alimentó la decisión.

Errores comunes

  • Entrevista sin rúbricas. Producir preguntas y no preparar una guía de puntuación preserva la subjetividad.
  • Hacer diferentes preguntas a los candidatos. La comparabilidad sólo es posible a través de preguntas comunes.
  • Dejemos que la IA decida. La IA no tiene datos suficientes para emitir un juicio final sobre el candidato.
  • No moderar preguntas discriminatorias. Incluso los entrevistadores bien intencionados pueden escribir preguntas legítimamente arriesgadas; El control de la IA es la red de seguridad.
  • Confiar en herramientas de “análisis de emociones/rostros”. La base científica es débil y el riesgo de discriminación es alto.
  • Escribir la nota mucho después de la reunión. Tome notas mientras las observaciones estén frescas; La IA solo funciona tan bien como la escribes.

En resumen

Entrevista justa; Significa preguntas comunes, una rúbrica clara y preservación del juicio humano. La IA es una excelente ayuda para producir los dos primeros de este trío: preguntas basadas en competencias específicas para cada puesto, guías de puntuación defendibles y seguimiento de la discriminación. Pero la evaluación real del candidato y la decisión de contratación pertenecen a la observación y la responsabilidad humanas.

Tarea de aplicación

Elige una posición. (1) Identificar 4 competencias críticas. (2) Genere preguntas de comportamiento/situacionales y preguntas de seguimiento con el mensaje anterior. (3) Cree de 1 a 5 rúbricas para las 3 preguntas más críticas. (4) Pase la lista de preguntas a través del mensaje "verificación de discriminación". (5) Haga que AI edite una nota de entrevista de muestra de acuerdo con la rúbrica y proporcione usted mismo la puntuación final.

lista de verificación

  • [ ] ¿Las preguntas están asignadas a competencias críticas?
  • [ ] ¿Está estandarizado para que a todos los candidatos se les hagan las mismas preguntas?
  • [ ] ¿Hay entre 1 y 5 rúbricas para cada pregunta crítica?
  • [ ] ¿Se han verificado las preguntas para detectar discriminación?
  • [ ] ¿La evaluación y decisión final se deja en manos del ser humano?
  • [ ] ¿Se han evitado herramientas riesgosas como el “análisis de emociones/rostros”?