Unidad 4 / 11

Diseño de encuestas y análisis de datos cuantitativos

Ganancias:

  • Capacidad para detectar trampas principales, dobles y ambiguas en las preguntas de la encuesta y conectar cada pregunta con un concepto.
  • Capacidad para realizar cálculos estadísticos reales en un programa y utilizar inteligencia artificial solo para la selección e interpretación de métodos.
  • Capacidad para distinguir la significancia estadística de la significancia práctica y verificar los supuestos de las pruebas.

La investigación cuantitativa es un enfoque que mide los fenómenos sociales con números y los analiza con estadísticas: busca respuestas a preguntas como cuántas personas, a qué ritmo, qué diferencia hay entre qué grupos. La herramienta más común para este enfoque es la encuesta, un método para recopilar datos comparables de un gran número de personas mediante preguntas estándar. Configurar una buena encuesta y analizar correctamente los datos entrantes requiere habilidad; Una mala pregunta arruina el resultado desde el principio. En esta unidad, aprenderá a utilizar la IA para diseñar preguntas de encuestas, construir escalas (opciones de respuesta que califican una actitud, por ejemplo, "muy de acuerdo... totalmente en desacuerdo") y analizar los datos entrantes; pero aprenderá por qué debe conservar el criterio estadístico.

Donde la IA es más valiosa en el análisis cuantitativo no es en el cálculo en sí, sino en explicar cómo hacer el cálculo y qué significa el resultado. La IA puede delinear el código de análisis (por ejemplo, comandos para ejecutar en R o Python), explicar en lenguaje sencillo cuándo usar una prueba estadística y ayudarlo a interpretar el resultado. Pero nunca confíes en los números que la IA genera “fuera de tu cabeza” en el texto: un modelo de lenguaje no es una calculadora y puede producir una media, un porcentaje o un valor p incorrectos. El cálculo real se realiza en un programa de estadística real.

Paso a paso: de la encuesta a la revisión

1. Vincula cada pregunta a un concepto. Cada pregunta que formule en la encuesta debe medir un concepto de su pregunta de investigación. No agregue preguntas sólo porque "sería interesante". La IA le ayuda a comprobar el mapeo de conceptos y preguntas en una tabla.

2. Elimina las malas preguntas. Las preguntas iniciales ("¿Está satisfecho con este excelente servicio?"), preguntas dobles ("¿El servicio fue rápido y barato?"), vagas ("¿Le gustó a menudo?") distorsionan los datos. La IA es buena para señalar estos errores en el borrador de la encuesta.

3. Establecer la escala de forma consistente. Si está utilizando una escala Likert (una escala de acuerdo de 5 o 7 puntos), mantenga la dirección y las calificaciones consistentes a lo largo de la encuesta. La IA detecta inconsistencias.

4. Borrar datos. Los datos entrantes pueden contener respuestas faltantes, inconsistencias o dos registros de la misma persona. La IA puede enumerar los pasos de limpieza y redactar el código; Tú decides.

5. Elige la prueba correcta e INTERPRÉTALA. ¿Estás comparando dos grupos, buscando una relación? AI explica qué prueba es apropiada; Es su trabajo ejecutar la prueba en el programa y leer y entender el resultado.

Atención: no le diga a la IA "calcule el promedio de estos datos" y escriba el número resultante directamente en el informe. El modelo de lenguaje comete errores en aritmética. Hacer el cálculo en una hoja de cálculo o programa de estadística; Utilice la IA únicamente para su método e interpretación.

tres mini casos

Caso 1: Pregunta capciosa corregida. Un borrador de la encuesta preguntaba "¿Qué tan satisfecho está usted con el servicio de transporte de nuestro exitoso municipio?" Tenía una pregunta. AI señaló que el adjetivo "exitoso" llevó la respuesta a lo positivo. La pregunta es "¿Cómo evalúa el servicio de transporte del municipio?" fue neutralizado y los resultados fueron más equilibrados.

Caso 2: Se detectó un error de cálculo de la IA. Un investigador pegó 300 líneas de datos como texto en la IA y dijo "encuentra la edad promedio"; YZ dijo 34,2. Cuando los mismos datos se pusieron en una tabla, el promedio real fue 31,7. La IA había calculado mal dentro del texto; Se solucionó cuando la cuenta se movió al programa.

Caso 3: Se aclaró la selección de la prueba. Un equipo quería comparar la puntuación media de dos grupos pero no sabía qué prueba utilizar. YZ explicó que la prueba t (una prueba que prueba si la diferencia entre las medias de dos grupos es aleatoria) era apropiada para "dos grupos independientes, una variable continua", enumeró sus suposiciones y proporcionó un borrador del código. El equipo realizó la prueba en el programa e interpretó el resultado.

Cuatro plantillas copiables

1) Auditoría de preguntas de la encuesta:

Revise las preguntas de la encuesta a continuación. Verifique cada pregunta: ¿es principal, es una pregunta doble (dos cosas en una pregunta), es ambigua, las opciones de respuesta se superponen o faltan? Muestra el problema y una versión mejor uno al lado del otro. Compruebe si la dirección de la escala es consistente.Preguntas: [aquí]

2) Tabla de mapeo concepto-pregunta:

Mi pregunta de investigación: [pregunta]. Mis conceptos clave: [lista]. Organiza las siguientes preguntas de la encuesta en una tabla: ¿qué concepto mide cada pregunta? Marque las preguntas que no se conectan con ningún concepto ("extra") y los conceptos que no tienen preguntas ("inactivos"). Encuesta: [aquí]

3) Plan de limpieza de datos (borrador de código):

Tengo un conjunto de datos de encuesta con las siguientes variables: [variables]. Dame una lista de verificación de limpieza de datos y un borrador de código CON LÍNEAS DE COMENTARIOS para [R/Python]: datos faltantes, valores atípicos, registros duplicados, codificación inconsistente. Ejecutaré el código y verificaré el resultado; No hagas los cálculos.

4) Comentario estadístico (hice el cálculo):

Ejecuté un [nombre de la prueba] y obtuve el siguiente resultado: [salida]. Interprete este resultado en un lenguaje sencillo: qué significa en la práctica, distinga entre significación estadística y significación práctica y recuerde qué supuestos deben verificarse. No exageres el resultado; Dime tus límites también.

Aviso débil / Aviso fuerte

Aviso débil:

Calcula las medias de los grupos de estos datos y di cuál es mayor. [500 líneas de datos]

La IA intenta calcular dentro del texto y puede producir números incorrectos. Además, no es fiable responder a la pregunta "¿Existe una diferencia significativa" sin pruebas estadísticas?

Potente mensaje:

Quiero comparar las puntuaciones de dos grupos: una variable continua, dos grupos independientes. (1) ¿Qué prueba estadística es apropiada y por qué? (2) ¿Cuáles son sus supuestos? (3) Borrador de código de comentario para [R/Python]. Haré el cálculo en el programa; Simplemente proporciona el método y el código, no genera números.

La diferencia: la IA ya no se utiliza como una calculadora poco fiable, sino como un asesor de métodos fiable.

División del trabajo en tareas cuantitativas.

Búsqueda

¿Es segura la IA?

como usar

Auditoría de diseño de preguntas

si

Trampas de marcado

Consistencia de escala

si

lista de verificación

código de borrado de datos

Sí (borrador)

Ejecutas el código

Cuenta en texto

no

Nunca confíes

Selección de prueba

si

Explica el método

Comentario final

Sí (soporte)

Depende de usted juzgar

Errores comunes

  • Utilizando directamente el número generado por la IA. El modelo del lenguaje es incorrecto en aritmética; Realice el cálculo en el programa.
  • Hacer una pregunta capciosa. Los adjetivos y suposiciones distorsionan la respuesta.
  • Confundir significación estadística con significación práctica. "Significante" puede ser incluso una pequeña diferencia; Mira el tamaño.
  • Saltándose las suposiciones. Cada prueba tiene requisitos previos; No comentes sin comprobar.
  • Hacer preguntas adicionales. Cada pregunta de la encuesta debe estar vinculada a un concepto; el resto infla los datos.

En resumen

IA en la investigación cuantitativa; Es un gran consultor a la hora de detectar los errores de las preguntas de encuestas, mapear conceptos y preguntas, redactar códigos de análisis y limpieza de datos e interpretar el resultado en un lenguaje sencillo. Pero nunca dejes que la IA haga el cálculo real; El modelo de lenguaje no es una calculadora. Usted elige la prueba, pero la ejecuta en el programa, lee el resultado y distingue entre significación estadística y significación práctica. La IA acelera el método; La responsabilidad del problema y comentario es suya.

Tarea de aplicación

Escribe un borrador de encuesta con 10 preguntas. Tenga la bandera de IA y corrija las preguntas principales, duplicadas y ambiguas con la plantilla "Auditoría de preguntas de encuesta". Luego cree un pequeño conjunto de datos de muestra (20-30 filas) y calcule la media real y los porcentajes en un programa de hoja de cálculo; Proporcione a la IA los mismos datos que el texto, compárelos con los números resultantes e informe la diferencia. Finalmente, interprete el resultado de una prueba con la plantilla de "interpretación de estadísticas".

lista de verificación

  • [] Vinculé cada pregunta de la encuesta a un concepto.
  • [ ] Eliminé preguntas capciosas, dobles y ambiguas.
  • [] Hice el cálculo real en el programa de estadísticas, no en la IA.
  • [] Verifiqué los supuestos de la prueba.
  • [ ] Distinguí la significación estadística de la significación práctica.