Unidade 8 / 12

Análise de entrevistas e pesquisas: dos dados qualitativos ao tema

Ganhos:

  • Capacidade de dividir transcrições de entrevistas e respostas de pesquisas abertas em temas com inteligência artificial e apoiá-las com citações de evidências
  • Capacidade de resumir dados quantitativos de pesquisas e evitar interpretações enganosas (amostra pequena, pergunta indutora, viés de seleção)
  • Capacidade de trabalhar de forma ética e em conformidade com KVKK, protegendo a confidencialidade dos participantes e anonimizando as transcrições

Os insights mais ricos em consultoria muitas vezes não estão nos gráficos, mas no que as pessoas dizem. Uma entrevista com um gerente, respostas abertas a uma pesquisa com clientes, anotações de uma visita de campo... Esses são dados não numéricos (qualitativos) e levam horas para serem lidos, codificados e divididos em temas. A inteligência artificial acelera muito esse trabalho: ela divide 30 transcrições de entrevistas em temas em minutos, encontrando padrões recorrentes. Mas há dois perigos: o modelo pode “inventar” um tema (adicionar um comentário que não esteja na transcrição) e a confidencialidade do participante pode ser facilmente violada. Nesta unidade, aprenderemos a analisar dados qualitativos de maneira segura e baseada em evidências.

Análise qualitativa: da codificação ao tema

A análise qualitativa tem três etapas. Codificação primeiro: cada afirmação recebe um rótulo curto (“reclamação de preço”, “elogios na entrega”). Em seguida, tematização: códigos semelhantes são reunidos em um tema (“insatisfação operacional”). Ao final, comentário: estabelece-se a relação entre os temas e a camada “e daí”. A IA é muito rápida nas duas primeiras etapas; A terceira etapa requer o julgamento do advogado.

A garantia mais crítica é esta: cada tema deve ser apoiado por uma citação literal. Isto confirma que o tema realmente vem dos dados; O tema entre aspas traz o risco de alucinação.

Sua função: analista de pesquisa qualitativa.Abaixo está uma transcrição anônima de 12 entrevistas com clientes (rotuladas P1, P2...).Tarefa:1) Extrair temas recorrentes (até 7 temas).2) Para cada tema: quantos participantes viram + 2 citações literais (com código do participante).3) Mostrar separadamente declarações que apoiam e CONFLITAM o tema.Regras:- Não adicione opiniões que não estejam na transcrição; Cada tema deverá ser comprovado com citação. - Não produza informações de identificação além dos códigos dos participantes. - Liste as opiniões individuais “minoritárias, mas importantes” separadamente no final (vozes dissidentes).

Outra técnica poderosa é pedir ao modelo para codificar com categorias fixas especificadas por você, em vez de primeiro configurar seu próprio esquema de código. Por exemplo, se você fornecer temas predefinidos em um estudo de satisfação do cliente, como “preço, qualidade do produto, entrega, suporte, facilidade de uso”, diferentes transcrições se tornarão comparáveis ​​e o modelo será impedido de inventar nomes diferentes a cada vez. A extração de tema livre é adequada para descoberta, enquanto a codificação de categoria fixa é adequada para comparação e medição; Para a maioria dos projetos, usar os dois juntos funciona melhor: primeiro a exploração gratuita e depois a digitalização com um esquema fixo.

Sua função: assistente de codificação qualitativa. Categorias fixas: [preço, qualidade, entrega, suporte, facilidade de uso, outros]. Tarefa: Atribua cada resposta aberta abaixo a uma ou mais destas categorias. - Escreva a frase-gatilho na resposta (literalmente) ao lado de cada tarefa. - Marque se a resposta é positiva ou negativa em termos de sentimento. Adicionando comentários não incluídos na resposta.

Dica: É muito valioso pedir opiniões “minoritárias, mas importantes” separadamente. Um alerta crítico, mas formulado de uma só vez (por exemplo, um único grande cliente dizendo “estamos pensando em renovar o contrato”) se perde na maioria dos temas; permanece visível quando listado separadamente.

Privacidade e anonimato

As transcrições das entrevistas são dados pessoais e muitas vezes sensíveis (reclamações de funcionários, críticas de gerentes). Antes de carregá-los em uma ferramenta de IA, é essencial torná-los anônimos: nomes, títulos, detalhes distintivos internos são substituídos pelo número do código (K1, K2...). Muitas vezes é prometido ao participante que “o que você disser será relatado anonimamente”; O equivalente técnico desta frase é o anonimato.

Tipo de dados

Risco

precaução

Nome/cargo do participante

divulgação de identidade

Substitua pelo número do código

Detalhe interno

diagnóstico indireto

Generalizar ou mascarar

visão sensível

Risco de retaliação

Correspondência individual com relatório em massa

Gravação de áudio/vídeo

maior sensibilidade

Renderize na ferramenta aprovada e exclua

Você pode fazer com que o modelo realize o anonimato como uma etapa preliminar antes de enviar as transcrições para a ferramenta; Mas não se esqueça de verificar visualmente a saída:

Sua função: editor de privacidade. Prepare a seguinte transcrição da entrevista para análise; faça o seguinte mascaramento:- Torne todos os nomes de contato K1, K2...- Generalize indiretamente identificando detalhes como cargo, departamento, localização ("O único engenheiro estrangeiro em P&D" → "um engenheiro").- Remova nomes de empresas/clientes. Forneça apenas o texto mascarado; Liste resumidamente que tipo de informação você está mascarando e por quê.

Cuidado: Dizer “Anônimo” não é suficiente. A frase “A única gerente responsável pelo marketing” identifica a pessoa, embora seu nome não esteja escrito. O anonimato também deve incluir todos os detalhes indiretamente identificáveis. A violação do KVKK e a perda de confiança dos participantes começam aqui.

Interpretando dados quantitativos da pesquisa

A inteligência artificial produz um resumo e detalhamento dos resultados fechados (numéricos) da pesquisa. Mas a análise quantitativa tem as suas próprias armadilhas e o modelo pode ignorá-las:

  • Amostra pequena: Dizer “61% dos clientes estão satisfeitos” em uma pesquisa com 18 pessoas é enganoso; Se a amostra for pequena, o número bruto e a incerteza devem ser discutidos, não a percentagem.
  • Pergunta principal: "Qual é seu nível de satisfação com nosso excelente serviço?" A pergunta incorpora a resposta; O resultado é tendencioso.
  • Viés de seleção: se apenas os clientes mais satisfeitos ou mais irritados respondessem, o resultado não seria representativo do universo.

Antes de resumir os resultados desta pesquisa, faça uma verificação metodológica: - O tamanho da amostra é suficiente para apresentar os resultados em percentuais? - Existem declarações principais/principais nas perguntas? Assinale.- Qual é a taxa de resposta e o risco de viés de seleção? Fornecer apenas relatório de auditoria; Em seguida, resumiremos isso em uma mensagem separada.

três mini cases

Caso 1 — Tema inventado capturado. Um consultor atribui 20 entrevistas ao modelo; o modelo extrai o tema “os participantes querem trabalhar remotamente”. O consultor pede um orçamento; O modelo só consegue encontrar 1 citação ambígua. O tema não existia de fato, o modelo surgiu a partir da tendência geral. Se não houvesse exigência de citação, uma conclusão incorreta seria incluída no relatório.

Caso 2 — Diagnóstico indireto. Em um projeto de satisfação de funcionários, a transcrição inclui “O único engenheiro estrangeiro em P&D disse isso”. Não há nome, mas a pessoa é clara; Uma vez que a denúncia chega ao gestor, existe o risco de retaliação. O consultor teve que generalizar desde o início todos os detalhes distintivos (“um engenheiro”).

Caso 3 — Armadilha para amostras pequenas. Em um teste de produto, 15 de 22 usuários gostaram; o modelo diz “68% de satisfação” e é colocado no slide. O conselho de investimentos objeta: “22 pessoas não representam o universo”. O consultor reescreve honestamente o resultado como "15 de 22 usuários positivos; é necessária uma grande amostra indicativa e confirmatória"; a confiança retorna.

Alerta fraco / Alerta forte

Alerta fraco:

Leia essas entrevistas e extraia as principais conclusões.

O modelo produz temas sem citações, sem evidências; O risco de fabricação e confidencialidade é alto.

Alerta poderoso:

Sua função: analista qualitativo. Transcrição abaixo, anonimizada (K1..Kn).Tarefa: Até 7 temas; número de participantes para cada + 2 citações literais (com código); declarações de apoio e contraditórias separadamente; lista separada de opiniões minoritárias, mas críticas. Regras: adicionar opiniões que não estão na transcrição; geração de identidade; Não dê um tema sem aspas; marque o tema sobre o qual você não tem certeza como "evidência fraca".

Saturação e peso dos temas

Na análise qualitativa, dois conceitos determinam a qualidade da interpretação. A primeira é a saturação: diz-se que os dados estão “saturados” quando novas entrevistas já não produzem novos temas; Este é um sinal de que a amostra é suficiente. Se novos temas ainda surgirem na 8ª entrevista, serão necessárias mais entrevistas. Em segundo lugar, o peso dos temas: quantas pessoas veem um tema e a importância desse tema são coisas diferentes. Um pequeno inconveniente mencionado por cinco pessoas e o risco de rescisão do contrato mencionado por uma pessoa não são iguais em frequência, mas este último pode ser muito mais crítico em importância. Portanto, classificar os temas apenas por frequência é enganoso; Avalie cada tema em termos de “quantas pessoas” e “quão importante”. Fazer com que a IA diga “classifique esses temas em duas colunas separadas de frequência e impacto potencial nos negócios” torna essa distinção visível; Você faz o julgamento do impacto nos negócios.

Erros comuns

  • Aceitação do tema sem aspas. Cada tema deve ser evidenciado por uma citação literal da transcrição; Caso contrário, existe o risco de alucinação.
  • Tornando o anonimato superficial. Não basta apagar o nome; Detalhes de identificação indireta também devem ser mascarados.
  • Apresentando pequena amostra com porcentagem. Com um número pequeno de participantes, devem ser discutidos números brutos e incertezas, e não percentagens.
  • Ignorando a pergunta principal. O resultado das perguntas indutoras é tendencioso; Confira a metodologia.
  • Perdendo valores discrepantes. Uma vez proferido, o alerta crítico é engolido pelos temas majoritários; listar separadamente.
  • Misturando quantitativo e qualitativo. Processe comentários abertos com resultados numéricos de diferentes maneiras.

Em resumo

Os dados qualitativos são a fonte mais rica de insights em consultoria, e a inteligência artificial economiza horas em codificação e temas. Mas cada tema deve ser evidenciado com citações literais, a confidencialidade dos participantes deve ser totalmente protegida, incluindo a identificação indireta, e as armadilhas metodológicas, como amostragem, preconceito nas perguntas e seleção, devem ser controladas em pesquisas quantitativas. O modelo é um leitor e etiquetador rápido; é função do consultor verificar as evidências, manter a confidencialidade e estabelecer a camada "e daí".

Tarefa de aplicativo

Prepare várias transcrições de entrevistas (ou respostas abertas a pesquisas), reais ou representativas, e torne-as anônimas primeiro (incluindo nome e identificação indireta). Extraia temas, citações, declarações conflitantes e vozes dissidentes com forte orientação qualitativa. Verifique a citação de pelo menos um tema na transcrição para verificar se ele realmente existe. Em seguida, faça uma pequena pesquisa quantitativa e avalie o viés da amostra e das perguntas, solicitando uma auditoria metodológica.

lista de verificação

  • [ ] Anonimizei as transcrições, incluindo nome e identificação indireta.
  • [ ] Evidenciei cada tema com uma citação literal.
  • [ ] Mostrei expressões conflitantes e vozes contraditórias separadamente.
  • [ ] Na pequena amostra, usei números brutos e incerteza em vez de porcentagens.
  • [] Marquei as perguntas principais.
  • [ ] Avaliei o risco de viés de seleção.
  • [ ] Denunciei comentários delicados coletivamente, sem combiná-los com o indivíduo.