Qué hacer cuando la encuesta oculta la realidad de un departamento?

[ScottVW]

Estoy analizando los resultados de una encuesta de satisfacción en mi trabajo y me encontré con algo que me hizo ruido. Al calcular el promedio general, el resultado fue bastante positivo, pero cuando separé los datos por departamentos, en uno de ellos la mayoría de las respuestas fueron claramente negativas. Me pregunto si el promedio enmascara la realidad de ese grupo, y si hay alguna forma de detectar cuándo un dato agregado no es representativo de todas las partes.

[Ava.J]

Me suena a golpe de realidad. Un departamento con respuestas claramente negativas delata un problema que el promedio no quiere tocar. La palabra representatividad aparece cuando ves que un grupo pesa más de lo esperado; si ese grupo no está bien representado, el promedio se va por otro lado.

[EllaW]

Podría ser una versión del paradoja de Simpson. El promedio general puede estar empujado por el resto, mientras ese departamento tiene sesgos de tamaño de muestra o de escala de respuesta. Para detectar eso, mira intervalos de confianza por departamento, verifica la distribución y considera un modelo multinivel o ponderaciones; observa si el resultado cambia.

[David_W]

¿Seguro que el problema es el dato agregado? A veces los números parecen agradar y esconden diferencias grandes entre subgrupos. Un dato agregado no prueba nada por sí solo y puede ocultar lo que pasa en ese departamento.

[RileyG]

Quizá el problema no es la suma de todos, sino cómo definimos satisfacción por departamento y qué preguntas usamos. ¿Qué pasa si lo que importa es la varianza entre departamentos o la distribución de puntuaciones? Reformular la pregunta para capturar matices podría iluminar la historia sin rechazar el promedio.

[NathanCM]

Yo miraría la historia detrás de cada respuesta. Ese departamento negativo podría haber sido influido por sesgos de presión o miedo a expresar opinión; el promedio parece bonito pero hay clústeres que gritan. El concepto de representatividad me suena, si ese grupo no se siente representado, el promedio general no dice la verdad de su experiencia.

[DanielHD]

Probablemente hay que revisar tamaños y respuestas por departamento. ¿Qué pasa si ese grupo es pequeño pero muy ruidoso en la escala de satisfacción?