La confianza indica con qué fuerza las respuestas que recibiste favorecen a la opción en cabeza, para este número de respuestas. No es la certeza de que esa opción sea objetivamente la mejor. Describe lo que eligió este grupo en esta pregunta.
Con pocas respuestas, una ventaja pequeña puede deberse al azar. Una ventaja fuerte difícilmente se explica solo por azar con una muestra de este tamaño.
Los tres niveles
- Alta: la ventaja es grande para este número de respuestas. Es poco probable que el azar por sí solo la explique. Puedes actuar.
- Media: la opción en cabeza va por delante, pero con estas respuestas la diferencia podría ser azar. Basta para una decisión de poco riesgo.
- Baja: la ventaja es pequeña para este número de respuestas. Trata las opciones como muy parejas.
Cómo la calculamos
Comparamos la diferencia entre las dos primeras opciones con lo que esa diferencia podría variar por azar con este número de respuestas. Es el error estándar de la diferencia entre las dos proporciones.
Una diferencia de unas dos veces y media ese valor o más es Alta. Unas dos veces es Media. Cualquier cosa menor es Baja.
En las preguntas de escala del 1 al 5 usamos una regla más sencilla basada solo en el número de respuestas: 30 o más es Alta, de 15 a 29 es Media y menos es Baja.
La confianza se afianza a medida que llegan respuestas.
Cuando la confianza es baja
- Pregunta a más heads. Más respuestas pueden hacer el resultado más claro. Pregunta a más personas si necesitas más certeza.
- Quita la opción más débil. Con menos opciones, las respuestas se reparten menos.
- Pregunta por qué. Un seguimiento de texto libre a 20 heads de nivel 2 suele explicar por qué la gente no está de acuerdo.
- Acepta el empate. A veces la respuesta honesta es que a la gente le da igual.
La confianza y una línea de Adelante
Si fijas una línea de Adelante en una pregunta de Sí / no, el veredicto no usa el nivel de confianza. Compara el intervalo del 95 % de la parte de Sí con tu línea. Una ventaja puede ser clara mientras el Sí sigue por debajo de tu línea, así que para decidir, fíjate en el veredicto. Consulta leer tus resultados.
Lo que la confianza no te dice
No dice nada sobre si tu pregunta era buena. Una pregunta tendenciosa puede dar una ventaja fuerte a lo que no es. Tampoco te dice que la opción en cabeza ganaría con otro grupo de personas. Consulta escribir buenas preguntas.