Preguntas inútiles en un scorecard:detéctalas y córtalas

Para encontrar preguntas inútiles en un scorecard, lee las respuestas pregunta por pregunta. Si una opción concentra el ochenta por ciento o más de las respuestas, la pregunta no separa a nadie y gasta atención sin dar información. Córtala o reescríbela.

Cómo encontrar preguntas inútiles en un scorecard

Escribiste una veintena de preguntas. Te sentías bien con cada una. Algunas no hacen nada.

Una pregunta inútil se ve bien en la página. Está bien redactada, es relevante, encaja con orden en su dimensión. Y casi todo el mundo la responde igual. No te dice nada de nadie. Peor aún, le cuesta a cada persona unos segundos de atención y no le devuelve nada.

No puedes verlo desde tu mesa. Solo se ve en respuestas reales. Así que encontrar preguntas inútiles en un scorecard es un trabajo de lectura, no de escritura.

La regla del ochenta por ciento

La prueba es sencilla. Mira cómo se reparten las respuestas a una pregunta entre sus opciones. Si una opción concentra el ochenta por ciento o más, la pregunta está muerta.

¿Por qué esa línea? Porque una pregunta se gana su sitio dividiendo al grupo. Si casi todos eligen la misma respuesta, la pregunta no distingue a una persona de otra. Suma la misma cantidad a casi todas las puntuaciones. Quítala y la clasificación apenas se mueve.

Una distribución repartida es una pregunta haciendo su trabajo. Dos o tres opciones con una parte real cada una significan que la gente difiere aquí, y tu puntuación lo está captando.

No esperes la perfección. La guía sugiere hacer esta lectura tras los primeros cincuenta completados, y luego cada mes. Antes de eso, estás mirando ruido.

Guía gratuita · 28 páginasConstruye la versión honesta.Una evaluación que separa a las personas, dice algo cierto y te da un motivo para iniciar la conversación.Consigue la guía gratuita →

Nada lo calculará por ti

Esto quizá te sorprenda. Supondrías que tu herramienta avisa de las preguntas inútiles. No lo hace.

La guía revisó toda la capa de analítica de un producto de evaluación maduro. Ninguna correlación ítem-total. Ningún coeficiente de fiabilidad. Ningún índice de discriminación. Ni uno. Todas las plataformas de la categoría te muestran distribuciones y te dejan interpretarlas.

Es una buena noticia para ti, curiosamente. Significa que no te falta ningún panel mágico. El método es mirar a ojo un gráfico por pregunta y preguntarse si está desequilibrado. Puedes hacerlo en una tarde.

También significa que la habilidad está en saber qué estás mirando. Quien construye un scorecard adivina. Quien construye uno bueno lee.

Cuatro formas en que aparecen las preguntas inútiles en un scorecard

Las respuestas desequilibradas son la señal principal. Pero las preguntas mueren por motivos distintos, y el arreglo depende de la causa.

El deslizador merece una nota. Un deslizador siempre tiene una posición. Así que cuenta como contestado y puntúa media nota antes de que nadie lo toque. En tus datos es indistinguible de una persona que lo pensó y eligió el centro. Si usaste deslizadores, trata sus resultados con sospecha.

La de la escala es más silenciosa. Mete una pregunta de sí o no en un scorecard que va de cero a cuatro y puede quedarse en silencio con casi toda la dimensión, porque el sí puntúa cien junto a vecinas que llegan como mucho a cuatro. Nada da error. Solo lo notarías al ver que una dimensión se mueve cada vez que se mueve una pregunta. El arreglo está en el diseño, que se trata en cómo ponderar las preguntas del scorecard.

Por qué cortar es la mejor edición que harás

Reescribir parece productivo. Cortar es más valioso.

Cortar una pregunta inútil hace dos cosas a la vez. Acorta la evaluación, lo que sube la tasa de finalización. Y elimina ruido, lo que afila cada resultado. Pocas ediciones pagan dos veces.

Para un operador en solitario hay un tercer beneficio: menos que mantener. Cada pregunta es algo que escribiste, tradujiste y defendiste. Menos preguntas significa menos cosas que pueden romperse.

Hay también una consideración oculta. La longitud decide qué tipo de scorecard tienes. La guía señala que los tamaños se agrupan con fuerza: de veinte a veintinueve preguntas para algo que regalas, y de ciento veinticinco a ciento cuarenta y cinco para algo que cobras. Si construyes el gratuito, cada pregunta que cortas te mantiene dentro del tamaño que funciona.

La pregunta que hacerle a cada superviviente es: ¿podría esto dividir de forma plausible al grupo? Si la respuesta honesta es "está por completitud", esa es tu señal.

Evaluación gratuita¿Hasta qué punto estás atrapado?Haz el Índice de Asfixia Corporativa, la evaluación gratuita para saber si estás listo para ser solopreneur.Hacer la evaluación →

Corta con cuidado, porque nada se recalcula

Ahora la parte que muerde. Las puntuaciones se escriben una vez, cuando alguien completa el scorecard. No hay repuntuación. Hagas lo que hagas, los encuestados pasados conservan el resultado que les dieron.

Así que cortar una pregunta tras el lanzamiento no reescribe la historia. Quienes la respondieron antes siguen llevando su aportación. Quien haga después la versión más corta se mide de otra manera. Tus números vienen ahora de dos instrumentos ligeramente distintos, y nada registra cuál hizo cada persona.

Eso lleva a unos cuantos hábitos:

• Ajusta antes de llevar tráfico. El momento más barato para cortar es antes de que lo haga alguien serio.
• Agrupa tus cambios. Haz varios cortes de una vez en lugar de uno por semana.
• Fecha cada cambio en tus notas. El sistema no lo hará por ti.
• Nunca leas una tendencia a través de una edición. Un cambio tras cortar una pregunta puede ser el corte, no la audiencia.

El enunciado de la pregunta lo puedes editar sin riesgo. El de las opciones no. Cambiar una opción tras el lanzamiento es una versión nueva del instrumento, no una edición, porque puede romper traducciones y a quien va a medias. Si quieres reescribir una pregunta inútil en lugar de cortarla, cambia el texto de la pregunta y deja sus opciones en paz, o trátalo como una versión nueva.

Si cortar deja una dimensión escasa, el problema puede ser mayor que una pregunta. Cómo calibrar un scorecard cubre cómo leer la dispersión de una dimensión entera y qué hacer cuando nunca cambiará el consejo de nadie.

Una tarde de lectura

1. Espera a unos cincuenta completados. Menos que eso es ruido.
2. Abre las respuestas pregunta por pregunta. Anota las que tengan una opción en el ochenta por ciento o más.
3. Clasifica cada pregunta inútil por su causa. Demasiado fácil, señala la respuesta, deslizador, desajuste de escala.
4. Corta lo que puedas. Reescribe solo lo que debas.
5. Anota la fecha y el cambio en tus notas. Luego déjalo en paz un mes.

Antes de empezar a cortar, comprueba que las preguntas que conservas alimentan algo. Una pregunta con buen reparto y sin consejo detrás es una versión más pequeña del mismo problema, que trata cómo escribir un plan de acción del scorecard.

Guía gratuita · 28 páginasConstruye la versión honesta.Una evaluación que separa a las personas, dice algo cierto y te da un motivo para iniciar la conversación.Consigue la guía gratuita →

Cómo es una pregunta viva

Ayuda conocer el objetivo. Una pregunta sana tiene respuestas repartidas entre sus opciones. No necesariamente por igual. Pero suficiente gente elige cada una de dos o tres opciones como para que la elección signifique algo sobre ella. Una buena pregunta pregunta por comportamientos y por lo que existe, no por opiniones o intenciones. "¿Tienes un proceso escrito para incorporar a un cliente nuevo?" divide a un grupo, porque unos lo tienen y otros no. "¿Te importa la experiencia del cliente?" no, porque todos dicen que sí. La segunda es la fuente más común de preguntas inútiles: pide una actitud cuando debería pedir un hecho.

Comprueba también que ninguna pregunta señale su propia respuesta correcta. Si una persona puede adivinar qué opción quieres, la elegirá, y la pregunta muere de cortesía. La cura es describir lo que la gente hace de verdad en cada nivel, en términos sencillos, para que cada opción se lea como una situación real y no como una nota buena o mala.

Cuando te atasques, pregúntate qué querrías saber de un desconocido antes de hablar con él. Las preguntas que usarías de verdad para distinguir una conversación de otra están vivas. Las que solo añadiste para parecer exhaustivo son las que se convierten en preguntas inútiles en un scorecard.

Evaluación gratuita¿Hasta qué punto estás atrapado?Haz el Índice de Asfixia Corporativa, la evaluación gratuita para saber si estás listo para ser solopreneur.Hacer la evaluación →

Preguntas frecuentes

¿Cómo sé que una pregunta está muerta?

Mira cómo se reparten las respuestas entre sus opciones. Si una opción concentra el ochenta por ciento o más, la pregunta no separa a nadie. Una pregunta sana tiene las respuestas repartidas entre más de una opción.

¿Avisa mi herramienta de scorecard de las preguntas muertas?

Probablemente no. La guía revisó la analítica de un producto de evaluación maduro y no encontró correlación ítem-total, ni coeficiente de fiabilidad, ni índice de discriminación. Las distribuciones las lees tú.

¿Cuándo debo buscar preguntas inútiles en un scorecard?

Tras los primeros cincuenta completados, y luego cada mes. Antes, los números son demasiado escasos para fiarse. Hazlo antes de apretar con el tráfico, porque los cambios posteriores enturbian tu historial.

¿Cortar una pregunta cambiará los resultados antiguos?

No. Las puntuaciones se escriben una vez, al completar, y nada se recalcula. Quienes ya terminaron conservan su resultado. Fecha el cambio en tus notas para no leer nunca una tendencia a través de él.

El método completo, con las listas de verificación, está en El Playbook del cuestionario de diagnóstico, una guía gratuita de 28 páginas.