La mayoría de las preguntas malas de un cuestionario no están equivocadas. Son injustas: redactadas de forma que alguien que de verdad domina la materia falla igualmente, porque la pregunta estaba examinando la lectura atenta en lugar del tema. Ese fallo es peor en un peaje que en un juego, porque en un juego perder un punto se encoge de hombros, y en un peaje perder un punto por un tecnicismo es un motivo para desactivar el bloqueador. Escribimos normas para que eso no pasara.
Un dato, una habilidad
Toda pregunta se gana su sitio examinando exactamente una cosa. No un «indica el año, el general y el resultado» apilado en una sola pregunta de varias partes que en realidad son tres preguntas disfrazadas con un abrigo, sino un dato limpio o una habilidad limpia, de forma que una respuesta equivocada te diga algo concreto en lugar de «en algún punto de todo ese montón, has fallado». Una pregunta que fallas te dice con precisión qué mirar a continuación. Una pregunta que examina cuatro cosas a la vez solo hace que te sientas mal por algo sin especificar.
Sin trampas de redacción
Dobles negaciones, un «¿cuál de las siguientes NO es...?» enterrado en una pared de opciones que suenan parecido, respuestas que dependen de una coma: nada de eso. Una pregunta escrita para que se lea mal no es más difícil, es simplemente más cruel, y la crueldad no enseña nada a cambio. Si acertar una pregunta exige leer la frase dos veces, es la frase la que necesita reescribirse, no el lector.
Sin trivialidades porque sí
Existe un tipo concreto de pregunta que solo existe para ser oscura: una fecha de nota al pie, un nombre que nadie volverá a necesitar jamás, correcta pero irrelevante. Es fácil de escribir, porque «difícil de saber» y «que merece la pena saber» se confunden constantemente, y solo una de las dos tiene sitio en un banco que se supone que debe dejarte algo. Preferimos preguntar algo que de verdad vayas a volver a usar que algo que solo demuestra que una vez leíste un párrafo muy concreto.
De lo que todavía no estamos seguros
Diez preguntas por tema no es mucho margen para examinar un dato, una habilidad, con limpieza, sin repetir la misma forma de pregunta con los números cambiados. Algunos temas lo llevan bien. Otros empiezan a sentirse escasos ya por la pregunta ocho, y no creemos que rellenarlos con una pregunta trampa solo para llegar a un número redondo sea el intercambio correcto: un tema con nueve preguntas honestas gana a uno con diez donde la décima es una trampa. Todavía estamos averiguando dónde está exactamente esa línea.