Diseña evaluaciones que midan lo que se aprendió

Qué incluye: cuatro piezas, en este orden

Cada pieza se abre cuando terminas la anterior. Es lo que hace que la cápsula se pueda jugar con criterio y no a tientas.

1. Pieza 1 · Video5 min

   «El curso que todos aprobaron»

   El caso

   El 97 %, las dos lecturas que el reporte no distingue, por qué pasa ahora que escribir ítems es gratis, qué preguntan esas veinte, y el problema peor: catorce son adivinables.

   El criterio

   De dónde sale el ítem, la tesis, las cuatro señales, y la prueba con personas que cierra la discusión.

   Las piezas

   Distractores como diagnóstico, la rúbrica y el acuerdo entre correctores, los tres desenlaces.

2. Pieza 2 · Guía7 lecciones

   7 lecciones navegables, con juegos y chequeos

   1. 1

      Aprobar no es haber aprendido5 min

      Reconocer por qué una tasa de aprobación alta no es un resultado, y qué pregunta reemplaza a «¿cuántos aprobaron?».

   2. 2

      El ítem que se puede adivinar8 min

      Detectar las señales que hacen adivinable un ítem, aplicar la prueba de adivinabilidad y pedir ítems situacionales desde el objetivo.

   3. 3

      Distractores que son diagnóstico8 min

      Escribir distractores que representen errores reales con su razonamiento declarado, y leer el patrón de respuestas equivocadas como información sobre qué arreglar en el curso.

   4. 4

      Rúbricas que dos correctores aplican igual8 min

      Escribir niveles de rúbrica descritos por evidencia observable y comprobar el acuerdo entre correctores antes de usarla.

   5. 5

      Cuando una decisión mide más que una pregunta7 min

      Reconocer qué objetivos se evalúan mejor con un escenario con consecuencia que con un ítem, y leer el recorrido de un escenario como evidencia.

   6. 6

      El caso: el curso que todos aprobaron8 min

      Integrar las ideas de este curso en las decisiones de un caso completo: la semana del piloto de Marcela.

   7. 7

      Llévatelo a tu trabajo4 min

      Auditar una evaluación existente en veinte minutos y dejar instalada la prueba de adivinabilidad en tu proceso.

3. Pieza 3 · Cápsula4 decisiones · 9 caminos

   «El curso que todos aprobaron»

   Veinte preguntas, noventa y siete por ciento de aprobación y una auditoría que pregunta cómo lo saben.

   Un caso ramificado donde tú decides qué hace Marcela: 4 decisiones encadenadas, 9 caminos posibles y 3 desenlaces distintos. Cada elección tiene consecuencia; no es un quiz con otro nombre.

4. Pieza 4 · Prompts4 prompts

   4 prompts listos para copiar

   1. 1

      Ítems situacionales, con auditoría de adivinabilidad

      Escribe ítems donde el enunciado describe lo que la persona tiene delante y pregunta qué hace, con distractores que son errores reales — y después audita sus propios ítems buscando las cuatro señales que los hacen adivinables.

   2. 2

      Distractores con hipótesis, sobre ítems que ya tienes

      Toma ítems ya escritos —tuyos, heredados o de un banco— y reescribe los distractores para que cada uno represente un error real, de modo que una respuesta equivocada te diga qué arreglar en el curso.

   3. 3

      Rúbrica por conducta, con respuestas de ejemplo

      Convierte un objetivo en una rúbrica cuyos niveles se describen por lo que se ve, no por cuán bien está — y genera respuestas falsas de ejemplo para cada nivel, que sirven para capacitar correctores y para probar la rúbrica antes de tener respuestas reales.

   4. 4

      Auditar una evaluación que ya corrió

      Toma un examen existente y te dice qué mide de verdad.