Las entradas de registro de decisiones con una predicción escrita mejoran las estimaciones posteriores

Hipótesis

Cuando un equipo registra, junto con cada decisión no trivial, una predicción concreta de su resultado (qué se observará, para cuándo, con un número o un umbral) y una fecha de revisión, y más adelante evalúa esa predicción frente a lo ocurrido, sus estimaciones para decisiones similares se calibran mejor a lo largo de los meses que las de un equipo que registra decisiones sin predicciones. Los registros de decisiones de arquitectura en la forma de Nygard recogen el contexto, la decisión, el estado y las consecuencias; la hipótesis se refiere al efecto adicional de una predicción explícita y evaluable, junto con una revisión programada, para decisiones de cualquier tipo.

Predicción

Al comparar dos periodos, el segundo con entradas de predicción y revisión: la brecha entre el esfuerzo, los plazos o los cambios de métricas previstos y los observados se estrecha; las decisiones revertidas dentro de la ventana de revisión se vuelven menos frecuentes, o las reversiones ocurren antes; la confianza declarada por quienes contribuyen y su tasa de acierto se aproximan entre sí. Los equipos que escriben predicciones pero nunca realizan las revisiones no muestran ningún cambio, lo cual indicaría que el efecto lo produce el paso de evaluación y no el de escribir la predicción.

Prueba propuesta

1. Definir una entrada de registro de decisiones: decisión, alternativas consideradas, resultado observable previsto con un número o un umbral, fecha de revisión, responsable.
2. Hacer que varios equipos mantengan estos registros durante al menos dos trimestres; mantener un grupo de comparación que registre las decisiones solo con su justificación.
3. En cada fecha de revisión, evaluar la predicción (cumplida, fallida, poco clara) y registrar el valor real.
4. Comparar la calibración (confianza declarada frente a tasa de acierto) y el error de predicción entre periodos y entre grupos, controlando el tipo de decisión y el tamaño del equipo.

Estado

No se afirma ningún resultado. Posibles factores de confusión: los equipos dispuestos a escribir predicciones pueden ser ya más disciplinados; un número reducido de decisiones por equipo hace que las estimaciones de calibración sean ruidosas; el efecto puede desaparecer cuando las revisiones no se programan o cuando las predicciones se redactan de forma lo bastante vaga como para ser infalsables.