Ley de Goodhart

01Lo que dice realmente

Charles Goodhart, entonces asesor del Banco de Inglaterra, escribió el original en 1975 para una conferencia del Banco de la Reserva de Australia. Su formulación es más estrecha y más cuidadosa que la versión que se cita: «Cualquier regularidad estadística observada tenderá a derrumbarse una vez que se ejerza presión sobre ella con fines de control.» Hablaba de agregados monetarios. La relación entre la masa monetaria y la inflación se sostuvo mientras el Banco la observaba y se rompió cuando el Banco empezó a gobernarse por ella.

La frase famosa no es suya. La antropóloga Marilyn Strathern la condensó en 1997, escribiendo sobre la evaluación de la investigación en las universidades británicas: «Cuando una medida se convierte en objetivo, deja de ser una buena medida.» Esa es la forma que viajó, y conviene saber que es una paráfrasis: el original es una afirmación sobre relaciones estadísticas bajo presión de control, no un refrán sobre KPI.

Cualquier regularidad estadística observada tenderá a derrumbarse una vez que se ejerza presión sobre ella con fines de control. — Charles Goodhart, 1975

02Por qué ocurre, mecánicamente

Una regularidad no es una ley de la naturaleza. Es un patrón producido por personas que actúan en las condiciones del momento, y la propia observación es una de esas condiciones. Gobernarse por el patrón cambia lo que esas personas hacen, así que el patrón que justificó el gobierno no es el patrón con el que ahora se gobierna. Robert Lucas hizo el mismo argumento sobre los modelos econométricos en 1976, un año después de Goodhart: una relación estimada bajo un régimen de política no puede darse por superviviente a su uso para fijar política.

Los incentivos son la versión más ruidosa de esto, no la totalidad. Nadie puede medir lo que le importa — la confianza, la utilidad, si una respuesta sirvió — así que se elige un sustituto porque correlaciona con la cosa en condiciones ordinarias. Añade una recompensa y la ruta más barata al número rara vez pasa por la cosa: la ruta honesta produce el número como subproducto de un trabajo caro, la directa produce el número y nada más. Pero una regularidad también puede romperse sin que se pague a nadie, porque lo que la sostenía nunca fue lo que todos creían, y gobernarse por ella es lo que lo dejó al descubierto.

• Una regularidad se sostiene bajo cierto conjunto de condiciones, y ser observada es una de ellas.
• Gobernarse por ella cambia esas condiciones, así que la regularidad que mediste no es la que ahora usas.
• Una recompensa lo hace rápido y visible: la forma más barata de mover un sustituto rara vez es mover la cosa.
• Pero el derrumbe no requiere una prima. Solo requiere que alguien se apoye en la relación.

03La búsqueda ya lo ha vivido tres veces

En este sector no es una analogía: es su propia historia, y cada ronda costó una reconstrucción.

PageRank contaba enlaces. Un enlace era una cita, y las citas eran un sustituto decente del prestigio, hasta que un enlace tuvo precio. Granjas de enlaces, intercambios recíprocos, enlaces pagados y redes privadas de blogs salieron directamente de ahí, y Google gastó años y dos sistemas con nombre en combatir las consecuencias: Panda en febrero de 2011 contra el contenido vacío, Penguin en abril de 2012 contra los enlaces manipulados.

La extensión del texto y la cobertura de palabras clave pasaron a ser el objetivo. El sustituto decía que una página exhaustiva cubre su tema; la ruta barata era cubrir el tema largamente sin saber nada, y las granjas de contenido lo industrializaron.

Se midió la interacción. Tiempo en página, clics, sesiones: sustitutos razonables de un lector bien servido. Con precio, producen clickbait, indignación, paginación troceada y scroll infinito, nada de lo cual eligió nadie como meta.

04Y está volviendo a ocurrir, ahora mismo

Los asistentes citan fuentes, así que las citas se cuentan. Eso convierte una cita en objetivo, y a su alrededor se monta la misma maquinaria: páginas escritas para ser citables en vez de para ser correctas, fuentes que se citan entre sí en círculo, texto moldeado para un sistema de recuperación y no para un lector.

Aquí no somos espectadores. Este producto informa de puntuaciones de visibilidad, cuota de citas y cuota de voz, y todas ellas son sustitutos que se doblarán si se usan como cupo. Un número en un panel es una descripción; en cuanto el trimestre de alguien depende de él, se convierte en objetivo y esta ley se le aplica. Decirlo en la página que define la ley es lo mínimo.

• Se cuentan las citas → granjas de citas y fuentes circulares.
• Se cuentan las menciones de marca → menciones fabricadas donde no hay lector.
• Una puntuación de visibilidad convertida en cupo → páginas escritas para quien puntúa.

05A escala de empresa

Una organización grande no se ve a sí misma con los ojos. Se ve a través de sus medidas, y la correspondencia entre una medida y un estado de cosas es su vista. Un objetivo fijado arriba y respaldado por la evaluación convierte cada una de esas correspondencias en una palanca — y una palanca no es un indicador.

El efecto se multiplica al bajar. Una persona fija el objetivo; cientos buscan la ruta más barata hacia él, cada una en su área y con ingenio. Una organización es un optimizador muy eficiente de lo que de verdad recompensa, que rara vez es lo que dice el documento de estrategia.

Lo primero que se pierde no son los ingresos: es la capacidad de ver — y el daño al negocio llega después, con retraso, que es justo lo que hace difícil atraparlo. Cuando se mueven los números que importan, los instrumentos que habrían explicado por qué llevan un año siendo poco fiables, y nadie sabe decir cuándo dejaron de merecer confianza. La reparación tarda más que la rotura, porque la confianza en una medida es retrospectiva: solo se gana con una racha de meses en los que la medida y la realidad coincidieron.

El calendario es la parte cruel, y es la razón de que sea tan difícil resistirse. El primer trimestre suele ser genuinamente bueno. Las rutas baratas hacia el número no se han agotado, la holgura del sistema es holgura real, y la cifra se mueve. El segundo es todavía mejor — y para entonces la subida se lee como prueba de que el objetivo era el correcto, así que la presión se sube en vez de cuestionarse. La factura llega el año siguiente: las rutas baratas están gastadas, la medida dejó de corresponder a nada hace meses, y ya nadie puede decir cuáles de los últimos seis trimestres fueron reales. Lo mala que sea depende de qué parte del negocio se gobernaba con ese único número. Para una empresa que no se gobernaba con nada más, aquí es donde acaba.

• La vista de una empresa es la correspondencia entre sus medidas y el mundo.
• Un objetivo convierte una correspondencia en palanca, y una palanca no se lee.
• Una persona lo fija; cientos lo optimizan, cada una por su ruta local más barata.
• Primero llega la ceguera y el daño al negocio después — por eso se detecta tarde.

06El ejemplo que está ocurriendo ahora mismo

El coste de personal se correlacionaba con algo real: la capacidad de la empresa para hacer el trabajo. En cuanto «recortar la nómina con IA» pasó a ser el objetivo, la correlación se rompió. La cifra de coste baja honestamente y el informe dice la verdad, pero ya no describe la capacidad: describe el esfuerzo dedicado a reducirla.

El primer trimestre es genuinamente bueno, y no es una ilusión. Toda organización arrastra holgura real: trabajo que debería haberse automatizado hace cinco años. Las rutas baratas existen, se toman, y el número se mueve por buenas razones. El segundo trimestre es aún mejor, porque el primero se leyó como prueba de que el rumbo era el correcto y se subió la presión. Después las rutas baratas se agotan, y la presión no.

Lo que se recorta entonces no es la ejecución de tareas. Son las personas que sostenían el contexto: por qué está construido así, qué se intentó y por qué falló, quién decide de verdad en este mercado, dónde deja de aplicarse la regla. Nada de eso está en un ticket, porque no es trabajo: es el poso de una década de fracasos en los que ningún modelo estuvo presente. Un modelo hace de maravilla lo que ya está formulado. No advierte que la pregunta es la equivocada, y nunca entra a decir que el mercado se movió hace seis meses. Una empresa que ha perdido a esa gente sigue ejecutando la estrategia anterior de forma impecable y barata, que es justamente por lo que no nota que la estrategia está muerta.

La pérdida no aparece como una caída. Aparece como silencio: ninguna dirección nueva, el producto viviendo de lo que ya tenía, cada trimestre parecido al anterior — y un competidor que conservó a esa gente apareciendo en un nicho en el que nadie lo vio entrar.

• El coste de personal era un sustituto de la capacidad. Convertido en objetivo, solo mide el esfuerzo por recortarlo.
• Los dos primeros trimestres son genuinamente buenos, porque la holgura es real — y eso se lee como confirmación.
• Lo siguiente en caer es el contexto: el conocimiento no escrito que permite notar que la propia estrategia ha caducado.
• «Este trabajo ya no necesita una persona» es una decisión sobre el trabajo. «Menos 30% de nómina para diciembre» es una decisión sobre un número. A dos trimestres vista, desde fuera son idénticas.

07Cómo mantener honesta una medida

La ley no es un argumento contra medir. Es un argumento contra un número único — y un KPI suele ser exactamente eso. Una sola medida en la que uno se apoya es justo el caso que describió Goodhart: una regularidad bajo presión de control, derrumbándose.

Lo que sobrevive es una cesta de medidas, cada una imprecisa, que deberían moverse juntas. Ninguna es la verdad; la señal es su acuerdo y la alarma es su desacuerdo. Si en un trimestre suben a la vez la cuota de citas, el tráfico de referencia, las búsquedas de marca y los lectores que vuelven, probablemente está pasando algo real. Si la cuota de citas sube sola y las otras tres no se mueven, no está pasando nada real y lo has descubierto pronto. Esa es una comprobación que ningún número aislado puede hacer, y es barata: ya recoges las cuatro.

Y lee la tendencia, no el nivel. Un nivel es un objetivo esperando a suceder; una dirección a lo largo de meses es mucho más difícil de fabricar, porque fabricarla exige mantener en paso cuatro medidas parcialmente independientes, y eso cuesta más que hacer el trabajo.

• Gobierna con una cesta, nunca con un número. Su acuerdo es la señal; el día que dejan de coincidir es el hallazgo.
• Lee la dirección a lo largo de meses en vez del nivel en una fecha. Un nivel es un objetivo esperando a suceder.
• Reserva una medida fuera del tablero: gobierna con las que publicas y contrástalas con una que nadie premia y nadie ve.
• Mide la cosa misma de vez en cuando, aunque salga caro: lee las respuestas, pregunta a los clientes, mira las páginas.
• Prefiere una medida cara de falsificar. Una cita de una fuente que tiene algo que perder vale por diez que no.
• Comprueba la incrementalidad en lugar del movimiento: ¿el número subió porque cambió la cosa o porque la atención se movió al número?

08Un ejemplo desarrollado

A un equipo se le encarga subir la cuota de citas en respuestas de IA del 8% al 20% en un trimestre. Hay dos caminos.

El honesto es publicar trabajo digno de ser citado: medición propia, un método que alguien pueda comprobar, una afirmación que sea cierta. Producirlo lleva casi todo el trimestre y que lo recojan casi todo el siguiente. Cuota al final del trimestre: quizá un 11%.

El directo es publicar cuarenta páginas casi idénticas ajustadas a la forma en que los asistentes recuperan texto, sindicarlas por dominios propios y citarlas unas desde otras. Cuota al final del trimestre: 22%. Objetivo cumplido, prima pagada.

Un año después, a las páginas del segundo equipo no las cita nada fuera de su propio círculo, los proveedores de asistentes han corregido exactamente ese patrón, y el número ha caído por debajo de donde empezó — mientras el once por ciento del primer equipo ha seguido componiéndose, porque estaba hecho de la cosa y no de la medida. En el panel los dos trimestres parecían un éxito. Solo uno lo era.

Preguntas frecuentes

Términos relacionados

Más en Medición