
Por Mark Blackwell, Arkaro
En 1902, los gobernantes coloniales franceses intentaron controlar la proliferación de ratas ofreciendo una recompensa a cambio de que les presentaran las colas de las ratas que cazaran. Al cabo de un tiempo, los funcionarios observaron que muchas ratas no tenían cola. Descubrieron que los cazadores de ratas vietnamitas, les cortaban las colas y las soltaban vivas en las alcantarillas, donde se reproducían y producían más ratas.
Por otro lado, gobernadores británicos en la India, tampoco estuvieron muy acertados al intentar controlar las serpientes cobra. Ofrecieron recompensas por serpientes muertas y esto, simplemente, alentó el desarrollo de criaderos de cobras. Una vez que fueron conscientes del tema, se abandonó el plan de recompensas y los criadores liberaron las serpientes en la naturaleza, lo que agravó el problema de las cobras.
Estos son dos ejemplos de la llamada Ley de Goodhart:
«Cuando una medida se convierte en un objetivo, deja de ser una buena medida».
¿Pero hay ejemplos de la Ley de Goodhart en los mercados?. Sin duda.
- El escándalo del “Dieselgate” de Volkswagen en 2015 surgió como consecuencia de establecer un KPI sobre los niveles de emisiones. En lugar de reducir las emisiones al valor indicado, VW programó los autos para que hicieran trampa en las pruebas. Se equiparon 11 millones de autos con software para manipular las pruebas, lo que resultó en más de 30 mil millones de dólares en multas, retiradas de vehículos y daños importantes a la marca.
- El escándalo de las ventas cruzadas de Wells Fargo. En 2016, Wells Fargo había establecido un sistema de KPIs con algunos indicadores de ventas que se tornaron en objetivos agresivos de ventas con un enfoque en la “venta cruzada”. (Se trata de ofrecer al cliente un producto que sea complementario de lo que ya ha elegido). En septiembre de 2016, Wells Fargo anunció que pagaría 185 millones de dólares para resolver una demanda interpuesta por los reguladores y la ciudad y condado de Los Ángeles, admitiendo que los empleados habían abierto hasta 2 millones de cuentas sin autorización de los clientes durante un período de cinco años. Las acciones de Wells Fargo cayeron un 2 por ciento tras la noticia. Nuevamente, el enfoque de tornar indicadores KPI en objetivos de ventas generó comportamientos perversos y poco éticos y daño en el valor de marca de la empresa.
- En Uber, y durante su fase de rápido crecimiento, los incentivos estaban vinculados a unos indicadores KPIs: el porcentaje de tiempo dedicado a un pasajero y los viajes totales por día. Las consecuencias fueron denuncias por conducción peligrosa entre viajes, para cumplir objetivos. Además, como el precio estaba relacionado con la demanda, los conductores engañaban al sistema aceptando y rechazando viajes.
Entonces, ¿cómo podemos mitigar los efectos de la Ley de Goodhart? A primera vista, esto puede parecer imposible, ya que una medida clave (un KPI), debería poder ser un objetivo para crear un cambio de comportamiento. Exploremos algunas opciones e inspirémonos en el libro de Donald Wheeler «Understanding Variation». Él escribe:
«Cuando las personas se ven presionadas para alcanzar un valor objetivo, hay tres formas en las que pueden proceder:
1. Pueden trabajar para mejorar el sistema.
2. Pueden distorsionar el sistema
3. O pueden distorsionar los datos«
Al reconocer esto, ¿cómo podríamos mitigar el impacto de la Ley de Goodhart e impulsar la mejora del sistema en lugar de distorsionar el sistema o los datos?
Una idea inmediata podría ser tener solo métricas más estrechamente alineadas con lo que importa, el objetivo final. Sin embargo, una métrica basada solo en resultados inevitablemente estará rezagada y no será directamente accionable. Piense en una métrica sobre las ventas tal como: «N ingresos de ventas por mes».
Una idea clave del libro del Dr. Compo «El enfoque emergente de la estrategia» es comprender la distinción fundamental entre una aspiración u objetivo final (“Lo que importa”) y la estrategia para llegar allí “¿Qué podemos hacer?”).
El Dr. Compo lo describe como “El Problema letal para el cambio y la innovación”: Lograr las aspiraciones (objetivos finales) es lo que importa, pero las aspiraciones no son directamente accionables. Quienes estén familiarizados con Six Sigma, lo verán como una fórmula: Y=f(x), donde Y es “lo que importa” y x es “lo que puedes hacer”. El principio más importante de Six Sigma es que “no puedes gestionar las Y”.
Por tanto, en el ejemplo anterior, «N ingresos de ventas por mes», solo puede ser un objetivo. Esto resalta el desafío fundamental del cambio. Se puede medir lo que importa (objetivo final), pero no se puede actuar directamente sobre ello. (La acción sería posterior a la medida). Lo podemos ver en el diagrama de influencia que aparece a continuación.

Veamos algunas propuestas:
Múltiples métricas
Por lo tanto, parece más sensato tener métricas o KPI que se centren en lo que se puede hacer, las x críticas derivadas de la comprensión del proceso y las palancas que impulsan el resultado. Estas métricas principales de entrada deben ser diversas y servir para balancearse entre sí, reduciendo el riesgo de comportamientos perversos. En el ejemplo anterior, ampliar las métricas ara el objetivo final de: «N ingresos de ventas por mes», podría significar, por ejemplo, medir tanto las «llamadas de ventas por mes», como la «tasa de conversión de ventas por llamada», ambas contribuyen al objetivo final y se balancean para encontrar el equilibrio adecuado entre cantidad y calidad.
Equilibrar las métricas y los esquemas de incentivos
Pero, por supuesto, la Ley de Goodhart también puede aplicarse a cualquiera de estas métricas de entrada, así que hay que tener cuidado. Las manipulaciones en las métricas pueden facilitarse cuando existe un vínculo demasiado estrecho con las estructuras de incentivos. Se requiere un equilibrio, que incluya quizás, recompensar al menos en parte, por asegurar métricas de resultados finales.
Se requiere, además, un equilibrio en la cantidad de métricas. Los líderes pueden exigir que se concentre la atención en las pocas cosas que importan, pero si son muy pocas, el riesgo de que la Ley de Goodhart tenga un efecto perjudicial aumenta. Al mismo tiempo, tener demasiadas métricas genera riesgo de confusión y parálisis por análisis.
Cambiar o modificar las métricas
Cambiar las métricas con regularidad reduce el riesgo de manipular cualquiera de ellas; de hecho, pueden surgir cambios de métricas de todos modos a medida que el equipo profundiza la valoración de las palancas, los inputs que aseguran el resultado deseado, especialmente en una situación “compleja” de “Cynefin” (Ver imagen) que requiere un “enfoque adaptativo”.

Medición de las premisas fundamentales
De hecho, existe un buen argumento para tener métricas sobre si «Los supuestos clave que iniciaron el programa de cambio» siguen siendo válidos y, en caso de que ya no lo sean, si tienen desencadenantes para la acción. Nuevamente, un enfoque adaptativo de este tipo es muy relevante en situaciones “complejas”.
El cambio de métricas es probablemente una señal de un proceso eficaz, no necesariamente un mal diseño inicial. Necesariamente, los sistemas digitales para tomar y registrar las medidas deberían ser flexibles!
Métricas cualitativas
Potencialmente, otro desafío para los sistemas digitales (Área de IT) es considerar métricas cualitativas, además de cuantitativas, como análisis de comentarios de los clientes. Este enfoque, más rico, puede ayudar a impulsar el debate y obtener información que permita una mejor toma de decisiones que simplemente confiar en los números al pie de la letra.
Este tipo de pensamiento puede funcionar bien para proyectos pequeños, pero ¿puede detectar el problema a medida que aumenta el tamaño?
Analizaremos este problema en un próximo artículo de Arkaro.
Mientras tanto, en conclusión, la clave para establecer KPI efectivos radica en comprender sus posibles dificultades y abordarlos con una mentalidad matizada y adaptativa.
Al centrarse en una combinación equilibrada de métricas de entrada, evolucionar regularmente estas medidas e incorporar información cuantitativa y cualitativa, los directivos pueden impulsar una mejora significativa al tiempo que minimizan las consecuencias no deseadas.
Recuerde, los KPI deben guiar el comportamiento, no distorsionarlo, manteniendo el foco en la creación de mejores procesos en lugar de simplemente alcanzar los objetivos.
En un mundo cada vez más complejo, las métricas reflexivas y adaptables son esenciales para guiar a las organizaciones hacia un éxito sostenible.
¿Qué le hubieras agregado a este artículo? Compártelo en comentarios.

