profile

AppCritic

La Ley de Goodhart y un cuento escrito por IA [NL61]

Published about 1 year ago • 4 min read

Tiempo transcurrido

61,29% del mes: ⚫⚫⚫⚫⚫⚫⚫⚫⚫⚫⚫⚫⚪⚪⚪⚪⚪⚪⚪⚪

21,21% de 2023:⬛⬛⬛⬛⬜⬜⬜⬜⬜⬜⬜⬜⬜⬜⬜⬜⬜⬜⬜⬜

  • La Ley de Goodhart nos explica cómo la medición de algunas métricas puede alterar el comportamiento de las personas… Y conseguir el efecto contrario.
  • Como experimento, la IA de ChatGPT (versión 4, que me he hecho de pago y todo) me escribió un cuento bastante bonito sobre el concepto.
  • Si quieres empezar una reunión con algo de humor, crea una intro como la de Star Wars o Stranger Things (o The Last of Us).

La Ley de Goodhart: por qué medir algo no siempre es tan buena idea como parece

La Ley de Goodhart nos dice que cuando una medida se convierte en el objetivo principal, pierde su efectividad como indicador. Si nos enfocamos en optimizar una métrica específica, esta puede dejar de reflejar la realidad que originalmente pretendía medir y representar.

En su origen, Goodhart hablaba de economía: cuando un indicador socieconómico se convierte en objetivo, deja de ser útil para darnos información, porque existen claros incentivos a manipularlo.

Las implicaciones de la Ley de Goodhart

En la temporada anterior exploramos los dilemas: una pobre traducción de tradeoffs, pero que sirvió como punto de partida para todo tipo de reflexiones: entre el corto y largo plazo, cómo tener límites te puede ayudar a buscar mejores soluciones y muchas otras cosas.

Entre todos los conceptos que hemos tratado, este es uno de los más trágicos, aunque no lo parezca a primera vista.

Vamos a ver por qué.

El mantra de la medición se puede venir abajo

Lo que no se mide, no se puede mejorar.

Así empiezan la mayor parte de presentaciones sobre medición, gestión y mejora. Yo mismo he usado la frase más de una vez (que es de Lord Kelvin, no de Drucker, como muchos pensábamos).

Y es cierto, pero añado: toda acción tiene su reacción.

Cuando mides algo, lo alteras.

  • Si mides el éxito de tu equipo comercial por el número de leads que cargan en el CRM, ajustarán su comportamiento para cargar más leads. Eso puede incluir registrar como lead al primo del vecino que llama preguntando la hora.
  • Si mides al equipo de marketing por el número de visitas a la página web, primarán las acciones que lleven tráfico sobre ventas.
  • Si incentivas a tu equipo directivo por la retención del talento, puede que contrate a gente más conformista para que no se vayan.

Cuando las personas saben que serán evaluadas o recompensadas según una métrica particular, pueden cambiar su enfoque para mejorarla a expensas de otros aspectos importantes que no se están midiendo.

Lo trágico de esto es que a veces medir desencadena el resultado contrario al que buscábamos: la métrica se convierte en el objetivo.

La Ley de Goodhart nos explica situaciones paradójicas en apariencia, pero muy humanas en realidad.

Porque la única regla real es que las personas responden a los incentivos.

Y cuando comunicas los incentivos, estás cambiando las reglas del juego.

Una sorpresa.

Mientras escribía esto, jugaba con ChatGPT (con la versión 4, me hice de pago para probarla), me dio por preguntarle y...

Me dio por preguntar a ChatGPT para validar alguna idea y tener otro ángulo...

El prompt que usé fue de lo más sencillo: escribe un texto divertido e inspirador sobre la Ley de Goodhart.

Y esto fue lo que me contó (tuve que pedirle que lo terminara).

El cuento completo lo tienes en este enlace.

Estas son algunas de las reflexiones que me surgieron:

¿Sentiría algo parecido el cazador cuando llegó la ganadería y descubrió que ya no tenía que salir en busca de presas? ¿El labrador cuando compró su primer tractor? Cada avance nos permite hacer cosas más grandes y complejas, pero también reduce nuestra independencia.

Muchas de las cosas que eran esenciales hace 500 años son ridículamente innecesarias hoy en día o están en manos de especialistas que no sabrían hacerlas sin máquinas. Quizá en el futuro se pregunten extrañados sobre nuestras curiosas manías de escribir, hacer fórmulas de Excel o diseñar webs.

Si te gusta, invita a alguien.

Me ayudas y te regalo algo:

Invita a 3 personas y llévate un libro, una camiseta o un curso

¿Se te ocurre alguien a quien le gustaría esta newsletter? Puedes invitarles con el enlace de abajo (único y personalizado para ti). Tiene premio: puedes elegir entre camiseta de AppCritic o mi libro "A nadie le interesan tus anuncios" firmado (solo en Madrid, no puedo asumir costes de envío) o un código regalo para el Curso de WhatsApp Business.

[RH_REFLINK GOES HERE]

Facebook Twitter Whatsapp Linkedin Email

P.d. Ya has invitado a [RH_TOTREF GOES HERE] personas

Aquí puedes ver cuántas invitaciones llevas
⚡️ by SparkLoop


Crea una intro como la de Star Wars

Hace poco hice una presentación relativamente distendida con el equipo de un cliente (con el que ya soy casi uno más).

Arranqué con un vídeo simulando la intro de Star Wars, pero con referencias a la situación de la empresa.

Es un detalle tonto, pero que da juego y que sirve para romper el hielo.

Se hace en segundos (solo hay que escribir el texto) y, además de Star Wars, tienen Stranger Things, Among Us o… The Last of Us!

Hay otros parecidos, pero este me gustó más. Se llama Kassel Labs.


Acabamos por esta semana

A todos nos gusta saber si gustamos. Me ayuda mucho para crear contenido: en 10 segundos, has terminado, solo hay una pregunta.

AppCritic

de Iván Fanego

Sabiduría atemporal que te ayudará a tomar mejores decisiones. Herramientas que te pondrán más fácil llevarlas a la práctica.

Read more from AppCritic

Número #102 Tiempo transcurrido: 2024: 25% ⬛⬛⬜⬜⬜⬜⬜⬜⬜⬜ Marzo: 100% ⬤⬤⬤⬤⬤⬤⬤⬤⬤⬤ Esta semana hablamos de: Se acabó la temporada. ¿Hacia dónde vamos? Fin de temporada: ¿hacia dónde vamos? Ya reflexioné hace 2 semanas sobre algunos aprendizajes de las 100 newsletters anteriores, así que ahora seré más breve. Desde que empecé hace 2 años y medio esta ha sido, con diferencia, la temporada (hago temporadas de 12 envíos, como las series) que más me ha costado sacar. La menos enfocada y con la que me he...

24 days ago • 1 min read

Número #101 Tiempo transcurrido: 2024: 23% ⬛⬛⬜⬜⬜⬜⬜⬜⬜⬜ Mes: 77% ⬤⬤⬤⬤⬤⬤⬤⬤◯◯ Esta semana hablamos de: En la penúltima newsletter de la temporada reflexiono sobre la naturaleza real de la mayor parte de trabajos del conocimiento: no es lo que parece. Al fin tengo una pequeña estructura del libro. Crea cómics en segundos con Inteligencia Artificial, gratis. Es una utilidad bastante graciosa... El único trabajo que existe es el de resolver problemas El resto, son meras especializaciones (o...

about 1 month ago • 2 min read

Número #100 Tiempo transcurrido: 2024: 21% ⬛⬛⬜⬜⬜⬜⬜⬜⬜⬜ Mes: 55% ⬤⬤⬤⬤⬤◯◯◯◯◯ Esta semana hablamos de: 100 ediciones, más de años escribiendo casi todos los domingos del año. Toca una pequeña reflexión y un agradecimiento a quienes seguís por aquí desde el principio. 100 ediciones de esta newsletter Entre el 14 de noviembre de 2021 y el 17 de marzo de 2023 hay 122 domingos, lo que quiere decir que el 82% de los domingos de los últimos 28 meses he enviado esta newsletter. En realidad, no he...

about 1 month ago • 5 min read
Share this post