La ley de Sturgeon: el 90% de las ideas son malas. ¿Qué le hace eso al buzón de ideas?
En resumen: cuando la mayoría de los candidatos son malos, incluso un filtro decente deja pasar sobre todo malos. Si el 10% de las ideas es bueno y un jurado acierta el 80% de las veces, aprueba el 26% de las ideas, y solo el 31% de esas son buenas. Es un efecto de la tasa base: el 20% de ideas malas que aprueba por error sale de un montón mucho mayor. Una segunda ronda independiente sube la parte buena al 64% y una tercera al 88%, a costa de perder más ideas buenas cada vez (el 36% tras dos rondas). La parte de ideas aprobadas que son buenas de verdad es la precisión del filtro.
El programa de innovación recibió 200 ideas este año. Un jurado de cinco directivos las valoró y aprobó 52 para financiarlas. El consejero delegado anunció «52 ideas revolucionarias».
Un año después, unas 16 parecen prometedoras. El jefe del cuñado culpa al jurado. El jurado culpa a las ideas. El cuñado culpa a un escritor de ciencia ficción de los años cincuenta.
La ley de Sturgeon
Theodore Sturgeon, defendiendo la ciencia ficción de los críticos que decían que casi toda era basura, respondió que el 90% de todo es basura: novelas, películas, productos. Desde entonces la ley de Sturgeon se aplica a los correos, las reuniones y los documentos de estrategia. Apliquémosla al buzón de ideas, y supongamos, con generosidad, que solo el 90% de las ideas es malo.
Un buen jurado sobre un conjunto flojo
Supón que el jurado es bastante bueno: aprueba el 80% de las ideas buenas y rechaza el 80% de las malas. De 200 ideas:
| Ideas buenas (20) | Ideas malas (180) | |
|---|---|---|
| Aprobadas | 16 | 36 |
| Rechazadas | 4 | 144 |
El jurado aprueba 52 ideas y solo 16 de ellas, el 31%, son buenas. Aprueba por error solo el 20% de las malas, pero el 20% de un montón grande es más que el 80% de uno pequeño. Es la tasa base en acción: cuando lo que buscas es raro, la mayor parte de lo que atrapa un filtro es lo que no buscas.
La parte de ideas aprobadas que son buenas de verdad es la precisión del filtro. Un jurado puede «acertar el 80%» y tener una precisión del 31%.
Una segunda ronda
Pasa las ideas aprobadas por un segundo jurado independiente igual de bueno que el primero, y después por un tercero:
| Rondas de valoración | Ideas aprobadas | De ellas, buenas | Ideas buenas perdidas por el camino |
|---|---|---|---|
| 1 | 26% | 31% | 20% |
| 2 | 10% | 64% | 36% |
| 3 | 6% | 88% | 49% |
Cada ronda limpia el montón, y cada ronda tira también algunas ideas buenas. El equilibrio es inevitable; la única pregunta es qué error cuesta más: financiar fiascos o perder joyas. Una primera ronda barata seguida de una pequeña prueba real de cada superviviente suele ganar a una sola gran valoración.
Parte de ideas aprobadas que son buenas de verdad, según las rondas de valoración
Estadística para principiantes: la precisión depende del conjunto
«Nuestra selección acierta el 80%» no dice nada de cuántas de sus elegidas son buenas hasta que sabes lo frecuentes que son las buenas. Cuanto más raro el objetivo, menor la precisión, por cuidadosos que sean los jueces. Es la misma aritmética del cribado médico y de las alertas de fraude.
Dónde te cuesta dinero
Si solo una pequeña parte de las acciones, los fondos o las startups acaban siendo grandes ganadores, quien elige acertando casi siempre acabará igualmente con una cartera llena de no ganadores. Antes de fiarte del porcentaje de aciertos de alguien, pregunta lo raro que es lo que elige.
La moraleja
El cuñado propuso una segunda ronda de valoración. Al consejero delegado le gustó, y pidió a los mismos cinco directivos que volvieran a valorar las mismas 52 ideas, «para ser rigurosos». Aprobaron las 52, porque ya las habían aprobado la primera vez. El cuñado ha señalado que una segunda ronda solo funciona si es independiente. El programa tiene ahora una tercera ronda, que los mismos cinco directivos también han superado.
Lo que este modelo no puede decirte
- Las cifras son supuestos. Los conjuntos reales pueden tener más o menos ideas buenas, y los jurados pueden ser mejores o peores que el 80%.
- «Buena» no siempre está clara. Muchas ideas no son ni buenas ni malas hasta que alguien las prueba; una pequeña prueba suele decir más que un jurado.
- Las rondas no siempre son independientes. Los mismos jueces, o jueces que hablan entre sí, aportan mucho menos que un jurado nuevo.
El programa de innovación, el jurado y el consejero delegado son una ilustración. Las cifras son un cálculo nuestro, suponiendo que el 10% de las ideas es bueno y que cada ronda independiente acierta el 80% de las veces. Contenido educativo, no asesoramiento empresarial ni financiero.