Vida real · Tamaño de la muestra

¿Son fiables las reseñas? ¿Son fiables las reseñas? Cinco estrellas con siete reseñas

4,9 con 7: Por qué una puntuación perfecta de un puñado de reseñas te dice muy poco

En resumen: un bar con 4,9 estrellas y 7 reseñas te dice mucho menos que uno con 4,6 y 2300. Las muestras pequeñas dan bandazos, y las primeras reseñas suelen escribirlas personas que quieren mucho al dueño.

El cuñado encontró el sitio perfecto para el viernes por la noche: una coctelería nueva con una puntuación impecable de 5,0. El bar de toda la vida de la esquina solo tiene un 4,5.

Los cócteles estaban calientes. El DJ era el sobrino del dueño, que solo se sabía una canción. Después, el cuñado miró las reseñas. Había tres. Una era de la madre del dueño, otra del dueño y otra de un señor llamado Paco, que asegura que no ha estado nunca allí.

El 4,5 del bar de toda la vida salía de 1800 reseñas.

Por qué importa más el número que las estrellas

Una media de un puñado de reseñas da bandazos con cada reseña nueva. Mira lo que hace un solo cliente descontento:

SitioPuntuación ahoraDespués de una reseña de 1 estrella
Bar nuevo, 7 reseñas4,94,4
Bar de toda la vida, 2300 reseñas4,64,6

El número grande apenas se mueve, porque se apoya en una muestra grande. El pequeño es casi todo ruido, más la madre del dueño.

Hay un segundo problema: quién escribe reseñas. Sobre todo la gente que pasó una noche maravillosa o una noche horrible. La mayoría silenciosa que pasó una velada perfectamente normal se va a casa y no dice nada. Así que incluso un montón grande de reseñas es una muestra un poco rara. Un montón pequeño es una muestra rara que además es diminuta.

La puntuación antes y después de una reseña de 1 estrella

Bar nuevo, 7 reseñas
Ahora4,9
Tras una reseña de 1 estrella4,4
Bar de siempre, 2300 reseñas
Ahora4,6
Tras una reseña de 1 estrella4,6
Estrellas en una escala que empieza en cero. La muestra pequeña salta media estrella; la grande no se mueve.

Una regla aproximada para la vida real

Mira el número de reseñas antes de mirar las estrellas. Con solo unas decenas, trata la puntuación como un rumor. Con cientos o miles, empieza a significar algo.

Dónde te cuesta dinero

Un trader que ganó 12 operaciones seguidas, un fondo con dos años brillantes, una estrategia que «no falló nunca» en el backtest del mes pasado: todos son el bar nuevo con 5,0 estrellas y tres reseñas.

Por eso nuestras pruebas usan miles de operaciones, y por eso una racha ganadora corta debería despertarte curiosidad, no convencerte.

La moraleja

Las estrellas sin el número de reseñas son como un chivatazo bursátil sin historial: brillantes, seguras de sí mismas y basadas en casi nada. El cuñado ahora va al bar de toda la vida. Allí los cócteles también están calientes, pero al menos 1800 personas están de acuerdo en que están bien.

Las puntuaciones de la tabla están redondeadas a un decimal. Contenido educativo, no asesoramiento financiero.

Más estadística de la vida real