Prawo Segala: dlaczego dwa raporty nigdy nie pokazują tej samej liczby
W skrócie: drugi pomiar nie dodaje niepewności, tylko ją ujawnia. Jeśli każdy z dwóch zegarków myli się o typową minutę, różnią się o ponad minutę w 48% przypadków, co wygląda na chaos. Ale jeden zegarek sam myli się o ponad minutę w 32% przypadków; po prostu tego nie widać. Średnia z dwóch myli się o ponad minutę tylko w 16% przypadków. Dwa raporty, które się nie zgadzają, mówią, jak dokładne są naprawdę twoje liczby. Lekarstwo to dowiedzieć się, skąd różnica, a potem je połączyć, a nie skasować jeden.
Raport przychodów działu finansów mówi, że w zeszłym miesiącu było 4,21 mln zł. Raport działu sprzedaży mówi 4,36 mln zł. Zwołano spotkanie, żeby ustalić, który jest prawdziwy. Spotkanie trwa trzeci miesiąc.
Szef Seby zaproponował rozwiązanie: wyłączyć raport sprzedaży, żeby firma znowu miała jedną liczbę. „Kiedyś znaliśmy nasze przychody”, mówi. Seba nie jest pewien, czy znali.
Prawo
Stare powiedzenie, znane jako prawo Segala, brzmi: człowiek z jednym zegarkiem wie, która jest godzina; człowiek z dwoma nigdy nie jest pewien. Brzmi jak argument za posiadaniem jednego zegarka. Statystycznie jest odwrotnie.
Dwa zegarki w liczbach
Załóżmy, że każdy zegarek trochę się myli, o typową minutę w jedną albo drugą stronę, a błędy obu są niezależne. Wtedy:
| Co widzisz | Jak często |
|---|---|
| Dwa zegarki różnią się o ponad 1 minutę | 48% |
| Dwa zegarki różnią się o ponad 2 minuty | 16% |
| Jeden zegarek sam myli się o ponad 1 minutę | 32% |
| Średnia z dwóch myli się o ponad 1 minutę | 16% |
Człowiek z jednym zegarkiem myli się o ponad minutę w jednej trzeciej przypadków i nie ma o tym pojęcia. Człowiek z dwoma widzi rozbieżność w połowie przypadków i może wziąć średnią, która myli się o połowę rzadziej. Nie jest mniej pewny dlatego, że wie mniej; jest mniej pewny, bo wie więcej.
Dlaczego liczby się różnią
Dwa raporty biznesowe zwykle różnią się z powodów, które warto znać, a nie dlatego, że jeden jest „zły”:
- Definicje. Przychód w chwili podpisania zamówienia, wystawienia faktury czy zapłaty?
- Czas. Jeden system zamyka miesiąc o północy, drugi następnego dnia roboczego.
- Zakres. Jeden uwzględnia zwroty, rabaty albo spółkę zależną; drugi nie.
- Zwykłe pomyłki. Literówki, duplikaty i brakujące rekordy, które mają obie strony: zwykły błąd pomiaru.
Statystyka dla laików: rozbieżność to informacja
Każda liczba ma jakiś błąd. Jedno źródło go ukrywa; dwa źródła go pokazują. Gdy dwa pomiary się nie zgadzają, najpierw wyjaśnij różnicę (definicje, czas, zakres), a to, co zostanie, zwykle dokładniej opisze ich połączenie niż każdy z osobna. Uśrednianie niezależnych pomiarów to prawo wielkich liczb w miniaturze.
Gdzie to kosztuje pieniądze
Dwóch dostawców danych podających trochę inne ceny, zyski albo wartości indeksu dla tego samego to norma. Inwestor, który sprawdza tylko jednego, czuje się pewnie; ten, który sprawdza dwóch, wie, na ile można liczbom ufać. Wybieraj to drugie uczucie.
Morał
Seba namierzył różnicę: sprzedaż liczyła zamówienia przy podpisaniu, finanse przy fakturze. 150 000 zł różnicy to trzy duże zamówienia podpisane w ostatnim tygodniu miesiąca. Spotkanie uzgodniło definicję i się zakończyło. W następnym miesiącu raporty zgadzały się co do złotówki i szef był zachwycony, dopóki Seba nie odkrył, że od spotkania jeden z nich kopiuje liczby z drugiego.
Czego to nie mówi
- Błędy nie zawsze są niezależne. Dwa raporty zbudowane z tego samego wadliwego źródła mogą idealnie się zgadzać i oba się mylić.
- Minuta błędu to przykład. Procenty działają dla każdego typowego błędu, mierzonego w tych samych jednostkach.
- Pochodzenie powiedzenia jest niepewne. Jest szeroko cytowane i przypisywane różnym osobom; jego brzmienie się różni.
Raporty, spotkanie i 150 000 zł to ilustracja. Liczby o zegarkach to nasz rachunek przy założeniu, że błąd każdego zegarka ma rozkład normalny z odchyleniem standardowym jednej minuty. Treść edukacyjna, nie porada finansowa.