Błąd przeżywalności

Definicja robocza

Błąd przeżywalności (survivorship bias) to błąd wnioskowania, który powstaje, gdy analizujemy wyłącznie przypadki, które przeszły przez jakiś filtr — przetrwały, zwyciężyły, zostały opublikowane, zachowały się w archiwum — i traktujemy je jak próbę reprezentatywną dla całości, choć filtr usunął z pola widzenia porażki. Technicznie jest to odmiana błędu selekcji, w której warunkiem wejścia do próby jest ten sam wynik, o którym chcemy wnioskować; potocznie — „uczenie się od zwycięzców” bez pytania, ilu robiło to samo i przegrało. Nie chodzi o małą próbę: problem leży w tym, że brakujące obserwacje nie brakują losowo. Narzędzie operacyjne brzmi: przy każdej statystyce sukcesu zapytać, jaki mechanizm odsiał przypadki i czy odsiew zależał od mierzonej cechy.

Geneza i rodowód

Kanoniczny przypadek pochodzi z pracy Abrahama Walda w Statistical Research Group na Uniwersytecie Columbia. W 1943 r. napisał on dla Applied Mathematics Panel osiem memorandów „A Method of Estimating Plane Vulnerability Based on Damage of Survivors” (SRG 85–126, AMP 76.1–76.8), w których z rozkładu trafień na samolotach, które wróciły, wyprowadzał prawdopodobieństwo zestrzelenia przy trafieniu w poszczególne części maszyny. Memoranda nie zostały opublikowane: krążyły w kopiach, metodę stosowano w analizach z wojen koreańskiej i wietnamskiej, a Center for Naval Analyses przedrukowało je dopiero w 1980 r. (CRC 432); w 1984 r. Marc Mangel i Francisco Samaniego omówili je w „Journal of the American Statistical Association”. Sam termin utrwaliły finanse empiryczne: Brown, Goetzmann, Ibbotson i Ross (1992) pokazali, że bazy funduszy pomijające fundusze zlikwidowane wytwarzają pozorną trwałość wyników. Psychologia miała od 1979 r. „problem szuflady” Rosenthala, czyli przeżywalność wyników istotnych statystycznie. Do obiegu ogólnego pojęcie wprowadził Nassim Nicholas Taleb w Fooled by Randomness (2001), a historię Walda spopularyzował Jordan Ellenberg (2014). Popularna wersja — „pancerz tam, gdzie nie ma dziur”, generałowie, których trzeba było przekonać — jest legendą zrekonstruowaną po latach; w memorandach nie ma anegdoty, jest model, założenia i hipotetyczne dane liczbowe.

Rodowód środkowoeuropejski

Kanoniczne sformułowanie pochodzi od autora ukształtowanego w regionie. Abraham Wald urodził się w 1902 r. w Klużu (Kolozsvár), wówczas na Węgrzech, i tam — według „Neue Deutsche Biographie” po maturze w 1921 r. — studiował matematykę na miejscowym uniwersytecie, kończąc ją licencjatem w 1927 r. W tym samym roku przeniósł się do Wiednia: doktorat z geometrii u Karla Mengera obronił w 1931 r. („Über das Hilbertsche Axiomensystem”), od 1930 r. był stałym członkiem Kolokwium Matematycznego Mengera, gdzie referował także prace ekonometryczne, a w latach 1933–1938 pracował w Instytucie Badań Koniunktury Oskara Morgensterna, zajmując się szeregami czasowymi. Katedry w Wiedniu nie mógł dostać jako Żyd; po Anschlussie wyjechał latem 1938 r. na zaproszenie Cowles Commission, a we wrześniu był już u Harolda Hotellinga na Columbii, gdzie przeszedł do statystyki. To wiedeńskie połączenie rygoru matematycznego z ekonometrią jest formacją, z której w 1943 r. wyrosły memoranda SRG — tekst, na którym opiera się cała dzisiejsza literatura pojęcia. Wald nie użył terminu survivorship bias; jego wkład to model, który z danych o ocalałych odtwarza to, czego w danych nie ma. Zastrzeżenie: źródła różnią się co do jego szkoły (MacTutor pisze o nauce w domu).

Dlaczego teraz

W latach 2018–2026 pojęcie wyszło z finansów i statystyki do trzech obszarów. Po pierwsze, kryzys replikacji uczynił z „problemu szuflady” sprawę instytucjonalną: rejestrowane raporty i prerejestracja badań to w istocie próba zablokowania filtru, który przepuszcza do druku tylko wyniki istotne. Po drugie, pandemia: w listopadzie 2020 r. Griffith, Morris, Tudball i współautorzy pokazali w „Nature Communications”, że badania COVID-19 oparte na pacjentach hospitalizowanych lub testowanych cierpią na błąd kolizji — próba jest selekcjonowana na ciężkość choroby, więc czynniki ryzyka wyglądają inaczej niż w populacji. Po trzecie, kariery i narracje sukcesu: w 2021 r. Hemprich-Bennett, Rabaiotti i Kennedy ostrzegali w „Nature”, że rady zawodowe w nauce dają wyłącznie ci, którzy w niej zostali; to samo dotyczy założycieli startupów i twórców internetowych, których przegrani nie mają zasięgu. Schemat samolotu z czerwonymi kropkami stał się tymczasem memem, który pojęcie rozpowszechnił i spłaszczył.

Siła wyjaśniająca

Pojęcie pozwala zobaczyć, że próba niesie informację o filtrze, a nie tylko o świecie. Trzy zastosowania. W finansach: jeśli fundusze różnią się zmiennością, a z bazy wypadają te, które zbankrutowały, to ocalałe pokażą „trwałość wyników” nawet wtedy, gdy przyszłe zwroty są czysto losowe — to wynik Browna i współautorów z 1992 r. W medycynie: korelacje w próbie szpitalnej (np. między paleniem a łagodnym przebiegiem choroby) mogą być artefaktem tego, kto w ogóle trafił do szpitala. W poradnictwie: cechy wspólne milionerom nic nie mówią, dopóki nie wiadomo, jak często te same cechy mają bankruci. Siłą metody Walda jest zaś to, że błąd da się odwrócić: przy założeniu, że trafienia rozkładają się proporcjonalnie do powierzchni części, z nadreprezentacji dziur w kadłubie i ich niedoboru na silnikach wynika liczbowo, że trafienie w silnik zestrzeliwuje maszynę najczęściej (w jego hipotetycznym przykładzie: 39% wobec 5% dla kadłuba). Brak danych staje się daną.

Osie sporu

Niedoceniany kąt

Najciekawsze w historii Walda jest to, że sama przeszła przez filtr, który opisuje. Memoranda z 1943 r. nie były publikowane; przetrwały, bo marynarka wojenna używała metody w Korei i Wietnamie i w 1980 r. uznała ją za wciąż przydatną. Gdyby nie to, znalibyśmy Walda z analizy sekwencyjnej i teorii decyzji, a „samolot z dziurami” nie istniałby jako pojęcie. Opowieść, która przetrwała, przetrwała zaś w wersji najbardziej opowiadalnej: z generałami, z jednym zdaniem-puentą, bez równań i bez założeń. To więcej niż ironia: przeżywalność działa także na idee i ich wersje — z konkurujących ujęć tego samego problemu zostaje to, które najłatwiej powtórzyć, a nie to, które jest najdokładniejsze. Drugi pomijany wątek to wiedza historyczna: archiwa, ruiny i kanony są próbą ocalałych, a historyk, który nie pyta, co zniszczył czas i gust pokoleń, popełnia błąd Walda bez jego rachunku.

W przekładzie

Polski termin nie jest ustalony. „Błąd przeżywalności” jest najczęstszą kalką, ale „przeżywalność” to w biologii i demografii odsetek przeżywających, więc nazwa sugeruje błąd w pomiarze przeżycia, a nie błąd wynikający z patrzenia tylko na tych, którzy przeżyli. „Błąd ocalałych” (lub „ocalałego”) oddaje mechanizm lepiej — słyszymy tylko tych, którzy wrócili — kosztem skojarzenia z katastrofami. „Efekt przeżywalności” gubi to, że chodzi o wadę wnioskowania, a nie o zjawisko. Ściśle statystyczne „obciążenie” (bias jako systematyczne odchylenie estymatora) nie przyjęło się w tym złożeniu. Zostajemy przy „błędzie przeżywalności” ze względu na rozpoznawalność, a „błąd ocalałych” traktujemy jako glosę objaśniającą.