Jun-ho jest programistą w Seattle i zamierza otworzyć bar z ramenem. Przygotowuje się do tego od roku. Wysłuchał ponad czterdziestu odcinków podcastu, w którym restauratorzy opowiadają, jak odnieśli sukces. Wniosek zawsze jest ten sam: rzucili bezpieczną pracę, postawili wszystko na jedną kartę, zignorowali sceptyków i było warto.
Jego siostra Ha-eun słucha tych opowieści przy kolacji. W końcu pyta: „Czy w tym podcaście wystąpił kiedyś ktoś, komu restauracja upadła?”.
Jun-ho się zastanawia. Nie wystąpił. Osób, których lokale zostały zamknięte, nie zaprasza się do programu zatytułowanego „Jak mi się udało”. Każdy z występujących tam właścicieli podjął duże ryzyko. Zapewne zrobiło to również wielu tych, którym nikt nie podał mikrofonu.
To właśnie błąd przeżywalności. Jun-ho zebrał mnóstwo informacji, ale wszystkie przeszły przez filtr, który przepuszcza tylko zwycięzców. W tym artykule wyjaśniamy, czym jest błąd przeżywalności, co naprawdę wydarzyło się w słynnej historii o bombowcach, gdzie ten mechanizm kryje się na co dzień i jakie pięć pytań warto zadać, zanim pójdziesz czyimś śladem.
Czym jest błąd przeżywalności?
Błąd przeżywalności polega na wyciąganiu wniosków na podstawie ludzi, firm lub rzeczy, które przeszły przez określony filtr, przy jednoczesnym pomijaniu tych, którym się to nie udało. Ponieważ porażek nie widać, ci, którzy przetrwali, wydają się bardziej reprezentatywni, a ich metody skuteczniejsze, niż są w rzeczywistości.
To piąty mechanizm opisany w naszym przewodniku po błędach poznawczych. Proponujemy tam prosty sposób na jego rozpoznanie: zapytać „Kogo brakuje na tym obrazku?”. Tutaj przyjrzymy się sprawie dokładniej, bo łatwo zadać to pytanie, lecz zaskakująco trudno dobrze na nie odpowiedzieć.
Schemat składa się z trzech części:
- Filtr decyduje, które przypadki pozostają widoczne. Może nim być zamknięcie firmy, śmierć, rezygnacja, niezdany egzamin lub zapomnienie.
- Widzisz tylko tych, którzy przeszli przez filtr, bo reszta zniknęła z pola widzenia.
- Wyciągasz wniosek o całej grupie na podstawie tych, którzy zostali.
Błędem nie jest przyglądanie się tym, którzy odnieśli sukces. Błędem jest zapominanie o filtrze.
Starożytny przykład: obrazy ocalonych
Ta idea jest znacznie starsza niż statystyka. W O naturze bogów rzymski pisarz Cyceron przytacza historię greckiego myśliciela Diagorasa z Melos. Przyjaciel pokazał Diagorasowi obrazy wotywne ofiarowane przez ludzi, którzy przetrwali sztorm na morzu po modlitwie do bogów. Czyż to nie dowód, że modlitwa działa?
Diagoras odparł w istocie, że nie ma obrazów ludzi, którzy się modlili, a potem rozbili się na morzu i utonęli.
W tej jednej wymianie zdań mieści się cały mechanizm. Obrazy przedstawiały prawdziwych ocalałych, ale nie pozwalały ocenić skuteczności modlitwy. Ci, którzy mogliby przedstawić drugą stronę historii, spoczywali na dnie morza. Pisarz Nassim Nicholas Taleb nazwał później takie ukryte informacje milczącymi dowodami w książce Czarny łabędź.
Historia bombowców: co wydarzyło się naprawdę?
Najsłynniejszy przykład pochodzi z czasów II wojny światowej. Oto jego popularna wersja:
Wojsko analizowało bombowce wracające z misji i zaznaczało miejsca trafień. Dziury po pociskach skupiały się na skrzydłach i kadłubie, a przy silnikach było ich niewiele. Oficerowie zaproponowali wzmocnienie pancerza tam, gdzie widzieli dziury. Statystyk Abraham Wald zauważył, że rozumowanie powinno być odwrotne. Samoloty, które wróciły, pokazywały miejsca, w które można było trafić i nadal dolecieć do bazy. Maszyny trafione w silniki nie wracały. Pancerz należało więc dodać tam, gdzie dziur nie było.
Sedno tej historii jest prawdziwe. Wald, matematyk urodzony na Węgrzech, pracował podczas wojny w Statistical Research Group na Uniwersytecie Columbia. W 1943 roku napisał serię opracowań, w tym „A Method of Estimating Plane Vulnerability Based on Damage of Survivors”. Statystycy Marc Mangel i Francisco Samaniego opublikowali przystępne omówienie tej pracy w Journal of the American Statistical Association w 1984 roku.
Zgrabna anegdota o mylących się oficerach i błyskotliwej odpowiedzi wykracza jednak poza to, co potwierdzają zachowane źródła. O takiej rozmowie mówią one bardzo niewiele. Wald opracował w rzeczywistości matematyczną metodę szacowania podatności poszczególnych części samolotu na uszkodzenia. Na podstawie śladów trafień w maszynach, które wróciły, wnioskował o wszystkich samolotach wysłanych na misję, także tych utraconych. Słynny rysunek samolotu pokrytego czerwonymi kropkami, który być może znasz, to współczesna ilustracja hipotetycznego przykładu, a nie dokument z czasów wojny.
Wniosek pozostaje aktualny: dowody, które do Ciebie docierają, zostały już przefiltrowane przez zjawisko, które próbujesz zrozumieć. Sama historia powtarzana tak często, że brzmi jak wierny zapis wydarzeń, też jest takim ocalałym przypadkiem, wygładzanym przy każdym kolejnym opowiadaniu.
Gdzie kryje się błąd przeżywalności?
Błąd przeżywalności pojawia się wszędzie tam, gdzie działa niewidoczny filtr. Oto najczęstsze przykłady.
| Obszar | Kogo lub co widzisz | Kogo brakuje | O co zapytać |
|---|---|---|---|
| Rady o sukcesie | Założycieli firm, artystów i sportowców, którym się udało | Wszystkich, którzy robili to samo bez podobnego rezultatu | „Ile osób skorzystało z tej rady i poniosło porażkę?” |
| Inwestowanie | Fundusze i akcje wciąż obecne na rynku | Fundusze zamknięte lub połączone z innymi oraz firmy, które upadły | „Czy te wyniki uwzględniają podmioty, które zniknęły?” |
| Stare przedmioty | Budynki, samochody i narzędzia, które przetrwały lata | Te kiepsko wykonane, dawno wyrzucone lub rozebrane | „Czy wszystkie były tak dobre, czy tylko te, które pozostały?” |
| Ankiety pracownicze | Pracowników, którzy zostali w firmie | Osób, które odeszły z powodu problemu, o który pytasz | „Czy zapytaliśmy tych, którzy odeszli?” |
| Opinie klientów | Osób, które nadal korzystają z produktu | Klientów, którzy wypróbowali go raz i zrezygnowali | „Co mówili ci, którzy przestali go używać?” |
Rady o sukcesie
To szczególnie częsty przypadek. Książki, podcasty i wpisy w mediach społecznościowych z założenia skupiają się na tych, którym się udało. Mało kto kupiłby pamiętnik zatytułowany „Zrobiłem wszystko jak trzeba, a i tak mi nie wyszło”. Sławni przedsiębiorcy, którzy rzucili studia i zbudowali wielkie firmy, naprawdę istnieją. Istnieje też znacznie liczniejsza grupa osób, które rzuciły studia i nie zbudowały niczego podobnego.
Nie chodzi o to, by ignorować ludzi sukcesu. Trzeba odróżnić to, co zrobili, od tego, co robili wszyscy w podobnej sytuacji. Jeśli zarówno zwycięzcy, jak i przegrani postawili wszystko na jedną kartę, nie jest to sekret sukcesu.
Inwestowanie
W artykule opublikowanym w 1996 roku w Review of Financial Studies badacze finansów Edwin Elton, Martin Gruber i Christopher Blake przeanalizowali fundusze inwestycyjne istniejące pod koniec 1976 roku. Śledzili ich dalsze losy, uwzględniając również te, które później zniknęły. Punkt wyjścia był prosty: fundusze często znikają z powodu słabych wyników. Jeśli więc baza danych pokazuje tylko te nadal istniejące, przeciętny fundusz wygląda na skuteczniejszy, niż był w rzeczywistości. Zestawienie „funduszy, które przez dziesięć lat pobijały rynek” pomija wszystkie fundusze, które próbowały, ale po cichu je zamknięto lub połączono z innymi.
Koty spadające z wysokości
W badaniu opublikowanym w 1987 roku w Journal of the American Veterinary Medical Association przeanalizowano przypadki 132 kotów, które trafiły do nowojorskiego szpitala dla zwierząt po upadku z wysokich budynków. Co dziwne, koty, które spadły z wysokości ponad sześciu pięter, zdawały się mieć mniej obrażeń niż te, które spadły z niższych kondygnacji. Jedno z proponowanych wyjaśnień dotyczy fizyki: po przebyciu odległości odpowiadającej mniej więcej pięciu piętrom spadający kot przestaje przyspieszać, obraca się do właściwej pozycji i rozluźnia ciało.
Inne wyjaśnienie, podnoszone przez kolejnych komentatorów, dotyczy błędu przeżywalności. Kot, który zginął wskutek upadku z bardzo dużej wysokości, może w ogóle nie trafić do weterynarza. Jeśli najcięższe przypadki nie pojawiają się w danych, wysokie upadki wyglądają na mniej groźne, niż są naprawdę. Oba mechanizmy mogą mieć znaczenie. Właśnie dlatego pominięte przypadki są tak ważne.
„Kiedyś to robili porządne rzeczy”
Stare domy na Twojej ulicy są solidne, a narzędzia w szopie dziadka wciąż działają. Tyle że oglądasz te, które przetrwały. Nietrwałe domy rozebrano dziesiątki lat temu, a tanie narzędzia trafiły do kosza. Niektóre dawne przedmioty rzeczywiście mogły być lepiej wykonane, ale te, które nadal widzisz, nie stanowią reprezentatywnej próby.
Błąd przeżywalności a podobne pojęcia
Poniższe pojęcia częściowo się pokrywają. Warto znać różnice, żeby wiedzieć, jak reagować.
| Pojęcie | Co oznacza | Przykład |
|---|---|---|
| Błąd przeżywalności | Ocenianie grupy wyłącznie na podstawie tych jej członków, którzy przeszli przez filtr | Badanie tylko restauracji, które nadal działają |
| Błąd doboru próby | Każda sytuacja, w której próba nie odzwierciedla grupy, którą chcesz poznać (błąd przeżywalności jest jednym z jego rodzajów) | Ankietowanie wyłącznie osób odbierających telefony stacjonarne |
| Efekt potwierdzenia | Szukanie i faworyzowanie informacji zgodnych z wcześniejszym przekonaniem | Czytanie tylko wywiadów popierających Twój plan |
| Selektywne dobieranie przykładów | Przedstawianie w argumentacji wyłącznie przypadków, które wspierają tezę | „Spójrz na tych trzech miliarderów, którzy rzucili studia” |
| Ignorowanie częstości bazowej | Pomijanie informacji o tym, jak często coś zdarza się w całej grupie | Ocenianie pomysłu na biznes bez sprawdzenia, ile podobnych firm się zamyka |
Te mechanizmy często działają razem. Błąd przeżywalności podsuwa Ci przefiltrowaną próbę, efekt potwierdzenia ułatwia jej zaakceptowanie, a gdy powtarzasz ją jako argument, zaczynasz selektywnie dobierać przykłady. To jeden z chwytów opisanych na naszej liście błędów logicznych.
5 pytań, które pomogą dostrzec brakujące przypadki
Rada „zapytaj, kogo brakuje” jest trafna, ale warto rozłożyć ją na kroki. Zanim oprzesz decyzję na historii sukcesu, zbiorze danych lub czyjejś radzie, zadaj sobie tych pięć pytań.
1. Jaki filtr zadziałał?
Nazwij mechanizm, który zdecydował, jakie przypadki możesz zobaczyć. W historii Jun-ho było to „zaproszenie do podcastu o sukcesie”. W rankingu funduszy będzie to „fundusz nadal istnieje”. Gdy nazwiesz filtr, zwykle łatwiej dostrzec brakującą grupę.
2. Jak wyglądała cała grupa na początku?
Pomyśl o wszystkich, którzy zaczęli, a nie tylko o tych, którzy dotarli do końca. Ile osób rozpoczęło tę samą dietę, a nie tylko ile opublikowało zdjęcia „przed i po”? Rzadko potrzebujesz dokładnej liczby. Ważne, by wiedzieć, czy widoczne przypadki stanowią większość grupy, czy jedynie jej niewielką część.
3. Czy ci, którym się nie udało, robili coś inaczej?
To kluczowe pytanie. Jeśli osoby, które poniosły porażkę, robiły to samo co zwycięzcy, te działania nie wyjaśniają sukcesu. Stwierdzenie „Każdy założyciel firmy, który odniósł sukces, pracował po 80 godzin tygodniowo” nic nie mówi, jeśli ci, których firmy upadły, pracowali równie długo.
4. Czy możesz znaleźć dane o całej grupie?
Szukaj liczb uwzględniających wszystkich. W przypadku restauracji przydatnym przykładem jest badanie H.G. Parsy z Ohio State University, opublikowane w 2003 roku. Wykorzystano w nim dane inspekcji sanitarnej dotyczące ponad 2439 restauracji w Columbus w stanie Ohio z lat 1996-1999. Około 26 procent zamknęło się w pierwszym roku, a 59 procent w ciągu trzech lat.
To dane z jednego miasta z końca lat 90., więc traktuj je jako przybliżony punkt odniesienia. Badanie skorygowało też przesadę w drugą stronę: Parsa stwierdził, że popularne twierdzenie, jakoby 90 procent restauracji upadało w pierwszym roku, jest najprawdopodobniej mitem. Dobre dane o całej grupie chronią zarówno przed złudzeniami wywołanymi historiami sukcesu, jak i przed straszącymi mitami.
5. Czy możesz porozmawiać z kimś, komu się nie udało?
Znajdź osobę, która zamknęła sklep, zrezygnowała z programu albo sprzedała dom ze stratą, i zapytaj, co się stało. Takich ludzi trudniej znaleźć, bo mało kto reklamuje własną porażkę. Jedna szczera historia niepowodzenia może jednak nauczyć Cię więcej niż dziesięć dopracowanych historii sukcesu.
Przykład: bar z ramenem Jun-ho
Po weekendzie spędzonym na szukaniu odpowiedzi na pytanie Ha-eun notatki Jun-ho wyglądały tak:
| Pytanie | Co ustalił |
|---|---|
| Jaki filtr zadziałał? | Do podcastu o sukcesie zapraszano właścicieli restauracji, które nadal działały |
| Jak wyglądała cała grupa na początku? | Co roku w jego mieście otwiera się wiele restauracji, ale on znał tylko te sławne |
| Czy ci, którym się nie udało, robili coś inaczej? | Dwóch byłych restauratorów, do których dotarł, również rzuciło dobrą pracę i „postawiło wszystko na jedną kartę” |
| Dane o całej grupie | Badanie z Columbus: około 59 procent restauracji zamknęło się w ciągu trzech lat |
| Rozmowa z kimś, komu się nie udało | Była właścicielka restauracji powiedziała, że czynsz i słaby pierwszy sezon zimowy pochłonęły jej oszczędności |
Najbardziej zaskoczył go ostatni wiersz. Restauracja tej kobiety nie zamknęła się z braku dobrego jedzenia czy zaangażowania. W pierwszym słabszym sezonie zabrakło jej gotówki.
Jun-ho nie porzucił więc pomysłu, tylko zmienił plan. Zachował pracę, przez sześć miesięcy prowadził weekendowy lokal pop-up z ramenem, żeby sprawdzić popyt i ceny, oraz odłożył pieniądze wystarczające na cały rok czynszu. Zamiast „postawić wszystko na jedną kartę”, postanowił „zaryzykować tyle, by przetrwać trudną zimę”. To znacznie mniej porywająca historia, ale o wiele lepszy plan.
Kiedy warto uczyć się od tych, którym się udało?
Błąd przeżywalności nie oznacza, że ludzie sukcesu nie mają niczego do przekazania. Oznacza, że trzeba właściwie korzystać z ich doświadczeń.
- Od tych, którym się udało, warto uczyć się „jak”. Restaurator odnoszący sukces może wyjaśnić, jak negocjować umowę najmu lub szkolić zespół kuchni. To praktyczne umiejętności.
- Trudniej dowiedzieć się od nich, „czy warto”. Odpowiedź na pytanie, czy rzucić pracę albo czy ryzykowna strategia działa, wymaga danych o całej grupie, również o tych, którym się nie udało.
- Szukaj rad, co do których zgadzają się obie strony. Jeśli zarówno właściciele prosperujących lokali, jak i ci, którzy je zamknęli, mówią „zadbaj o dużą poduszkę finansową”, warto potraktować to poważnie.
Prosta zasada: im bardziej inspirująca historia, tym uważniej szukaj ludzi, których w niej nie ma.
Jak ćwiczyć to podejście z AI?
Jeden chatbot potrafi szybko wymienić grupy, których brakuje w danych, ale uczył się na treściach z internetu, a ten jest pełen historii sukcesu. W Debatly kilka modeli AI i postaci dyskutuje nad Twoim pytaniem przez kilka rund. Możesz włączyć się w dowolnym momencie, a sędzia wydaje werdykt z uzasadnieniem. Dzięki temu łatwiej dopuścić do głosu milczące dowody.
- Poddaj historię sukcesu próbie. Wpisz swój plan jako pytanie w pokoju debat, na przykład: „Czy powinienem rzucić pracę i otworzyć restaurację, tak jak właściciele z mojego ulubionego podcastu?”. Poproś Viktora, sceptyka, by wskazał filtr stojący za każdym przykładem przywoływanym przez obie strony.
- Oddaj głos tym, którym się nie udało. Poproś Petrę, adwokatkę diabła, by przedstawiła perspektywę osoby, która zrobiła wszystko jak należy, a mimo to musiała zamknąć lokal. Co według niej poszło nie tak? To sposób na sprawdzenie trzeciego pytania bez udziału kogoś emocjonalnie związanego z Twoim marzeniem.
- Poproś o dane dotyczące całej grupy, a potem je sprawdź. Zapytaj uczestników debaty, jaki odsetek podobnych przedsięwzięć kończy się niepowodzeniem, a następnie samodzielnie znajdź wiarygodne źródło. Każdą liczbę podaną przez AI traktuj jako wskazówkę do sprawdzenia, nie jako fakt.
- Przeczytaj werdykt i jego uzasadnienie. Sędzia Alex wyjaśnia, które argumenty przeważyły. Jeśli jakiś argument wygrał głównie dlatego, że towarzyszył mu inspirujący przykład, sprawdź go za pomocą pięciu pytań.
- Jeśli oceniasz pomysł na biznes, skorzystaj z narzędzia AI do weryfikacji pomysłu na startup i naszego poradnika o sprawdzaniu pomysłu na startup przed rozpoczęciem prac. Pomogą Ci szukać dowodów, które mogą podważyć Twoje założenia. Przyda się też analiza pre-mortem: wyobraź sobie, że Twój plan dołączył do grupy niewidocznych porażek, i zapytaj dlaczego.
Kiedy Jun-ho zadał pytanie o swój bar z ramenem, sceptyk zapytał, przez ile słabych miesięcy wystarczą mu oszczędności. Tydzień później przed dokładnie tym samym ostrzegła go była restauratorka.
Uczciwe zastrzeżenie
Modele AI nie widzą pominiętych przypadków lepiej niż Ty. Mogą jedynie zwrócić uwagę na ich istnienie i pomóc ustalić, gdzie ich szukać. Mają też skłonność do przytakiwania użytkownikowi, o czym piszemy w artykule dlaczego AI się z Tobą zgadza. Potrafią również podawać liczby, które brzmią wiarygodnie, ale są błędne. Wykorzystaj debatę do znalezienia właściwych pytań, a odpowiedzi szukaj w rzeczywistych danych i rozmowach.
Zapytaj o samoloty, które nie wróciły
Błąd przeżywalności rzadko sprawia, że wierzysz w coś absurdalnego. Raczej powoduje, że ryzykowna droga wygląda na sprawdzoną, bo ludzie, którzy nią poszli i ponieśli porażkę, zamilkli.
Zanim w tym tygodniu spróbujesz powtórzyć czyjś sukces, zadaj pytanie Ha-eun: kogo nigdy nie zaproszono do opowiedzenia swojej wersji? Jeśli chcesz dostrzec to, czego brakuje w ważnym dla Ciebie planie, rozpocznij debatę w Debatly i pozwól sceptykowi oraz adwokatce diabła poszukać odpowiedzi. Wypróbuj aplikację. Dostępne plany znajdziesz na stronie cennika.
“Błąd przeżywalności: przykłady i sposób na dostrzeżenie tych, których brakuje”
