Published on
약 3분

돌아온 비행기만 세면 안 되는 이유: 생존 편향

Authors
  • Name
    스타차일드

2차 세계대전 중 미국 컬럼비아 대학교에는 군의 의뢰로 수학 문제를 푸는 작은 조직이 있었다. 통계연구그룹이라는 이 모임에서 일하던 헝가리 출신 통계학자 아브라함 왈드(Abraham Wald)는 이런 질문을 받았다고 전해진다. 임무를 마치고 돌아온 폭격기들을 살펴보니 총알 자국이 동체와 날개에 몰려 있다. 철판을 덧대면 비행기가 무거워지니 꼭 필요한 곳에만 대고 싶다. 어디에 대야 하는가.

수학자 조던 엘런버그(Jordan Ellenberg)가 책에서 이 이야기를 소개하며 든 표는 대략 이렇다.

돌아온 비행기의 면적당 총알 자국 수

엔진1.11

가장 적게 맞은 곳이 가장 위험한 곳이었다

연료 계통1.55
동체1.73
나머지 부분1.8
엘런버그가 『틀리지 않는 법』에서 이 이야기를 설명하며 예로 든 수치. 단위는 제곱피트당 총알 자국 수다.

군인들의 직관은 많이 맞은 곳을 보강하자는 쪽이었다. 왈드의 답은 반대였다. 총알은 비행기의 어디에나 비슷하게 날아들었을 것이다. 그런데 돌아온 비행기의 엔진에는 총알 자국이 적다. 엔진에 맞은 비행기는 돌아오지 못했기 때문이다. 철판은 자국이 없는 곳, 엔진에 대야 한다.

실제 왈드의 작업은 이 일화보다 훨씬 수학적이었다. 그는 살아 돌아온 비행기의 손상만으로 부위별 취약성을 거꾸로 추정하는 방법을 보고서로 정리했다. 하지만 일화가 전하는 핵심은 정확하다. 눈앞의 자료는 이미 한 번 걸러진 자료다. 걸러 낸 체가 무엇인지 모르면 결론은 거꾸로 나온다.

살아남은 것만 보이는 곳들

생존 편향은 실패한 사례가 기록에서 사라질 때 생긴다. 사라진 쪽은 대개 조용하다. 그래서 의식하지 않으면 보이지 않는다.

보이는 것보이지 않는 것그래서 생기는 착각
대학을 그만두고 크게 성공한 창업자대학을 그만두고 평범하게 사는 훨씬 많은 사람중퇴가 성공의 비결처럼 보인다
지금 운용 중인 펀드의 10년 수익률성적이 나빠 문을 닫거나 합병된 펀드펀드의 평균 성적이 실제보다 좋아 보인다
100년 넘게 버틴 옛 건물일찍 무너지거나 헐린 옛 건물옛날 건물이 더 튼튼하게 지어진 것처럼 보인다
높은 곳에서 떨어지고도 병원에 온 고양이병원에 오지 못한 고양이높은 곳에서 떨어질수록 덜 다치는 것처럼 보인다

마지막 줄은 실제 연구에서 나온 이야기다. 1987년 뉴욕의 동물 병원 수의사들은 고층 건물에서 떨어져 실려 온 고양이 132마리를 분석해 논문을 냈다. 7층 정도까지는 높을수록 다친 정도가 심해졌는데, 그보다 높은 곳에서 떨어진 고양이는 오히려 덜 다쳤다. 고양이가 떨어지는 동안 몸을 펴서 낙하산처럼 속도를 줄인다는 설명이 나왔다. 그럴듯하다. 그러나 비판도 곧 뒤따랐다. 아주 높은 곳에서 떨어져 그 자리에서 죽은 고양이는 병원에 오지 않는다. 병원 기록에는 살아남은 고양이만 남는다.

펀드도 같다. 금융 정보 회사가 내는 펀드 성적표는 대개 지금 살아 있는 펀드만 모은다. 성적이 나빴던 펀드는 조용히 청산되거나 다른 펀드에 합쳐져 통계에서 빠진다. S&P 다우존스 지수가 해마다 내는 SPIVA 보고서는 10년, 20년 사이에 미국 주식형 펀드의 상당수가 이렇게 사라진다는 것을 보여 준다. 살아남은 펀드의 평균만 보면 펀드 매니저의 실력은 실제보다 좋아 보인다.

서버 로그도 살아남은 요청만 남긴다

개발자의 하루에도 생존 편향은 자주 끼어든다.

  • 앱 리뷰와 고객 의견은 서비스를 아직 쓰고 있는 사람의 목소리다. 불편해서 떠난 사람은 대개 아무 말도 남기지 않는다.
  • 에러 로그가 깨끗하다고 서버가 건강하다는 뜻은 아니다. 로그를 남기는 코드에 닿기도 전에 죽은 요청, 시간 초과로 끊긴 연결은 기록되지 않는다.
  • 가입 절차를 끝까지 마친 사용자만 분석하면, 가입 화면에서 무엇이 사람을 쫓아냈는지는 영원히 알 수 없다.
  • 잘 돌아가는 오래된 코드를 보고 옛날 방식이 더 견고했다고 말하기 쉽지만, 그 시절에 쓰다 버린 코드는 이미 저장소에서 지워졌다.

체를 먼저 찾는다

생존 편향을 피하는 방법은 단순하다. 결론을 내기 전에 자료가 어떤 체를 통과했는지 먼저 묻는 것이다. 이 표본은 누구를 세었는가. 누가 세어질 기회조차 없었는가. 사라진 사례를 직접 모을 수 없다면, 적어도 그들이 어떤 모습이었을지 상상해 보는 것만으로도 결론의 방향이 바뀐다.

성공한 사람의 습관을 담은 책이 서점에 가득한 것은 이상한 일이 아니다. 같은 습관을 가지고도 실패한 사람은 책을 쓰지 않을 뿐이다. 왈드라면 그 책들의 빈 곳을 먼저 읽었을 것이다.

참고한 자료

  • Abraham Wald, A Method of Estimating Plane Vulnerability Based on Damage of Survivors, Statistical Research Group, Columbia University (1943). 1980년 미 해군분석센터가 다시 펴냄
  • Marc Mangel, Francisco J. Samaniego, "Abraham Wald's Work on Aircraft Survivability", Journal of the American Statistical Association 79(386) (1984)
  • Jordan Ellenberg, How Not to Be Wrong, Penguin Press (2014). 한국어판 『틀리지 않는 법』
  • Wayne O. Whitney, Cheryl J. Mehlhaff, "High-rise syndrome in cats", Journal of the American Veterinary Medical Association 191(11) (1987)
  • S&P Dow Jones Indices, SPIVA U.S. Scorecard

시리즈

숫자의 함정 (2/5)

평균, 표본, 지표가 사람을 속이는 방식을 실제 사례로 따져 보는 글

  1. 1평균이 거짓말하는 법: 심슨의 역설
  2. 2돌아온 비행기만 세면 안 되는 이유: 생존 편향
  3. 3240만 명에게 묻고도 틀린 여론조사
  4. 4지도 한 장이 콜레라를 멈췄다: 존 스노와 브로드가의 펌프
  5. 5세상의 숫자는 왜 1로 시작하는 게 많을까: 벤포드의 법칙

기술 라이브러리

혼자 공부한 것을 정리해 두는 개발자의 서재예요. 예제는 직접 돌려 보고 씁니다.

© 2026 기술 라이브러리