심슨의 역설은 어떻게 일어날까

심슨의 역설은 데이터의 모든 그룹에서 나타나는 경향이 그룹을 합치면 뒤집히는 현상입니다. 숫자의 속임수가 아니라 하나의 경고입니다. 비교 결과는 누가 어느 그룹에 속하게 되는지를 정하는 제3의 요인에 따라 달라질 수 있습니다. 이 역설이 어떻게 생기는지, 어디에서 발견되었는지, 어떻게 대처해야 하는지 알아봅니다.

각 그룹에서는 올라가지만 합치면 반대 방향을 가리키는 두 묶음의 막대
각 그룹에서는 올라가지만 합치면 반대 방향을 가리키는 두 묶음의 막대

뒤집히는 경향

1995년 데이비드 저스티스의 타율은 데릭 지터보다 높았고(.253 대 .250), 1996년에도 그랬습니다(.321 대 .314). 그런데 두 해를 합치면 지터가 .310 대 .270으로 앞섰습니다. 이유는 지터의 타수 대부분이 그가 잘했던 1996년에, 저스티스의 타수 대부분이 그가 부진했던 1995년에 몰려 있었기 때문입니다. 각 선수의 통산 타율은 타수가 가장 많았던 해 쪽으로 끌려갑니다.

그 뒤에 숨은 산수

전체 성공률은 그룹별 성공률의 가중 평균이고, 가중치는 각 선택지의 사례가 그룹마다 차지하는 비율입니다. 한 선택지는 사례 대부분이 쉬운 그룹에 있고 다른 선택지는 어려운 그룹에 있다면, 이 가중치가 그룹 안의 차이를 압도할 수 있습니다. 신장 결석 연구의 경우 개방 수술은 0.25 × 93.1% + 0.75 × 73.0% = 78.0%, 내시경 수술은 0.77 × 86.7% + 0.23 × 68.8% = 82.6%입니다.

버클리 입학 사례

1973년 가을, 캘리포니아 대학교 버클리는 대학원 남성 지원자의 약 44%, 여성 지원자의 35%를 합격시켰습니다. 피터 비켈, 유진 해멀, 윌리엄 오코널은 학과별로 나누어 데이터를 살펴보고 1975년 《사이언스》에 분석을 발표했습니다. 대부분의 학과에서 여성의 합격률은 비슷하거나 더 높았습니다. 여성은 주로 남녀 모두 합격자가 적은 학과에 지원했고, 이것이 여성의 전체 합격률을 끌어내렸습니다. 가장 큰 여섯 개 학과에서 남성의 합격률은 44.5%, 여성은 30.4%였지만, 여섯 곳 중 네 곳에서는 여성의 결과가 더 좋았습니다.

어느 답이 옳을까

데이터만으로는 정할 수 없고, 데이터가 어떻게 생겨났는지가 답을 정합니다. 그룹을 나누는 요인이 어떤 선택지를 고르는지와 결과 모두에 영향을 준다면, 그것은 교란 변수입니다. 의사들은 치료하기 어려운 큰 결석에 개방 수술을 더 자주 택했으므로, 공정한 비교는 결석 크기별로 해야 합니다. 그룹 자체가 선택지의 결과라면, 예를 들어 치료 후에 잰 측정값이라면, 그것으로 나누면 효과가 가려질 수 있어 합친 수치가 더 나은 길잡이가 됩니다. 컴퓨터 과학자 주디아 펄은 인과 다이어그램으로 이 문제를 해결하는 방법을 보여 주었습니다.

짧은 역사

칼 피어슨과 동료들이 1899년에 이 효과를 알아차렸고, 조지 우드니 율이 1903년에 이를 기술했습니다. 에드워드 H. 심슨은 1951년에 이에 관한 글을 썼고, 통계학자 콜린 블라이스가 1972년에 심슨의 역설이라는 이름을 붙였습니다. 율-심슨 효과, 통합 역설, 역전 역설이라고도 합니다. 의학 임상 시험, 학교 성적, 선거 분석, 스포츠 통계 등 어디에서나 나타납니다.

자주 묻는 질문

심슨의 역설은 어떻게 알아챌 수 있나요?

사례가 그룹에 어떻게 나뉘어 있는지 살펴보세요. 비교하는 선택지들이 성공률이 높은 그룹과 낮은 그룹에 가진 사례의 비율이 크게 다르다면, 전체 비교는 오해를 낳을 수 있습니다. 둘 다에 영향을 줄 수 있는 요인으로 데이터를 나누고, 각 그룹 안에서 성공률을 비교하세요.

그룹이 두 개일 때만 일어나나요?

아닙니다. 그룹이 몇 개든 일어날 수 있고, 연속 데이터에서도 일어납니다. 모든 하위 그룹 안에서는 양인 상관관계가 전체를 합치면 음이 될 수 있습니다. 두 그룹은 그저 가장 쉽게 볼 수 있는 경우일 뿐입니다.

버클리에 성차별이 있었나요?

1975년의 분석은 학과들의 결정에서 여성에 대한 편향을 찾지 못했습니다. 굳이 말하자면 여성에게 약간 유리한 편향이 있었습니다. 전체 격차는 여성이 지원한 곳, 즉 지원자는 많고 자리는 적은 학과에서 비롯되었습니다. 그 학과들의 자리가 너무 적었는지는 합격 수치로 답할 수 없는 별개의 문제입니다.

시도해 볼 준비가 되셨나요?

브라우저에서 PictorX를 엽니다. 설치가 필요 없고 시작하는 데 신용 카드가 필요하지 않습니다.

심슨의 역설 앱 열기