여론조사의 부활: 2024 미국 대선 조사는 어떻게 '위기'를 '정확도'로 바꿨나? (AAPOR 보고서 심층 요약)
2016년과 2020년, 미국 대선 여론조사는 "트럼프의 숨은 표(Shy Trump)"를 잡아내지 못하며 '여론조사 위기론'에 시달렸습니다. "더 이상 조사는 믿을 수 없다"는 회의론이 팽배했던 2024년, 결과는 어땠을까요? 최근 미국여론조사협회(AAPOR)가 발간한 2024년 대선 여론조사 평가 보고서에 따르면, 이번 대선은 "여론조사가 신뢰를 회복한 해"이자 "조사(Survey)가 공학(Engineering)으로 진화한 분기점"이었습니다. 보고서의 핵심 내용을 4가지 포인트로 정리해 봅니다. 1. 성적표: 수십 년 만에 가장 정확했다 가장 먼저 눈에 띄는 것은 극적으로 개선된 정확도 수치입니다. 단순히 "맞췄다" 수준이 아니라, 오차 범위를 대폭 줄였습니다. 오차의 급격한 감소: 선거 직전 2주간 실시된 조사의 평균 절대 오차는 3.3%포인트 였습니다. 이는 2020년(5.3%p)과 2016년(5.2%p)에 비해 오차를 약 40% 가까이 줄인 성과입니다 . 주(State) 단위 조사의 부활: 특히 선거인단 승부를 가르는 경합주 조사가 중요했는데, 이번 주 단위 조사의 정확도는 1944년 이후 가장 정확한 수준(평균 오차 3.0%p)을 기록했습니다 . 편향(Bias)의 축소: 여전히 민주당 지지율을 실제보다 높게 예측하는 경향은 있었으나(+2.7%p), 2020년(+4.6%p)에 비하면 그 '거품'이 절반 수준으로 빠졌습니다 . 2. 승리 요인: '어떻게 묻느냐'보다 '어떻게 계산하느냐' (The Engineering) 많은 사람들이 "전화 대신 온라인으로 해서 맞춘 것 아니냐?"라고 묻지만, 보고서는 "단일한 해결책(Silver Bullet)은 없었다"고 말합니다 . 대신, 데이터를 다루는 공학적 접근(Engineering)이 승패를 갈랐습니다. ① 믹스 방법론 (Mix...