실제 사례 두 가지
사례 1. 240만 명이 답했는데 틀린 여론조사: 1936년 리터러리 다이제스트
미국 잡지 리터러리 다이제스트는 1936년 대통령 선거 전에 약 1,000만 명에게 모의 투표용지를 보냈고 약 238만 명이 응답했습니다. 결과는 공화당 랜던의 승리(득표율 약 57%) 예측이었지만, 실제로는 루스벨트가 약 60.8%를 얻어 압승했습니다(위키백과 기준). 원인은 표본 크기가 아니라 구성이었습니다. 잡지 구독자와 자동차 소유자, 전화 가입자 명단에서 뽑았기 때문에 당시 평균 미국인보다 부유한 층이 많았고, 응답한 사람 중에는 루스벨트에 강하게 반대하는 사람이 더 많았다는 무응답 편향도 지적됩니다. 같은 해 조지 갤럽은 약 5만 명 표본으로 오차 약 1.4%p 안에서 결과를 맞혔다고 정리됩니다.배울 점: 표본이 수백만 명이어도 뽑는 방식이 치우치면 결과는 틀리고, 더 작은 표본이 더 정확할 수 있습니다.
사례 2. 전수와 표본을 함께 쓰는 제도: 인구주택총조사
통계청이 실시하는 인구주택총조사는 기준일이 실시 연도 11월 1일입니다. 위키백과 기준으로 현장 조사를 하는 해는 연도 끝자리가 0 또는 5인 해이며, 2015년 총조사부터 전수 부문(등록센서스)과 표본 부문(전 국민의 20%)으로 나뉘었고 2015년에는 5년 전보다 표본 수를 두 배로 늘렸다고 합니다. 모든 사람에게 모든 질문을 하는 대신, 행정자료로 확인되는 기본 항목은 전수로, 자료에 없는 세부 항목은 표본으로 얻는 방식입니다.배울 점: 전수와 표본은 둘 중 하나를 고르는 문제가 아니라 비용과 정확도, 필요한 정보의 종류에 따라 조합하는 도구입니다.
오차범위 직접 계산해 보기
단순 무작위 표본에서 지지율 50% 부근의 95% 신뢰수준 오차범위는 대략 1.96 × √(0.25 ÷ n)입니다. 계산해 보면 다음과 같습니다. 표본이 4배가 되어야 오차가 절반으로 줄어든다는 점에 주목하세요.
| 표본 크기(n) | 95% 신뢰수준 오차범위(근사) |
|---|---|
| 100명 | 약 ±9.8%p |
| 400명 | 약 ±4.9%p |
| 1,000명 | 약 ±3.1%p |
| 2,000명 | 약 ±2.2%p |
| 4,000명 | 약 ±1.6%p |
가상 예시: 1,000명을 단순 무작위로 조사해 A후보 지지율 42%, B후보 38%가 나왔다고 합시다. 각각 ±3%p 안팎이므로 구간이 겹치고, 4%p 차이만으로 A가 앞선다고 단정하기 어렵습니다. 실제 여론조사는 지역·연령별 가중치 등을 쓰기 때문에 공식 오차범위는 위 근사값과 조금 다를 수 있습니다.
직접 확인하기: 숫자를 볼 때 체크리스트
- 모집단이 무엇인가(전체 국민인지, 특정 연령층인지)?
- 표본을 어떻게 뽑았는가(무작위인지, 자발적 참여인지)?
- 표본 크기, 응답률, 오차범위와 신뢰수준이 적혀 있는가?
- 차이가 오차범위 안이면 "차이가 있다"고 말하지 않았는가?
- 하위 집단(예: 20대만) 결과는 표본이 더 작아 오차가 훨씬 커진다는 점을 감안했는가?
흔한 오해와 정정
- 오해: 표본이 크면 항상 정확하다. 실제: 1936년 사례처럼 표본이 치우치면 크기가 소용없습니다.
- 오해: 전수조사는 오류가 없다. 실제: 응답 누락, 거짓 응답, 입력 오류 등 표본오차 외의 오류는 전수에서도 생깁니다.
- 오해: 신뢰수준 95%는 이 결과가 맞을 확률이 95%라는 뜻이다. 실제: 같은 방식을 반복할 때 구간이 실제 값을 포함하는 비율이 95%라는 뜻입니다.
- 오해: 오차범위는 조사의 모든 오류를 포함한다. 실제: 무작위 표집에서 생기는 우연 오차만 반영합니다.
한계와 더 알아볼 점
오차범위 공식은 단순 무작위 표집을 가정합니다. 온라인 패널, 전화 조사 등에서는 응답률이 낮아 가중치 보정에 의존하며, 이 보정이 얼마나 잘 되었는지는 조사마다 다릅니다. 이 글은 일반 정보이며, 개별 조사의 방법론은 조사 기관의 공개 자료를 확인해야 합니다. 표본 크기와 결과의 우연성을 함께 이해하려면통계적 유의성 알아보기가 도움이 됩니다.
자주 묻는 질문
표본조사는 전수조사보다 항상 부정확한가요?
꼭 그런 것은 아닙니다. 표본이 무작위로 충분한 크기로 뽑혔다면 전체를 상당히 정확하게 추정할 수 있고, 전수조사도 응답 누락 같은 오류가 있을 수 있습니다.
여론조사 결과를 볼 때 오차범위를 꼭 확인해야 하나요?
네, 두 후보의 지지율 차이가 오차범위보다 작다면 그 차이가 실제로 의미가 있는지 확신하기 어려우므로 오차범위를 함께 확인하는 것이 좋습니다.
표본 크기를 두 배로 늘리면 오차가 절반이 되나요?
아닙니다. 오차는 표본 크기의 제곱근에 반비례하므로 오차를 절반으로 줄이려면 표본을 약 4배로 늘려야 합니다. 위 표에서 1,000명(±3.1%p)과 4,000명(±1.6%p)을 비교해 보세요.
모집단과 표본은 무엇이 다른가요?
모집단은 알고 싶은 대상 전체(예: 유권자 전체)이고, 표본은 그중에서 실제로 조사한 일부입니다. 표본의 결과로 모집단의 값을 추정합니다.
자발적으로 참여하는 온라인 투표도 표본조사인가요?
참여자가 스스로 선택해 모인 것이므로 무작위 표본이 아니며, 그 결과를 전체 의견으로 읽으면 편향 위험이 큽니다. 오차범위도 의미 있게 계산하기 어렵습니다.