"여론조사 믿을 수 없다."라는 말이 횡횡하고 있다. 특히, 문국현 후보 지지층이나 노무현을 지지하는 사람들 중에서 특히 <여론조사>를 믿지 못하겠다는 말들을 하고 있다.
최근에 <응답률>이 낮아서 ?지 못하겠다는 말들을 한다. 과연 여론조사 믿을 수 없을까? 여론조사를 믿을수 없다는 사람들은 <전수조사>(전국민 대상으로 조사)를 하더라고 믿을수 없다고 해야한다. 전국민을 대상으로 조사한다고 해서 여론조사 믿을수 없다는 사람들이 인정을 할까? 전국민을 대상으로 <여론조사>를 한다고 해도 <여론조사>를 믿을수 없다고 할것이다.
이들은 믿을수 없는 이유를 <자신>과 연관된 사람들을 대상으로 믿을수 없는 근거를 댈것이다. 내가 아는 사람들은 그렇지 않던데 왜? 그럴까? 믿을수 없다. <응답률>이 30% 미만이면 여론조사는 공표하는 것이 아니다. 미국이나 선진국들은 공표하지 않는다. 전화부에 등재된 전화는 전국민의 50%미만이고 가정집을 대상으로 하고 있기때문에 주부들과 자영업자들이 다수에 포함되어 믿을수 없다고 한다. 여론조사를 할려면 1인1핸드폰인 상황에서는 핸드폰으로 여론조사를 해야 여론조사로써 믿을 수 있다. 라고 말들을 한다.
"여론조사 믿을수 없다"는 사람은 한마디로 <여론조사>와 <통계>를 모르는 사람들이 하는 이야기 일뿐이다. 여론조사 통계는 믿을 수 있느냐 없느냐의 문제가 아니고 "적극적인 사람들의 의사를 반영하는 수단에 불과하다" 또한 여론조사는 추세를 향방을 보는 지표일 뿐이다
한겨레에서 11월 3차 정기여론조사를 내용으로 여론조사는 단지 "적극적인 사람들의 의사를 반영한다"를 검증해보고자 한다.
<한겨레> 11월 정기 여론조사(3차)
□ 조사개요
▶ 모집단 : 전국 만 19세 이상 남녀
▶ 표본크기 : 1000명(유효표본)
▶ 조사지역 : 전국
▶ 응답자 선정방식 : 2006년 통계청에서 발간된 ‘주민등록인구’에 근거하여
전국을 지역별, 성별, 연령별로 비례할당한 후
전화번호DB를 이용해 조사대상자를 무작위 추출
▶ 자료수집방법 : 구조화된 질문지를 이용한 전화인터뷰
▶ 조사기간 : 2007년 11월17일 토요일
▶ 오차한계 : 95% 신뢰수준에서 ±3.1%포인트
▶ 응답율 : 12.5%
▶ 조사기관 : <리서치플러스>
서울시 서대문구 충정로3가 32-11 엘림넷빌딩4층
▶ 조사의뢰 : 한겨레 신문사
위의 여론조사를 정확히 해석한다면 전국민 19세 이상 남여를 대상으로 2007년 11월 17일 토요일날 1,000명를 지역별,성별,연령별 할당한후 전화번호DB를 이용해 무작위 추출한다면 응답률 12.5%에 95%의 신뢰수준에서 오차범위는 +/- 3.1%포인트 오차가 날것이다
신뢰수준 95%란
위와 같은 방법으로 100번을 조사하던 1,000번을 조사하던 95%는 현재의 여론조사의 결과에 부합한다는 이야기다.
오차범위 +/- 3.1%P는 1,000명을 조사했을때 나타나는 오차범위를 말한다. 2,000명을 조사하면 대략 2%내외의 오차범위를 나타낸다. 이는 통계학적으로 의미가 있다는 말이다.
응답률 12.5%는 이미 여론조사에 포함되어 있는 부분이다. 그러니 응답률 12.5%때문에 여론조사를 신뢰할수 없고 왜곡되어 있다고 말하는 것은 있을수 없다.
어떤이는 여론조사 1,000명을 조사해서 응답율이 12.5%이니 이명박의 지지율이 12.5%*1,000= 125명이 지지를 한다는 얼토당토 하지 않는 이야기를 하는 사람도 있다. 여론조사에서 오차범위 3.1%라는 말만 있어도 대략 1,000여명을 조사했구나 하면 된다.
응답률이란 전화통화자 중에서 여론조사에 응한 사람 1,000명이 될때 까지 [응답자(1,000)/통화자(X)]*100= 응답률(%) 를 말한다. 응답률 20%라고 한다면 5,000명에 여론조사에 응하겠습니까? 물어 1,000명이 여론조사에 응했다는 의미이다.
또하나 많은 사람의 오류는 <통화율>과 <응답률>을 오해하고 있다는 사실이다. 응답률과 통화율이 같다는 생각을 하고 있는데 통화율은 전화를 걸어서 일정시간(벨소리)가 지나면 전화를 끊고 다음 전화를 건다. 대체적으로 통화율은 전화시도횟수의 반정도(50%)가 일반적인 통화율이다. 전화벨이 울리는데 받으러 가니 끊어진 경험들이 있을것이다. 아는 사람이 한 전화나 광고성 전화일수도 있지만 많은 부분은 여론조사를 하기 위한 전화였다고 생각하는 것이 좋다.
결국 응답률 20%인 여론조사는 1만명에 전화를 걸어서 5천명과 통화를 했는데 그중 천명이 여론조사에 응답했다는 의미이다.
여론조사는 전수조사를 하는 방법이 아니고 적극적인 자신의 의사를 표현하는 층의 여론을 조사하는 행위이다. 적극적이지 않는 사람의 여론은 조사대상에서 제외되는 것은 당연한 일이다. 비슷한 시기의 각종의 여론조사에서 후보자의 지지율이 오차가 발생하는 것은 당연하다. 여론조사의 추이를 알고 싶다면 여러조사를 평균해서 보면 대략 여론과 가장 근접한 여론동향이라고 생각하면 된다.
단, 한가지 유의해야 할점은 적극적인 의사의 반영이라는 것을 명심해야 한다. 여기서 적극적이란 정치에 그나마 관심이 있는사람들이란 단서가 따른다. 만약, 본인들이 지지하는 후보자의 지지율이 자신의 예상과 다른 결과를 가져왔다면 자신과 같은 지지자들이 여론조사에는 적극적으로 응답하지 않았다는 의미 일뿐이다. 특히 문국현 후보 지지자들 같은 경우 문국현 후보의 인지도가 낮아서 문국현 후보의 지지율이 낮고 인지율 대비 지지율이 높다고 이야기를 하지만 이는 반은 맞고 반은 틀린말이다.
인지도란? 문국현이라는 이름을 들어 봤는가?를 조사하는 것이 아니고 문국현이란 이름은 물론이거니와 문국현이란 인물의 <도덕성>, <정책>, <능력>, <정치성향>을 <인지도>라는 이름에 함축하고 있는 말이다. 많은 사람들에게 자신의 지인에 대해서 누가 물어본다면 자신있게 알고 있다고 말을 할 수 있겠는가? 당신은 당신의 아내/남편/애인을 사랑하느냐고 물어보는 것 만큼 <인지도>는 포함을 하고 있는 것이다.
그러므로 문국현이나 문국현 지지자들의 "현재 <인지도>가 낮아서 지지율이 낮다"는 말은 반은 맞고 반은 틀린것이 되는 것이다. 문국현이란 사람의 정체를 모르겠다는 표현이 정확하다. 그러므로 그동안 인지도가 낮은 것은 <언론>의 노출여부와는 상관없이 자신의 정체성을 알리는데 주력해야 한다는 말이다. 모호한 문국현의 <정치성향>때문에 발생하는 문제라는 말이 되겠다.
적극적인 의사의 반영임을 반증하는 지표가 한겨레 여론조사문항 15번에 이미 있다.
<표15> 2002년 16대 대선 투표 후보
--------------------------------------------------------------
<문> 귀하께선 지난 2002년 대통령 선거에서 어떤 후보에게 투표하셨습니까?
------------------------------------------------------------------------------------------------------------------------------
BASE:전체응답자 사례수 한나라당 민주당 민주노동당 기타후보 투표권이 투표안함 말할 수 합계
이회창 노무현 권영길 없었음 없음/
모름/
무응답
------------------------------------------------------------------------------------------------------------------------------
[전 체].................... (1000) 34.5 40.9 2.4 .4 9.5 7.9 4.4 100.0
[성별]
남성...................... (500) 35.2 42.4 2.6 .7 9.4 6.1 3.6 100.0
여성...................... (500) 33.8 39.4 2.1 .1 9.7 9.7 5.2 100.0 2002년 대통령 선거에서 어떤후보에 투표하셨습니까?라는 질문이 있다. 그런데 전체 사례 1,000명중에서 34.5%가 이회창에 40.9%가 노무현에 투표하였고 투표권없음이 9.5%이고 투표를 하지 않았다는 여론이 7.9%이다. 투표권이 없음이란 2002년 당시 20세 미만이였고 현재 19세에서 24세연령층을 말한다. 이는 인구비례 할당을 하였으니 극히 정상적인 샘플링이다. 그렇다면 2002년 당시 대선의 투표율 70.8% 과 득표율을 계산해보자 (표1) 제 16대 대통령 선거 득표율과 한겨레조사 및 2007년 대선환산 득표율 16대 대선 득표율 한겨레 여론조사(11.17) 2007 환산득표율 이회창 32.7 34,5 27~29 노무현 34.3 40.9 29~31 권영길 2.7 2.4 2 기타 .4 0.2 투표권없음 9.5 9.5 무응답 4.4 4.4 비투표 29.2 7.9 7.9 실질비투표 29.2 (17.4~21.8) 38~
2002년 비투표자가 29%였는데 한겨레 여론조사에는 무응답층과 비투표자를 합하더라도 14.3%에 불과하다. 또한 2002년 투표권이 없었던 9.5%(현재 19~24세)는 반영이 되지 않았다. 이를 반영하더라도 비투표자는 24.8%에 불과하다. 정상적인 비례형태라면 29.2+9.5(약) = 38%가 비투표자에 포함되야야 하지만 실제는 38%-24.8% = 13.2%만큼 오차가 보여진다.
2002년 대선득표율을 2007년 현재로 환산하면 각후보들의 득표율은 8~10%정도를 차감해야 된다. 그러나 여론조사는 <적극적>인 사람들을 대상으로 하고 있기 때문에 한겨레 조사에서 실질적으로 비투표율이 38%가 되야 함에도 불구하고 무응답(4.4%)를 포함하고 불구하고 21.8%밖에 나타나지 않고 있다. 비투표자와 투표자의 비율이 16%이상 차이가 나오고 있는 것은 오히려 정상적으로 보인다.
최근의 대선여론조사는 정치에 관심이 있는 사람들이 더 많은 여론조사 대상에 잡히는 것은 어쩌면 당연한 일이다. 또한, 이전 대선에서 투표한 행위자들이 여론조사에 2002년 투표율보다 더 많이 잡히는 것 또한 당연하다. 이들이 결국에는 이번 대선에서도 투표소에 가서 투표를 할 확률이 정치무관심이나 비적극적인 사람보다 투표소에 가서 투표할 행위자 보다 높게 나오는 것 이다.
위의 한겨레조사나 최근 여론조사에서 노무현에 투표했던 사람들이 더 많이 여론조사에 노출되는 것은 일종의 노무현에 대한 반감이 심하다는 것을 알수 있는 상황이다. 노무현 심판론이 어느정도 먹히고 있다고 보면 딱이다. 많은 사람들이 "노무현을 찍었던 손목아지를 잘라버리겠다"고 벼르며 이회창이나 이명박을 지지하고 있으니 말이다.
문제는 정동영과 노무현은 다른 사람임에도 불구하고 <참여정부 심판론>으로 복수를 노무현에 하지 않고 정동영에 한다는 사실이다. 종로에서 빰맞고 한강에 화풀이를 하는 형국이다. 물론, 평화/민주/개혁세력의 정동영도 노무현때문에 똥물을 뒤집어쓴 형국이다. 일종의 참여정부에서 일정한 역활을 수행한 것은 틀림이 없지만 참여정부의 중요 실패원인은 노무현과 친노로 대변되는 청와대세력이다.
정동영을 비롯한 평화/민주/개혁/진보세력은 한때 동지라고 믿었던 노무현정부에 참여를 했다는 이유만으로 똥물을 뒤집어 쓰고 덤태기를 썼다고 보면 맞다. 이것도 정동영의 자업자득이니 이를 해결할 사람도 정동영을 비롯한 평화/민주/개혁/진보 세력이 할일이지 않을까한다.
다시 본론으로 들어가서
"<응답율>이 낮아서 믿을 수 없다"는 말은 더욱 <여론조사>를 적극적인 사람들만의 <여론조사>로 만드는 악순환구조를 만드는 것이다.
응답률 낮아서 여론조사에 참여하지 않는다 -> 지지후보의 지지율은 떨어지고 응답율이 낮아진다. -> 응답율이 낮으니 다시 여론조사를 불신한다.
최근 여론조사에서 응답율이 30%가 넘는다면 오히려 여론조사를 불신할것이다. 여론조사를 조금이라도 아는 사람은 현재 여론조사에서 응답률 30%넘기가 더 어렵다는 것을 알고 있다. 모르는 사람들이나 응답률 30%타령을 하다 망했다. 대표적인 사람이 참여정부와 청와대와 친노후보라는 이해찬과 유시민과 한명숙 등이다.
<여론조사>가 오류가 있고, 믿기 어렵다는 불신 보다는 여론조사에 적극참여해서 자신의 견해를 밝히는 것이 여론조사에서 보다 자신이 지지하는 후보의 지지율을 높이는 방법이다.
여론조사 1,000명을 조사전화가 왔는데 "여론조사는 믿을 수 없다"라고 무시를 하고 조사에 응하지 않는다면 자신과 견해가 다른 사람이 대신 여론조사에 참여를 한다. 1,000명중 1명이 여론조사에 적극참여를 한다면 여론대상 한명은 0.1%의 지지율을 높일 수 있다.
반대로 여론조사를 무시하고 참여를 하지 않는다면 다른 후보를 지지하는 사람이 조사에 응하게 됨으로 상대적으로 지지하는 후보의 지지율은 0.2%를 벌리게 되는 것이다. 그리고 적극적인 여론조사 참여가 <응답율>을 높이고 자신이 지지하는 후보의 지지율을 높이는 상승효과(밴드웨건)효과를 발휘한다는 말이다. 그러니 주위에서 여론조사를 불신하는 사람들이 있다면 X도 모르는게 나선다고 머리를 쥐어박아야 마땅하다.
PS. 한겨레 여론조사에서 잘못된 표본을 추출한 부분은 있다. 2006년 전국인구 지역비례 할당으로 조사를 했다고 했지만, 실제로 남/여 성비가 여성이 남성보다 많다. 그런데 한겨레 조사에서는 50대 50으로 구성하였다.
관련글
KBS 선거법위반으로 고발한다.
'이슈앤 > 여론조사' 카테고리의 다른 글
| 여론조사는 믿음의 영역이 아니다. (12) | 2007.11.20 |
|---|---|
| 여론조사, PK 후보론.. 김혁규를 띄우려하는가? (9) | 2007.07.26 |
| 여론조사, PK 후보론.. 김혁규를 띄우려하는가? (9) | 2007.07.26 |
| 광주지역 민심탐방기 (12) | 2007.07.24 |
| 한겨레 신문 여론조사 분석 (8) | 2007.07.24 |