왜곡된 조사 ‘동일 기준’ 비판 필요

지난 한 달간 한국여론평판연구소(KOPRA)라는 조사업체가 논란의 중심에 섰다. 해당 업체가 아시아투데이 의뢰로 지난 1월 3~4일 전국 만 18세 이상 남녀 1000명을 대상으로 진행한 여론조사에서 탄핵 이후 처음으로 윤석열 대통령의 지지율이 40%대를 회복한 것으로 나오자 더불어민주당은 조사업체를 고발하겠다며 격앙된 반응을 보였다. 당장이라도 고발할 것 같던 분위기에 최근 묘한 변화가 감지된다. 모르긴 해도 격앙됐던 야권 반응에 변화가 감지되는 가장 중요한 이유는 실제로 정당 지지율이 박빙이라는 조사 결과들이 나오기 시작했기 때문일 것이다. 가령 절대 ‘보수 편향’으로 볼 수 없는 MBC가 코리아리서치인터내셔널에 의뢰해 지난 1월 27∼28일 실시한 조사에서 민주당과 국민의힘 지지율은 44%와 41%로 박빙이었다. 같은 기관이 지난 1월 초 공개한 조사와 비교하면 민주당은 4% 포인트 감소한 반면 국힘은 12%포인트 상승한 수치였다. KOPRA를 고발하려면 형평성을 위해 MBC나 코리아리서치도 고발해야 한다는 얘기가 되는 것이다.



민주당이 KOPRA를 고발하겠다고 격앙된 반응을 보이자 국힘에서는 필자의 작년 4월 29일자 서울신문 총선 여론조사 분석 결과를 인용하며 “KOPRA가 지난 총선에서 가장 공정한 업체였다”며 반박 자료를 냈다. 그러나 사실 이 또한 완전히 옳은 해석은 아니다. 총선 당시 여론조사가 전반적으로 민주당 후보들의 득표율을 약간 과대 추정한 경향이 있었고 KOPRA는 가장 평균에 가까운 결과를 내놓은 것으로 나타났기 때문에 보수 편향성이 있었다고 볼 근거는 전혀 없었던 것이 사실이다.

그러나 해당 칼럼에서는 국힘과 민주당 지지율 추정값에 존재하는 조사업체별 경향성을 비교한 결과도 제시했는데 이건 좀 달랐다. 논리적으로 보면 조사 방식의 고유한 특성 때문에 양 진영의 강성 유권자들이 모두 과대 표집돼 두 정당 모두의 지지율을 상대적으로 높게 또는 낮게 추정하는 경향이 나타날 가능성이 높다. 실제로 당시 국힘과 민주당 지지율 추정에서의 경향성 간에는 통계적으로 유의미한 양의 상관관계가 있었다. 즉 평균적으로 보면 민주당 지지율을 높게 추정하는 기관들은 국힘 지지율도 높게 추정하는 경향이 있는 것이다. 그러나 여기서 KOPRA는 민주당보다 국힘 지지율을 과대 추정한 경향이 비교적 큰 업체로 분류될 수 있었다. 따라서 정당 지지율 추정만 놓고 보면 KOPRA가 약간의 보수 편향성을 보인 것도 사실이다.

그러나 문제는 같은 기준을 적용해 보면 여론조사꽃, 미디어 토마토 등 일부 조사업체들의 진보 편향성 정도가 KOPRA의 보수 편향성 정도보다 훨씬 더 컸다. 또 넥스트리서치나 NBS(한국리서치·코리아리서치·엠브레인퍼블릭·케이스탯리서치)등 ‘주류’로 분류되는 업체들의 보수 편향성이 KOPRA보다 오히려 더 큰 것으로도 볼 수 있었다. 따라서 KOPRA가 특별히 ‘엉터리’라고 주장하기는 어려운 측면이 있어 민주당에 고민이 있을 수밖에 없을 듯하다. 동일한 기준을 적용한다면 KOPRA뿐 아니라 다른 다수의 업체도 고발해야 할 상황일 수도 있기 때문이다.

과거에도 여론조사에 대한 아전인수 격 해석이 흔했다. 지난 2017년 당시 문재인 대통령 지지율은 무려 80%대에 육박했다. 야당은 ‘문 전 대통령의 훌륭한 국정 운영의 결과’라고 주장하고 싶겠지만 한국 유권자의 이념 지형을 고려하면 상식과 동떨어진 결과였다. 박근혜 전 대통령 탄핵 정국으로 보수가 궤멸한 상태에서도 40% 초반대의 득표율로 당선된 문 전 대통령 지지율이 80%라면 문 전 대통령을 찍지 않은 유권자의 약 3분의2가 문 전 대통령을 지지한다는 얘기인데 이건 유권자 행동 관련 모든 정치학 이론에 배치되는 얘기다. 이 정도면 최소한도 최근 KOPRA 조사가 보수를 과대 표집한 것 이상으로 진보 과대 표집(또는 보수 과소 표집)이 심했을 것으로 추측된다. 하지만 당시 수혜자였던 민주당은 여론조사의 정확성과 관련한 아무런 문제도 제기하지 않았던 것으로 기억한다.



반면 당시 보수 정당의 문제제기도 헛발질에 그쳤다. 당시 홍준표 당대표는 “응답률 30%를 넘지 못하는 조사는 다 엉터리”라며 70~80%대 대통령 지지율을 발표하던 한국갤럽 등을 맹비난했다. 그러나 사실은 당시 응답률이 높은 전화면접 조사가 자동응답방식(ARS)보다 대통령 지지율을 약 10% 포인트 가까이 더 높게 추정하고 있었던 현실을 인지하지 못하고 한 발언으로 보인다. 당시 ARS는 약 60% 중반대, 전화면접 조사는 거의 80%의 지지율이었다. 당시 면접원에게 자신의 정치적 성향을 밝히는 것을 극도로 꺼린 보수 유권자들 다수가 아예 여론조사를 거부해 면접조사의 비표본 오차가 더 두드러지게 된 것으로 보인다. 다시 여야 모두 아전인수 격 여론조사 해석 흑역사의 한 페이지를 장식한 순간이었다.

문재인 정부 시절인 2019년 5월 박근혜 전 대통령 탄핵 여파로 민주당이 자유한국당을 압도하던 시절, 리얼미터의 주간 조사에서 두 정당 간 지지율 차이가 오차범위 내인 1.5% 포인트(업체 측은 ‘주간 평균은 4.4% 포인트 차이였다’는 입장)로 좁혀진 것으로 나오자 기자들이 당시 이해찬 당대표에게 ‘이유가 뭐라고 생각하냐’고 물었고 이 대표는 “다른 조사들과 차이가 크다”며 극도의 불쾌감을 표했다. 실제로 같은 주 한국갤럽 조사가 15.0% 포인트 차이를 보인 것과 극명히 대비됐다.

그런데 묘하게도 해당 업체의 바로 다음주 조사에서 두 정당 간 지지율 차이가 다시 12% 포인트 이상으로 벌어졌다. 같은 기간 한국갤럽의 조사에서는 두 정당 간 지지율 격차가 오히려 1% 포인트 줄었는데 말이다. 필자가 분석해 본 결과 두 업체 간 이런 괴리가 나타난 것은 문·박 전 대통령 임기를 다 합쳐도 거의 전무후무했다. 대체로 조사업체 간 지지율값 자체는 차이가 나더라도 변화의 방향은 유사하기 때문이다.

당시 민주당은 추가적인 문제제기를 하지 않았다. 우선 당시 이해찬 대표는 리얼미터가 김어준씨 지인이 대표로 있는 업체인지 모르는 상태에서 비난했을 가능성이 있다. 더구나 정당 지지율 격차가 1주일 만에 다시 벌어진 데다 결정적으로 사실 리얼미터가 자유한국당 지지율뿐 아니라 문 전 대통령 지지율도 한국갤럽보다 높게 추정하고 있었다. 즉 ARS 조사의 특성상 진보든 보수든 정치 관여도가 높은 집단이 과대 표집돼 나타난 현상이었다. 또 해당 업체가 2017년 대선 때는 안철수 후보 지지율이 급상승해 문재인 후보와 거의 동률이라는 결과들이 나오던 시점에 갑자기 두 후보 지지율 격차를 14.7% 포인트로 발표한 적도 있어 ‘보수 편향성’을 가진 업체로 보기엔 상당한 무리가 있었다. 한마디로 이해찬 총리의 ‘피아 식별’이 잘못된 걸 인지한 민주당이 추가적인 문제제기를 하지 않은 것으로 보인다.

최근 일부 주요 언론이 한국 조사업체들이 윤 대통령 지지율 조사를 중단한 것을 ‘편향적인’ 보도 행태로 비판하며 미국의 조사업체인 모닝컨설트(Morning Consult)가 지난 9일 발표한 자료를 인용해 윤 대통령의 지지율은 긍정 19%, 부정 74%로 24개국 지도자 가운데 22위를 차지했다는 기사를 냈다.

문제는 필자가 탄핵 소추안 통과 이전 조사업체별 경향성을 보정하고 추정했던 결과와 비교해 보면 당시 모닝컨설트가 내놓던 추정값은 약 10~20% 포인트 정도 윤 대통령 지지율을 과소 추정했다는 점이다. 당시 윤 대통령 지지율을 가장 높게 추정하던 ‘여론조사공정’이 평균보다 3.0% 포인트 정도 높게, 가장 낮게 추정하던 ‘넥스트리서치’ 등이 평균보다 불과 2.0% 포인트 정도 낮게 추정했었다. 친야 방송인으로 알려진 김어준 씨가 운영하는 여론조사꽃도 대통령 지지율의 경우 민주당 지지율과는 달리 평균보다 불과 1.4% 포인트 정도밖에 과소 추정하지 않았던 것으로 나타났다. 결국 모닝컨설트와 다른 모든 조사업체들 간 기존 차이를 감안하면 모닝컨설트의 19% 지지율은 현재 윤 대통령 지지율이 30%대 중반대라는 얘기가 돼 버린다.

이런 결론은 해당 언론사가 하고 싶었던 얘기와는 거리가 있을 것이다. 모닝컨설트 홈페이지에서는 ‘조사 방식’에 대한 자세한 기술을 찾을 수 없다. 국가마다 표본 수집 방식도 다르고 같은 방식으로 표집한다 해도 온라인 표본의 대표성이나 비표본 오차 등도 나라마다 달라 결과의 직접 비교가 거의 불가능할 것이다. 가령 현재 국내 언론에 공표되는 대통령 지지율 조사 중 온라인 조사는 거의 없다. 여심위 등록이 요구되는 조사 용역을 온라인으로 수행하겠다는 업체를 찾기가 거의 불가능하기 때문이다. 모닝컨설트 조사도 미등록 조사다. 아마도 한국 조사를 하청받은 온라인 조사업체가 지지 정당을 묻지 않는 방식으로 등록을 회피했을 것으로 보인다.

미국과 달리 국내 온라인 표본의 진보 편향성은 이미 잘 알려져 있다. 즉 같은 ‘60대 이상’이라도 온라인 조사 패널 회사에 등록한 참여자는 상대적으로 상당히 진보적인 성향을 보인다. 인터넷 검색만 해 보면 금방 다 찾을 수 있는 내용이다. 일부 주요 언론에서 이런 기사를 게재한 것은 ‘미필적 고의’에 의한 아전인수식 여론조사 해석으로 봐야 하지 않을까.

기존 사례들을 보면 여야를 막론하고 자신에게 불리한 여론조사만 선택적으로 비판하려다 보면 스텝이 꼬이기 일쑤였다. 더이상 아전인수식 여론조사 해석의 흑역사가 계속돼서는 안 된다. 모두가 왜곡된 모든 여론조사를 동일한 기준으로 비판할 수 있어야 할 것이다.

한규섭 서울대 언론정보학과 교수(정치커뮤니케이션)