웹서베이는 혼자 설 수 없다

조사개요에 표집틀과 함께 푸쉬 방법을 적어야 하는 이유

조사 모드를 나열할 때 대면면접, 전화, 우편, 웹을 같은 급으로 놓는다. 그런데 웹은 나머지 셋과 성립 조건이 다르다. 대면면접은 주소 명부를 들고 찾아가 그 자리에서 면접을 마친다. 전화는 번호로 걸어 연결된 통화 안에서 조사가 끝난다. 우편은 봉투를 배달하는 행위가 곧 설문지 전달이다. 대상자에게 도달하는 수단과 응답을 받아내는 수단이 한 몸이다.

웹만 그렇지 않다. 웹에는 대상자를 호출할 자기 주소 체계가 없다. 표본에 포함된 사람의 브라우저를 조사기관이 열 수 없으니, 링크를 건네줄 별도의 통로가 반드시 하나 더 붙는다. 문자, 이메일, 우편 안내문, 전화 안내, 현장 QR 가운데 무엇이든 하나는 있어야 웹조사가 시작된다.

표 1. 모드별 접촉 수단과 응답 수단

조사 모드	접촉 수단	응답 수단
대면면접	주소 명부로 가구 방문	방문한 그 자리에서 면접
전화조사	전화번호로 발신	연결된 통화 안에서 면접
우편조사	주소로 봉투 배달	배달된 설문지에 기입
웹조사	문자, 이메일, 우편 안내문, 전화 안내, 현장 QR 등 별도 채널 필요	모바일·PC 브라우저에서 자기기입

 

조사방법론 문헌이 contact mode와 response mode를 구분해 쓰는 이유가 여기에 있다. push-to-web이라는 설계 이름 자체가 웹이 홀로 서지 못한다는 사정을 이름에 담고 있다.

예외로 보이는 경우가 둘 있는데 둘 다 예외가 아니다. 오픈 링크나 배너 모집은 웹 안에서 접촉까지 해결하지만 표집틀을 포기한 대가로 그렇게 된다. 온라인 패널은 조사 시점에 별도 푸쉬가 없어 보여도 패널 모집 단계에서 다른 채널로 푸쉬를 미리 해둔 것이라 시점만 앞당겨졌을 뿐이다. 확률표본을 유지하면서 웹이 단독으로 서는 설계는 없다.

표집틀만 적으면 조사가 복원되지 않는다

표집틀과 푸쉬 채널은 서로를 함축하지 않는다. 같은 표집틀이라도 푸쉬가 달라진다. 주민등록 주소 표본을 우편 안내문으로 밀 수도 있고 조사원이 방문해 QR을 건넬 수도 있다. 같은 푸쉬라도 표집틀이 달라진다. 문자 발송이라 해도 통신사 마케팅 수신동의 가입자 DB일 수도, 기관 회원 명부일 수도, 과거 조사 참여자 명부일 수도 있다. 표집틀만 적으면 어떻게 도달했는지 알 수 없고, 발송 채널만 적으면 누가 도달 대상이었는지 알 수 없다.

그런데 국내 보고서의 조사개요는 대체로 "조사방법: 모바일 웹조사" 한 줄로 끝난다. 이 한 줄로는 옵트인 패널 조사와 문자 발송 조사가 구분되지 않는다. 응답자 성질이 전혀 다른 두 조사가 개요에서 똑같이 표기되니 웹조사끼리 응답률이나 표본 구성을 나란히 놓고 비교하는 일이 성립하지 않는다.

응답률의 분모가 정의되지 않는다

발송인원 대비 완료 인원으로 응답률을 계산한다면, 그 발송이 몇 명에게 몇 회 나갔는지가 개요에 없을 때 숫자가 공중에 뜬다. URL 접근자를 분모로 잡는 방식은 값이 과대해져 부적절하다. 어느 정의를 쓰든 정의를 밝히려면 푸쉬 정보가 있어야 한다.

커버리지 평가도 마찬가지다. 통신사 마케팅 수신동의 가입자라는 표집틀에서 생기는 누락과, 문자 미수신이나 수신거부에서 생기는 접촉 실패는 발생 원인도 보정 방법도 다르다. 채널을 적지 않으면 성격이 다른 두 오차가 하나로 뭉쳐 "웹조사의 한계"라는 말로 뭉뚱그려진다.

비용 구조도 푸쉬가 정한다. 응답 수집의 한계비용은 0에 가깝지만 발송은 물량에 비례한다. 웹조사 단가를 좌우하는 것은 웹이 아니라 발송이다. 개요에 발송량이 없으면 조사 규모를 읽을 근거도 함께 사라진다.

조사개요 기재 예시

문자 발송형 모바일 웹조사라면 다음 정도로 적을 수 있다.

조사 대상	전국 만 18세 이상 남녀
표집틀	통신사 마케팅 정보 수신동의 가입자 DB
접촉(푸쉬) 방법	문자(LMS) 발송, 성·연령·지역 조건을 지정한 타겟 발송
응답 방식	모바일 웹 자기기입
발송	2026년 0월 0일 1차 00,000명(발송 성공 기준), 리마인더 1회 0,000명
응답	완료 1,000명, 응답률 0.0%(발송 성공 인원 대비 완료 인원)
표본오차	95% 신뢰수준에서 ±3.1%p
가중치	성·연령·지역 셀 가중

 

발송량과 리마인더 회차까지 적으면 응답률의 분모가 확정되고 다른 조사와 비교할 근거가 생긴다. 푸쉬가 둘 이상이면 채널별로 나눠 적는 편이 낫다. 문자와 이메일을 섞으면 채널마다 응답자 구성이 달라져 사실상 혼합조사에 가까워지는데, 합계만 적으면 그 차이가 보이지 않는다. 전화로 안내한 뒤 문자를 보내는 방식도 개요에서는 웹조사 한 줄로 뭉개지기 쉽다.

남는 문제

선거여론조사 공개 서식에는 발송 채널을 적는 칸이 따로 없다. 피조사자 선정방법 항목이 사실상 표집틀 자리인데, 푸쉬는 그 안에 끼워 쓰거나 생략된다. 서식이 바뀌지 않는 한 기재 여부는 조사기관의 재량에 남는다.

공개를 꺼릴 이유도 있다. 발송량을 그대로 적으면 응답률이 낮은 수치로 노출되고 단가 구조도 짐작 가능해진다. 본문 조사개요에는 채널과 표집틀까지 쓰고 발송량과 리마인더 회차는 방법론 부록으로 내리는 방식이 현실적인 타협이다.

그래도 방향은 분명하다. 웹조사는 모드 이름 하나로 설명되지 않는 조사다. 두 개의 통로가 겹쳐 하나의 자료를 만들어내니 조사개요에도 두 줄이 필요하다.