한국 서베이 방법론은 왜 1세대 조사회사가 이끌었나?
한국 서베이 방법론은 왜 1세대 조사회사가 이끌었나 — 학계·업계의 제한된 협업과 양방향 정보비대칭
부재한 학위, 부재한 노드
미국과 유럽 일부 국가에는 서베이 방법론(Survey Methodology) 자체를 하나의 학제로 세운 대학원 과정이 있다. 미시간의 MPSM, 메릴랜드의 JPSM, 네브래스카, 유럽의 GESIS, Essex, Utrecht 등이 대표적이다. 이들은 표집, 측정, 무응답, 가중, 총조사오차(TSE) 같은 주제를 독립된 커리큘럼으로 묶어 석·박사를 배출한다.
한국에는 이런 트랙이 사실상 없다. 통계학과에서 표본론의 일부를, 사회학·정치학·심리학과에서 설문 설계와 측정론의 일부를 분산해서 다룰 뿐이고, 스스로를 "서베이 방법론자"로 정체화한 교수는 손에 꼽을 정도다. 학위 과정이 없으니 후속 세대가 자랄 토양 자체가 빈약했고, 결국 학계가 비워둔 자리를 1세대 조사회사들 — 갤럽, 미디어리서치, TNS, 코리아리서치 등 — 이 실질적으로 메웠다. 한국 서베이 방법론의 형성 과정을 이야기할 때 학계가 아닌 업계를 먼저 호명해야 하는 이유다.
그 구도의 양면성
이 구도는 양면을 갖는다.
긍정적인 면은 분명하다. 현장에서 클라이언트 요구와 한국적 조건 — 주민등록 기반 표집틀의 부재, RDD에서 모바일로의 급격한 전환, 짧은 필드 기간, 선거 보도의 실시간성 압력 — 에 부딪히며 다듬어진 방법론이기에 매우 적응적이고 응용력이 강하다. SMS 표집틀, 안심번호, 통신사 패널, 셀가중 같은 한국 특유의 해법들은 학계가 주도했다면 오히려 나오기 어려웠을 가능성이 높다.
부정적인 면은 더 구조적이다. 첫째, 지식이 회사 내부의 암묵지로 축적되어 표준화·문서화·동료심사를 거치지 않는다. 그래서 회사가 바뀌면 같은 문제를 또 푸는 일이 반복된다. 둘째, 비판적 검증의 외부 장치가 부재하다. 미국이라면 AAPOR Standards나 학술지 리뷰가 거르는 것들이 한국에선 그냥 통용된다. 셋째, 후속 인력 양성이 도제식이라 확장성이 없다. 넷째, 1세대 회사들이 영업과 방법론을 동시에 짊어지면서 "팔리는 방법론"과 "맞는 방법론" 사이의 긴장을 내부적으로 해소해야 했고, 그게 늘 잘 되지는 않았다.
제한된 협업의 구조적 원인
학계와 업계의 협업이 제한적인 것은 단순한 인적 교류의 부족이 아니다. 몇 겹의 구조적 원인이 겹쳐 있다.
교수 입장에서 조사회사와의 협업은 학술적 인센티브 구조에 잘 맞지 않는다. SSCI급 저널에 실리려면 방법론적 혁신이나 이론적 기여가 필요한데, 조사회사가 가진 것은 대부분 프로프라이어터리 데이터와 현장 경험이고, 이를 논문화하려면 회사가 데이터를 열어줘야 한다. 그러나 회사는 클라이언트 비밀유지, 경쟁사 견제, 방법론 노하우 보호 때문에 쉽게 열지 못한다.
미국이라면 ANES, GSS, Pew처럼 공개를 전제로 설계된 대형 프로젝트들이 학계-업계 접점 역할을 한다. 한국에서는 KGSS나 한국종합사회조사 정도를 빼면 이런 공공재적 데이터 인프라 자체가 빈약하다. 협업의 매개물이 없는 것이다.
양방향 정보비대칭
여기서 핵심은 정보비대칭이 한 방향이 아니라는 점이다.
흔히 이야기되는 것은 "학계가 현장 데이터를 못 본다"는 비대칭이다. 이것도 물론 사실이다. 그러나 거꾸로 "현장이 최신 방법론 문헌을 못 읽는다"는 비대칭도 똑같이 존재한다. Total Survey Error 프레임워크의 최근 확장, responsive/adaptive design, MRP(Multilevel Regression with Poststratification), 비확률표본의 pseudo-weight 추정법, 머신러닝 기반 imputation 같은 것들은 Survey Methodology, JSSAM, POQ에 꾸준히 실리는데, 한국 현장에서 이를 실시간으로 따라가는 회사는 극소수다.
결과적으로 한국 조사회사의 방법론은 1990~2000년대 초반의 지식 위에 현장 적응물을 얹은 형태로 굳어지고, 학계는 학계대로 현장에서 이미 검증된 한국적 해법을 모른 채 교과서적 원론만 반복한다. 서로가 서로의 20년 전만 알고 있는 기묘한 비대칭이 만들어지는 것이다.
더 나쁜 것은 이 비대칭을 건설적으로 풀 공론장이 없다는 점이다. 학회 발표장에서 만나도 회사 실무자는 영업 가능성을 타진하러 오고, 교수는 제자 취업을 부탁하러 오는 식의 교환이 되기 쉽다. "이 가중 방법이 정당한가"를 놓고 대등하게 싸우는 자리가 되기는 어렵다.
노드의 부재
이 문제를 푸는 방식은 결국 중간자 역할을 하는 개인 혹은 기관의 존재 여부에 달려 있다고 본다. 미국의 경우 Mick Couper, Roger Tourangeau, Frauke Kreuter 같은 이들이 Michigan, Maryland, Mannheim을 오가며 학계와 Westat, NORC, RTI 같은 실무기관을 실제로 연결하는 노드 역할을 한다. 이들은 한쪽에 소속되어 있으면서도 다른 쪽의 언어와 문제의식을 동시에 구사할 수 있고, 그래서 데이터와 지식이 양방향으로 흐른다.
한국에는 이런 노드가 제도화되어 있지 않다. 있다면 대개 개인기에 의존한다. KSDC, 한국조사연구학회, 사회조사분석사 제도 등이 일부 공백을 메우려 시도하고는 있지만, 학회는 학문공동체라기보다 실무자 네트워크 성격이 강하고 자격증은 입문 수준에 머물러 있다. "학위 부재"라는 근본 문제를 대체하지는 못한다.
암묵지를 텍스트로
그래서 당분간 한국의 서베이 방법론에서 가장 시급한 일은 거창한 제도 개혁이 아니라, 1세대가 만든 암묵지를 2세대가 텍스트로 옮기는 작업이라고 생각한다. 문서화되지 않은 지식은 비판될 수 없고, 비판되지 않는 지식은 발전하지 않는다. 3세대가 그 위에서 싸울 수 있으려면 먼저 싸울 대상이 명시적 형태로 존재해야 한다.
학위가 없다는 것, 교수가 없다는 것, 협업이 제한적이라는 것 — 이 세 가지는 앞으로도 당분간 해결되지 않을 가능성이 높다. 그러나 그것이 곧 방법론의 공백을 의미하는 것은 아니다. 공백은 이미 1세대가 메웠다. 다만 그 지식이 회사의 캐비닛과 개별 연구자의 머릿속에 잠겨 있을 뿐이다. 이를 공적 언어로 끌어내는 일 — 이것이 학계와 업계의 비대칭을 장기적으로 해소할 수 있는, 개인이 시작할 수 있는 거의 유일한 경로가 아닐까 한다.
댓글
댓글 쓰기