사회과학 연구방법론-9 고급 조사방법론

고급 조사방법론 (Advanced Survey Research Methods)

주제: 자료 수집의 전략과 총 조사 오차의 통제 (Data Collection Strategies & Managing Total Survey Error)

---

[Part 1] 자료 수집 방법의 결정: '어떻게' 물을 것인가?

목표: 연구의 성격, 예산, 모집단의 특성에 따른 최적의 자료 수집 모드(Mode)를 결정한다.

1. 자료 수집 모드의 분류 기준

• 조사원 개입 여부:
  • 조사원 관리형 (Interviewer-Administered): 면접 조사, 전화 조사. (통제 가능, 사회적 바람직성 편향 위험)
  • 자기 기입형 (Self-Administered): 우편 조사, 웹 조사, 모바일 조사. (익명성 보장, 낮은 응답률 위험)
• 기술의 활용:
  • PAPI (Paper) → CAPI (Computer Assisted Personal Interviewing) / CATI (Telephone) / CAWI (Web).

2. 주요 모드별 심층 비교

구분	대면 면접 (Face-to-Face)	전화 조사 (Telephone)	웹/모바일 조사 (Web/Mobile)
장점	높은 응답률, 긴 설문 가능, 복잡한 질문 가능	신속성, 중앙 통제 용이, 중간 정도의 비용	저비용, 데이터 입력 자동화, 멀티미디어 활용
단점	막대한 비용, 시간 소요, 조사원 편향	커버리지 오차(유선전화 부재), 짧은 설문만 가능	낮은 응답률, 대표성 문제(인터넷 미사용자 배제)
적합성	국가 통계, 심층적 연구, 노인층 대상	여론 조사, 간단한 마케팅 조사	특정 집단(직장인, 학생), 패널 조사

3. 최신 트렌드: 혼합 모드 (Mixed-Mode) 설계

• 정의: 응답률을 높이기 위해 두 가지 이상의 방법을 병행하는 것.
• 전략 예시:
  • 순차적 접근: 웹 조사 링크 발송(저비용) → 무응답자에게 전화 독려 → 최후에 우편 설문 발송.
• 주의점: '모드 효과(Mode Effect)'
  • 동일한 질문이라도 전화로 물었을 때와 웹으로 물었을 때 응답이 달라지는 현상. (데이터 병합 시 통계적 보정 필요)

---

[Part 2] 총 조사 오차 (Total Survey Error: TSE) 프레임워크

목표: 자료 수집 과정에서 발생하는 오차를 체계적으로 분류하고 통제한다. (대학원 수준의 핵심 개념)

1. 표집 오차 (Sampling Error) vs. 비표집 오차 (Non-sampling Error)

• 자료 수집 단계에서는 비표집 오차를 줄이는 것이 핵심이다.

2. 자료 수집 관련 3대 오차

1. 커버리지 오차 (Coverage Error):
   • 원인: 표집틀(Sampling Frame)과 실제 모집단의 불일치.
   • 예시: 웹 조사를 할 때 인터넷을 쓰지 않는 노인층이 원천 배제됨.
2. 무응답 오차 (Non-response Error):
   • 단위 무응답(Unit Non-response): 아예 조사에 참여하지 않음.
   • 항목 무응답(Item Non-response): 특정 질문(소득 등)에만 대답 안 함.
   • 위험: 응답자와 무응답자 간에 **체계적 차이(Systematic Difference)**가 있을 때 연구 결과는 편향됨.
3. 측정 오차 (Measurement Error):
   • 원인: 설문지의 워딩, 조사원의 태도, 응답자의 기억력 한계.
   • 해결: 사전 조사(Pre-test)와 조사원 표준화 교육.

---

[Part 3] 응답의 심리학: 그들은 왜 응답하는가?

목표: 딜먼(Dillman)의 사회교환이론을 바탕으로 응답률 제고 전략을 수립한다.

1. 사회교환이론 (Social Exchange Theory)

사람들은 "보상(Reward) - 비용(Cost) + 신뢰(Trust) > 0" 일 때 응답한다.

• 보상 높이기:
  • 금전적 인센티브 (후불보다는 선불이 효과적 - '부채감' 유발).
  • "당신의 의견이 사회를 바꿉니다"라는 내적 보상 강조.
• 비용 줄이기:
  • 설문지를 짧고 쉽게 만들기 (인지적 비용 감소).
  • 편리한 응답 방식 제공 (모바일 최적화).
• 신뢰 쌓기:
  • 권위 있는 기관(대학, 정부)의 로고 사용.
  • 개인정보 보호에 대한 명확한 약속.

2. 맞춤형 디자인 방법 (Tailored Design Method - Dillman)

• 모든 응답자에게 똑같이 접근하는 것이 아니라, 접촉 시점과 방식을 전략적으로 설계함.
• 예시: 안내문 발송 → 3일 후 설문지 발송 → 1주일 후 감사/독려 엽서 → 2주일 후 새로운 설문지 재발송.

---

[Part 4] 현장 조사의 관리 (Field Management)

목표: 실제 데이터 수집 과정에서의 품질 관리(QC) 기법을 배운다.

1. 조사원 훈련 (Interviewer Training)

• 조사원은 연구 도구의 일부다. 표준화된 질문 방식, 라포(Rapport) 형성법, 돌발 상황 대처법 교육 필수.
• 조사원 효과(Interviewer Effect): 조사원의 성별, 인종, 말투가 응답에 영향을 미치는 것을 통제해야 함.

2. 사전 조사 (Pilot Study)

• 본 조사 전 소규모(30~50명) 실시.
• 체크리스트: 문항의 이해도, 소요 시간, 모바일 화면 깨짐 현상, 특정 문항에서의 이탈률 확인.

3. 데이터 클리닝 (Data Cleaning)

• 수집된 자료 중 불성실 응답을 걸러내는 기준 마련.
  • 일직선 응답 (Straight-lining)
  • 논리적 모순 (예: 나이 5세, 직업 회사원)
  • 지나치게 짧은 응답 시간 (Speeders)

---

[심화 토론 주제]

1. RDD(임의번호 걸기)의 종말: 휴대전화 사용과 스팸 차단 앱의 보편화 시대에, 무작위성을 담보할 수 있는 전화 조사 대안은 무엇인가?
2. 빅데이터 vs 서베이 데이터: 구글 트렌드나 SNS 분석이 전통적인 서베이 연구를 대체할 수 있는가? 아니면 상호 보완적인가?
3. 민감한 주제(마약, 성, 탈세) 조사: 응답자의 솔직한 답변을 얻어내기 위한 특수 기법(Randomized Response Technique 등)은 무엇인가?

[추천 참고 문헌]

• Dillman, D. A., Smyth, J. D., & Christian, L. M., Internet, Phone, Mail, and Mixed-Mode Surveys. (자료 수집의 바이블)
• Groves, R. M., et al., Survey Methodology. (총 조사 오차 관점의 교과서)
• Tourangeau, R., et al., The Psychology of Survey Response. (응답자의 인지 과정 분석)