편중된 응답을 전체 수요로 읽지 않는 기준
말레이시아 진료 상품 조사에서 특정 민족의 응답이 많다면 그 결과를 말레이시아 전체 시장의 선호로 일반화하지 않습니다. 담당자는 목표 조사집단과 실제 응답 구성을 대조해 부족한 집단의 추가 모집과 집단별 결과 분리를 검토하고, 기준 구성비가 없는 상태에서 임의로 가중치를 매겨 보정하지 않습니다. 응답이 많은 집단의 선호는 그 집단에 대한 정보로 쓸 수 있으므로 버리지 않고 해석 범위만 좁힙니다.
응답이 한 집단에 몰리는 일은 모집 경로, 설문 언어, 소개자의 인맥처럼 여러 요인에서 생길 수 있습니다. 원인을 하나로 단정하기보다 어느 경로로 누가 응답했는지 기록해 다음 모집에서 고칠 수 있게 합니다. 아래 표는 편중이 드러났을 때 상황별 보완 방향과 전체 결과를 어디까지 말할 수 있는지를 정리한 것입니다.
| 편중 점검 상황 | 보완 방향 | 전체 결과 해석의 제한 |
|---|---|---|
| 목표 조사집단에 든 집단 가운데 응답이 거의 없는 집단이 있음 | 그 집단이 쓰는 언어와 소개 경로로 추가 모집을 검토 | 추가 모집 전에는 전체 선호로 보고하지 않음 |
| 응답은 모였으나 한 집단이 대부분을 차지함 | 집단별 결과를 나눠 정리 | 전체 합계는 응답자 구성을 함께 기재할 때만 제시 |
| 민족 문항에 답하지 않은 응답이 많음 | 무응답을 별도 항목으로 기록 | 무응답을 특정 집단에 임의로 넣지 않음 |
| 기준 구성비 자료가 없음 | 가중치 없이 응답 구성을 그대로 공개 | 결과 문서에 해석 한계를 명시 |
한 조사에서 표의 상황이 두세 가지 겹쳐 나타나기도 합니다. 그럴 때는 위 행부터 차례로 처리하고, 해당하는 해석 제한을 모두 결과 문서 첫 장에 기재한 뒤 진료 상품 결정 회의에 올립니다.
진료 상품별 목표 조사집단 정의
목표 조사집단은 말레이시아 주민 전체가 아니라 그 진료 상품을 실제로 고려할 사람들로 정합니다. 기획 담당자는 진료 목적, 연령 범위, 방한 가능성, 사용 언어처럼 상품 선택에 관계되는 조건을 먼저 정하고, 그 조건을 충족하는 사람 안에 어떤 민족 집단이 포함되는지 나열합니다. 이 목록 없이 응답을 모으면 어느 집단이 부족한지 판단할 근거가 사라집니다.
집단을 나열할 때 각 집단의 인구 비율을 짐작해 목표치를 정하지 않습니다. 출처 없이 정한 비율은 이후 보정의 기준이 될 수 없기 때문입니다. 상품 결정에 영향을 줄 수 있는 집단이 빠짐없이 응답에 포함되는지를 모집 목표로 정하고, 원장·실장이 목록을 승인한 뒤 모집을 시작합니다.
응답 구성 기록과 추가 모집 순서
편중 여부는 응답을 모두 받은 뒤가 아니라 모집 중간에도 집계해야 추가 모집할 시간이 생깁니다. 조사 담당자는 아래 순서로 진행하고, 단계마다 결과를 실장에게 공유합니다.
- 원장·실장이 승인한 목표 조사집단 목록을 결과 문서 맨 앞에 싣습니다.
- 응답자가 설문의 민족 문항에 직접 답한 내용으로 집단별 응답 수를 집계하고, 무응답과 복수 응답은 별도 항목으로 기록합니다.
- 목록에 있으나 응답이 적은 집단을 표시하고, 추가 모집 여부와 모집 경로를 원장·실장이 결정합니다.
- 추가 모집이 끝나면 집단별 결과와 전체 결과를 나눠 정리하고 각각의 해석 범위를 기재합니다.
둘째 단계의 기록 양식은 목표와 실제, 부족한 항목을 나란히 배치하면 차이가 한 장에 드러납니다. 행에는 상품 선택에 영향을 줄 수 있는 조건만 남깁니다.
| 기록 항목 | 목표 조사집단 | 확인된 응답 구성 | 확인 불가·부족 항목 |
|---|---|---|---|
| 민족 | 상품 대상에 포함할 집단 목록 | 응답자가 직접 답한 집단별 응답 수 | 응답이 적은 집단, 무응답 수 |
| 사용 언어 | 설문을 제공할 언어 목록 | 언어별 응답 수 | 설문 언어가 없어 응답하지 못한 집단 |
| 모집 경로 | 사용할 소개처와 온라인 경로 | 경로별 응답 수 | 응답이 한 경로에 몰린 정도 |
| 진료 관련 조건 | 진료 목적과 방한 가능성 등 대상 조건 | 조건을 충족한 응답 수 | 조건 문항에 답하지 않은 응답 |
광고 인구통계 정보와 직접 응답의 분리
구글 애즈 고객센터는 동영상 캠페인의 인구통계 분류로 연령, 성별, 자녀 유무, 가계 소득을 안내하며, 가계 소득은 말레이시아를 포함한 일부 국가에서 사용할 수 있다고 설명합니다. 같은 안내에 따르면 구글 애즈는 일부 사용자의 인구통계 데이터만 보유하거나 추정할 수 있고, 이를 확인할 수 없는 사용자는 「알 수 없음」 범주로 표시됩니다.
이 분류 목록에는 민족 항목이 없으므로, 담당자는 광고 보고서의 연령·성별 분포를 근거로 응답자의 민족 구성을 확인했다고 기록하지 않습니다. 민족 구성은 설문에서 응답자가 직접 답한 내용으로만 집계합니다. 광고 보고서는 어느 경로로 응답자가 들어왔는지 설명하는 모집 경로 기록에 따로 첨부합니다.
가중치 보정과 추가 모집에서 자주 틀리는 경우
편중을 고치려다 오히려 결과를 흐리게 만드는 경우가 있습니다. 조사 담당자와 실장은 결과를 보고하기 전에 아래 네 경우에 해당하는지 대조합니다.
- 응답이 적은 집단에 큰 가중치를 곱해 전체 비율을 맞추는 경우입니다. 기준 구성비 없이 정한 가중치는 응답자 몇 명의 의견을 전체 결론으로 키울 수 있으니, 가중치 대신 집단별 응답 수와 결과를 나란히 제시합니다.
- 1차 응답과 추가 모집 응답을 한 덩어리로 합치는 경우입니다. 모집 시기와 경로가 달라 답의 성격이 다를 수 있으므로 회차를 표시한 채 집계합니다.
- 부족 집단만 모으려고 응답이 많았던 집단을 광고 대상에서 빼는 경우입니다. 메타 광고 규정은 인종, 민족, 종교, 연령 같은 개인적 특성을 이유로 차별하거나 차별을 조장해서는 안 되며, 타겟 선택 도구로 특정 그룹을 부당하게 광고 대상에서 제외해서도 안 된다고 정합니다. 실장은 집행 전에 설정을 메타의 현재 안내와 대조하고, 대상 제외 대신 부족 집단이 쓰는 언어의 설문 안내문과 소개 경로를 늘리는 방법을 먼저 검토합니다.
- 인구통계 설정을 좁히려고 「알 수 없음」 범주를 제외하는 경우입니다. 구글 애즈 고객센터는 이 범주를 제외하면 목표 잠재고객을 포함한 상당수 사용자에게 광고가 게재되지 않을 수 있다고 안내합니다. 이 범주를 제외해도 민족 구성이 맞춰진다고 판단할 근거는 없으므로, 담당자는 설정을 변경하기 전에 변경 이유를 모집 경로 기록에 남깁니다.
집단별 결과가 같은 방향일 때의 판단
집단별 결과가 같은 방향을 가리키면 편중 문제가 없다고 결론 내리기 쉽습니다. 응답이 적은 집단의 결과는 몇 명의 답만 달라져도 방향이 뒤집힐 수 있으므로, 결과가 일치한다는 판단도 응답 수와 함께 기재합니다. 원장·실장은 이때 공통 상품안을 잠정안으로 정하고, 응답이 적었던 집단의 의견을 추가로 받은 뒤 확정 여부를 다시 결정합니다.
자주 묻는 질문
설문의 민족 문항 선택지는 누가 정해야 합니까?
기획 담당자가 목표 조사집단 목록에 쓴 집단 이름과 같은 표현으로 선택지를 만듭니다. 현지 사정을 아는 협력자에게 표현이 어색하거나 불쾌하지 않은지 미리 묻고, 「답하지 않음」 선택지와 복수 선택 허용 여부도 이때 함께 정합니다.
추가 모집할 일정과 예산이 없으면 결과를 어떻게 씁니까?
집단별 결과는 해당 집단을 대상으로 한 상품 후보 자료로만 쓰고, 말레이시아 전체를 겨냥한 상품 결정 자료로는 올리지 않습니다. 다음 조사 계획서에 부족했던 집단을 우선 모집 대상으로 기재해 같은 공백이 되풀이되지 않게 합니다.
응답이 매우 적은 집단의 결과는 보고서에서 빼야 합니까?
빼지 않고 응답 수를 함께 기재해 따로 표시합니다. 결과를 지우면 그 집단의 응답이 부족했다는 사실까지 기록에서 사라지므로, 해석에 쓰지 않는 결과라도 참고 항목으로 남깁니다.
조사 대행사가 가중치를 적용한 결과를 보내오면 어떻게 처리합니까?
대행사에 가중치를 계산한 기준 구성비의 출처와 가중치 적용 전 원자료를 함께 요청합니다. 출처를 받지 못하면 원자료의 집단별 결과로 판단하고, 가중 결과는 참고용이라고 표시해 보관합니다.
다음 조사에서 같은 편중을 줄이려면 무엇을 남겨야 합니까?
경로별로 어떤 집단이 응답했고 어떤 집단에는 닿지 못했는지를 한 장으로 정리해 다음 조사 설계 회의에 올립니다. 응답이 적었던 집단에 맞는 설문 언어와 소개처 후보도 함께 기재해 두면 모집 계획을 처음부터 다시 짜지 않아도 됩니다.