스크리너 질문 작성법: 부적격 지원을 걸러내는 7가지 원칙

스크리너의 역할

스크리너는 지원자가 조사 대상 조건에 부합하는지 확인하는 사전 질문입니다. 인터뷰 결과의 품질은 대부분 누구와 대화했는가에서 결정되므로, 스크리너는 조사 설계에서 가장 중요한 단계 중 하나입니다. Nielsen Norman Group은 스크리너가 연구 질문에 영향을 주는 특성만 선별해야 하며, 인구통계보다 행동 특성이 더 중요한 경우가 많다고 설명합니다.

문항 구성 순서

스크리너는 넓은 질문에서 좁은 질문으로 좁혀 가는 깔때기(funnel) 구조로 구성합니다. 처음부터 조사 주제를 직접 묻지 않아야 지원자가 정답을 추측하지 못합니다.

1. 기본 정보: 연령대, 거주 지역, 직업 (진행 가능 여부 확인)
2. 제외 조건: 업계 종사 여부, 최근 조사 참여 이력
3. 행동과 빈도: 카테고리 이용 경험, 최근 3개월 빈도, 사용 서비스
4. 서술형: 가장 최근 경험의 구체적 묘사
5. 참여 환경: 카메라·마이크, 방문 가능 지역, 가능 일정

원칙 1. 조사 의도를 드러내지 않습니다

"가계부 앱을 사용하시나요?"라고 묻는 순간 지원자는 원하는 답을 알게 됩니다. 조사 주제를 여러 카테고리 중 하나로 섞어 묻습니다.

• 좋지 않은 예: 가계부 앱을 사용해 본 적이 있습니까? (예, 아니오)
• 좋은 예: 최근 3개월 안에 사용한 앱을 모두 선택해 주세요. (은행, 증권, 가계부, 쇼핑, 배달, 해당 없음)

원칙 2. 예·아니오 대신 여러 보기로 묻습니다

두 개의 보기만 있는 문항은 정답이 쉽게 드러납니다. 보기를 3개 이상 두고 통과 보기를 다른 보기 사이에 배치하며, "해당 없음"을 반드시 포함합니다.

원칙 3. 미래 의향이 아닌 과거 행동을 묻습니다

"이런 서비스가 있다면 사용하시겠습니까?" 같은 질문은 선별력이 없습니다. Nielsen Norman Group이 지적하듯 사람들은 자신의 미래 행동을 정확히 예측하지 못합니다. 최근 3개월 안의 이용 빈도, 지출 금액, 사용한 서비스처럼 확인 가능한 과거 행동을 묻습니다.

원칙 4. 서술형 문항으로 교차 확인합니다

"가장 최근에 가계부를 작성했던 상황을 2~3문장으로 적어 주세요"처럼 구체적인 경험을 서술하게 합니다. 객관식 응답과 내용이 일치하는지, 구체적인 상황과 도구 이름이 등장하는지 확인합니다. 서술형 응답은 인터뷰에서의 표현력과 성실도를 가늠하는 지표로도 활용됩니다.

원칙 5. 업계 종사자를 제외합니다

시장조사, 광고, 마케팅, UX, 경쟁사 종사자는 일반 사용자가 아닌 전문가의 관점에서 응답할 가능성이 높아 결과를 왜곡할 수 있습니다. 본인 또는 가족의 직업을 묻는 문항으로 제외합니다.

원칙 6. 최근 참여 이력을 확인합니다

최근 6개월 안에 유사 주제의 조사에 2회 이상 참여한 지원자는 조사에 익숙해져 응답이 정형화될 수 있습니다. 반복 참여자와 사례비만을 목적으로 하는 전문 응답자를 제외하기 위해 참여 이력을 묻고, 플랫폼의 참여 기록과 대조합니다.

원칙 7. 한 문항에는 하나의 내용만 묻고, 배포 전 검증합니다

"가격과 기능 중 무엇이 중요했나요?"처럼 두 가지를 동시에 묻는 문항은 응답을 해석하기 어렵습니다. 한 문항에는 하나의 내용만 담고, 전문 용어 대신 일상적인 표현을 사용합니다. 배포 전에는 동료 2~3명이 직접 응답해 보며 오탈자, 모호한 표현, 분기 오류를 점검합니다.

부적격 지원을 줄이는 추가 장치

• 증빙: 재직, 자격, 보유 제품은 명함, 재직 화면, 구매 내역으로 확인합니다.
• 일관성 검사: 같은 내용을 다른 형태로 두 번 묻고 응답이 일치하는지 확인합니다.
• 사전 확인: 조건이 까다로운 조사는 2~5분 내외의 짧은 사전 통화나 인터뷰 시작 시 재확인 질문으로 검증합니다.
• 과도한 선별 지양: 모든 조건을 완벽히 충족하는 지원자만 찾으면 모집이 지연됩니다. 연구 질문에 실제로 영향을 주는 조건만 필수로 둡니다.

참고 자료

• Nielsen Norman Group, Screening Participants for User Research
• Ridge, D. et al. (2023), Imposter participants in online qualitative research, Health Expectations
• QK Voice, 고객 인터뷰 대상자 모집 방법과 검증 기준