원본 마크다운: wiki/질문지-설계-원칙.md

질문지 설계 원칙 (Questionnaire Design)

학습 takeaway: 좋은 질문지는 과학적이다. 한 문항에 한 가지만 묻고, 응답을 유도하지 말고, 용어를 명확히 하는 5가지 원칙을 지키면 데이터 품질이 결정된다. 데이터가 쓰레기면 분석도 쓰레기 (Garbage In, Garbage Out).

질문지 구성 요소

1. 첫 표지 (익명성·문항수·소요시간 명시)
2. 응답자 식별 (ID 기록)
3. 질문지 소개 (목적·비밀보장 설명)
4. 응답 방법 안내 (예시 제시)
5. 연구자 정보 (이름·연락처)
6. 본문 문항들
7. 감사 인사

첫 표지 필수 포함 사항

요소 내용 이유
익명성 보장 “귀하의 응답은 통계 처리되어 익명으로 처리됩니다” 응답자 신뢰 확보
총 문항 수 몇 문항인지 명시 응답 시작 전 부담 예측 가능
소요 시간 예상 소요 시간 명시 응답자 협조 유도
연구 주제 공개 범위 주제를 지나치게 구체적으로 밝히지 않음 주제를 알면 응답자가 “바람직한 답”을 추측해 답변 왜곡

5가지 핵심 설계 원칙

1. 단일성 원칙 (One Question at a Time)

한 문항에는 한 가지만 물어야 한다.

❌ 나쁜 예 ✅ 좋은 예
“경찰이 공정하고 신뢰할 수 있다고 생각하는가?” “경찰이 공정하다고 생각하는가?” + 별도로 “경찰을 신뢰하는가?”
“온라인 활동 중 피해와 혼란을 경험했는가?” “온라인에서 피해를 경험했는가?” / “온라인에서 혼란을 느꼈는가?” (분리)

2. 유도성 금지 원칙 (Avoid Leading Questions)

특정 답지 선택을 유도하는 표현을 넣지 말 것.

❌ 나쁜 예 ✅ 좋은 예
“대부분의 사람들이 경찰을 신뢰한다고 생각하는가?” “경찰을 신뢰하는가?”
“많은 사람들이 범죄 피해를 입은 상황에서, 당신은 안전하다고 느끼는가?” “당신은 일반적으로 안전하다고 느끼는가?”

유도성 표현: “대부분”, “이미”, “과학자들이 증명했듯이”, “당연히”, “긍정적인 XX는…” 등

3. 명확성 원칙 (Clarity & Precision)

단어, 단위, 기간, 접속사를 명확하게 제시하면서 물어야 한다.

❌ 모호한 예 ✅ 명확한 예
“최근에 범죄 피해를 경험했는가?” 지난 1년 동안 범죄 피해를 직접 경험했는가?”
“얼마나 자주 온라인 활동을 하는가?” 최근 한 주 동안 온라인 활동에 하루 평균 몇 시간을 투자했는가?” (단위 명시)
“당신과 가까운 사람이 범죄 피해를 입었을 때 어떻게 하겠는가?” “당신의 가족/친구(관계 명시)가 범죄 피해를 입었을 때…” (구체화)

4. 상호배타성 원칙 (Mutually Exclusive)

응답 항목이 겹치지 않고 중복되지 않아야 한다.

❌ 나쁜 예 ✅ 좋은 예
① 10시간 미만 ② 5시간 이상 ③ 10시간 이상 (2번과 3번 겹침) ① 5시간 미만 ② 5~10시간 ③ 10시간 이상
① 남자 ② 여자 (기타·무응답 없음) ① 남자 ② 여자 ③ 기타 ④ 답변 거부

5. 포괄성과 균형 원칙 (Exhaustiveness & Balance)

모든 가능한 응답을 포괄하되, 한쪽으로 치우치지 않아야 한다.

❌ 치우친 예 ✅ 균형잡은 예
① 매우 만족 ② 만족 ③ 약간 만족 ④ 불만족 (긍정 3개 vs 부정 1개) ① 매우 만족 ② 만족 ③ 보통 ④ 불만족 ⑤ 매우 불만족
① 매우 그렇다 ② 그렇다 ③ 그렇지 않다 (중립 없음) ① 매우 그렇다 ② 그렇다 ③ 보통이다 ④ 그렇지 않다 ⑤ 매우 그렇지 않다

문항 유형: 개방형 vs 폐쇄형

개방형 문항 (Open-ended)

응답자가 자유롭게 답변

예시:

장점: 깊이 있는 정보, 예상 못한 응답 발견, 응답자 의도 파악

단점: 코딩·분석 어려움, 데이터 불일치, 무응답 많음, 통계분석 제한

폐쇄형 문항 (Closed-ended)

정해진 선택지 중 선택

유형 1: 양자택일형 (Binary)

유형 2: 다항선택형 (Multiple choice)

유형 3: 리커트 척도 (Likert scale)

유형 4: 순위/우선순위 (Ranking)

장점: 분석 용이, 데이터 일관성, 통계분석 가능, 응답률 높음

단점: 깊이 부족, 응답자 의도 파악 어려움, 선택지 누락 가능성

문항 배치 방식: 단독형·조건부·행렬식

단독형 문항

각 문항이 독립적으로 존재. 앞뒤 문항과 논리적 연결 없음.

조건부 문항 (Screening Question)

첫 문항에 특정 조건을 충족한 응답자만 다음 문항으로 이동하는 구조.

"종교가 있습니까?" → ① 있다 → 다음 문항 진행 (종교 생활 만족도)
                   → ② 없다 → 해당 문항 건너뜀

목적: 특정 조건을 가진 응답자로 연구 대상을 한정 (예: 배달 이용 경험자만 배달 빈도 측정). 주의: 조건부 화살표를 응답자가 놓치지 않도록 시각적으로 명확히 제시해야 함.

행렬식 문항 (Matrix / Grid Question)

유사한 문항 여러 개를 하나의 표(행렬)로 묶는 방식. 답지 구조가 동일한 문항이 반복될 때 적용.

[자기통제력 10문항 예시]
                전혀 그렇지 않다  ← → 매우 그렇다
1. 나는 충동을 잘 억제한다.  ①  ②  ③  ④  ⑤
2. 나는 계획을 세워서 행동한다. ①  ②  ③  ④  ⑤
...

4점 척도 추세

전통적 5점 리커트 척도의 중간값 편향 문제: 응답자들이 “보통/그저 그렇다”에 몰리는 경향.

솔직히 설문하면 다 그저 그렇다 체크해버리니까 변별력이 없어진다.

→ 최근 4점 척도로 전환하는 추세: 중간 선택지 제거 → 명확한 방향성 표명 유도.

척도 구성 장점 단점
5점 매우 그렇다/그렇다/보통/그렇지 않다/매우 그렇지 않다 중립 허용 중간 몰림
4점 매우 그렇다/그렇다/그렇지 않다/매우 그렇지 않다 방향성 명확 중립 없음

선택은 연구자 재량 — 단, 한 질문지 내에서 일관성 유지 필수.

역문항 (Reversed Item)

문항의 방향을 반대로 진술하여 신뢰도를 검증하는 장치.

행렬식 문항에서 응답자가 생각 없이 같은 번호만 체크하는 횡렬식 응답을 탐지·차단하기 위한 목적.

정방향: "나는 충동을 잘 억제한다" → ① 전혀 그렇지 않다 ... ⑤ 매우 그렇다
역문항: "나는 즉흥적으로 행동한다" → ⑤ 코딩 시 역산 처리

문항 배치 원칙

순서 원칙 설명
쉬운 → 어려운 처음엔 부담 없는 문항으로 응답 의지 확보
사실 → 가치평가 객관적 사실 먼저, 의견·태도 나중
일반 → 구체 넓은 주제에서 좁은 주제로 좁혀가기
인구사회학적 특성·민감한 문항 — 마지막** 연령·소득·성적 피해 등 개인적 질문은 신뢰 형성 후 배치
영향력 있는 문항 이격 유사한 개념(예: 가족 만족도 ↔ 삶의 행복도)은 서로 멀리 배치해 앵커링 효과 방지
중요한 문항은 중간 배치 첫 부분(주의 부족)·마지막(피로)을 피함

“인구사약이 중요해요 — 인구사회학적 특성은 예민할 수 있으니 뒤에” (강의 녹취)

기존 검증된 질문지 활용 원칙

신규 문항 개발 대신, 선행 연구에서 이미 타당도·신뢰도가 검증된 문항을 재활용하는 것이 원칙.

참고: 타당도와-신뢰도 — 타당도·신뢰도 개념 및 Cronbach α 기준

조작적-정의와-변수와의 연결

질문지는 조작적 정의의 구체적 실현이다:

조작적 정의 ← → 질문지 설계 (일대일 대응 관계)

관련 개념

출처

메타