원본 마크다운: wiki/타당도와-신뢰도.md

타당도와 신뢰도 (Validity & Reliability)

학습 takeaway: 신뢰도 = 일관성 / 타당도 = 정확성. 이 한 줄이 핵심이다. “잘못 설계된 자도 일관되게 틀린 값을 낼 수 있다” — 신뢰도가 높아도 타당도는 낮을 수 있다는 사실이 두 개념을 분리해서 봐야 하는 이유. 조작적-정의와-변수의 품질 검증 장치.

한 줄 정의

개념 의미 핵심어
신뢰도(Reliability) 반복 측정 시 결과가 일관되게 나오는가 일관성, 안정성
타당도(Validity) 측정도구가 의도한 개념을 재고 있는가 정확성, 적합성

둘의 관계

신뢰도의 유형

신뢰도는 일관성(consistency)을 검증하는 방식에 따라 3가지 방법으로 나뉜다.

방법 고려하는 기준 설명 예시
검사-재검사법 (Test-retest) 안정성 동일 대상에게 시간 간격을 두고 같은 도구로 반복 측정 → 두 결과 간 상관관계 경찰신뢰 척도를 3월·4월에 같은 학생에게 → 두 점수 상관↑ = 안정적
반분법 (Split-half) 동등성 전체 문항을 홀수/짝수로 무작위 분할 → 두 세트 점수 간 상관관계 경찰신뢰 10문항 → 홀수(1,3,5…) vs 짝수(2,4,6…) 상관↑ = 동등
내적 일관성법 (Cronbach’s α) 동등성 문항들이 서로 얼마나 일관되게 같은 개념을 측정하는가 경찰공정성 5문항 α = .85 → 수용 가능

Cronbach’s α 기준

α 값 평가
0.9 이상 매우 높음
0.8 이상 좋음
0.7 이상 수용 가능
0.6 이하 낮음 (재검토 필요)

타당도의 유형

타당도는 정확성(accuracy) — 측정하고자 하는 개념을 제대로 재는지의 문제다.

1. 액면타당도 (Face Validity)

문항이 겉보기에 타당해 보이는가에 대한 주관적 판단.

2. 내용타당도 (Content Validity)

측정도구가 해당 개념의 핵심 내용을 충분히 포함하는가.

측정값이 외부 기준과 얼마나 일치하는가.

유형 비교 기준 예시
동시타당도 (Concurrent) 현재 기존 척도 새 경찰신뢰 척도 vs. 검증된 기존 신뢰 척도 상관
예측타당도 (Predictive) 미래 결과 비행점수(현재) → 실제 범죄 여부(1년 후) 예측력

4. 구성타당도 (Construct Validity)

측정도구가 이론적 개념(구인)을 제대로 반영하는가.

관련 개념

출처

메타