Rasch 분석은 단순한 통계 분석이 아니라, 문항의 품질, 점수의 타당성, 평가의 공정성을 과학적으로 검증하는 방법입니다. 심리학, 교육학, 보건학 등에서 측정도구 개발이나 평가 결과 해석의 신뢰성 확보를 위해 자주 사용됩니다.
✅ 1. "점수"가 진짜 의미 있는지를 확인하기 위해
우리가 시험 점수나 설문 점수를 사용해 사람들의 능력이나 태도를 비교할 때, 그 점수가 진짜로 그 특성을 정확하게 반영하고 있는지 보장할 수 있을까요?
- Rasch 분석은 점수가 논리적 수학 모델(Rasch 모델)에 잘 부합하는지 검토함으로써,
- "높은 점수를 받은 사람이 실제로 더 능력 있는가?"라는 질문에 답해줍니다.
🔎 예시: "80점 받은 사람이 70점 받은 사람보다 실제로 더 높은 수학 능력을 가지고 있는가?"
Rasch 분석은 응답자 능력과 점수 간의 정합성을 분석해서 이 비교가 정당한지를 알려줍니다.
✅ 2. 문항의 질을 검증하기 위해
시험이나 설문에서 사용되는 각 문항이 잘 만들어졌는지 확인하는 것이 중요합니다.
- 문항이 너무 쉽거나 너무 어려우면 변별력이 떨어짐
- 의도한 능력을 측정하지 않으면 타당성이 낮아짐
Rasch 분석은 문항이 예상대로 작동하는지, 또는 편향이나 이상한 반응 패턴을 보이는지를 확인해줍니다.
🔎 예시: “이 문항은 영어 읽기 실력을 평가해야 하는데, 배경지식이 부족하면 풀 수 없어요.”
→ 문항이 읽기 실력이 아닌 배경지식을 측정하고 있을 수 있으며, Rasch 분석으로 이를 찾아낼 수 있습니다.
✅ 3. 공정한 평가를 위해 (DIF 분석)
Rasch 분석은 문항이 특정 집단(성별, 연령, 인종 등)에게 불리하거나 유리하게 작동하는지를 검토할 수 있습니다. 이를 DIF (Differential Item Functioning) 분석이라고 합니다.
같은 능력을 가진 사람이라면, 성별이나 배경에 관계없이 같은 확률로 정답을 맞춰야 공정한 문항입니다.
🔎 예시: “여학생이 같은 수학 능력을 갖고 있는데도 특정 문항에서는 남학생보다 점수가 낮게 나오는 이유는?”
→ 그 문항이 여학생에게 불리하게 작동할 수 있으며, Rasch 분석을 통해 불공정성을 진단할 수 있습니다.
✅ 4. 측정의 과학성을 확보하기 위해
사회과학, 교육, 보건 연구에서 사용하는 측정도구(설문, 시험 등)는 정량적이고 일관된 방식으로 특성을 측정해야 합니다.
- Rasch 분석은 측정도구가 수학적 모델에 부합하는지를 검토함
- 점수의 신뢰도, 타당도, 일관성을 확보
📌 효과: 문항 간, 응답자 간 비교를 동일한 척도(logit)로 할 수 있게 됨
→ 평가 결과를 과학적이고 객관적인 데이터로 해석 가능
🧪 Rasch 분석이 필요한 상황 (사용 시기)
✅ 1. 측정 도구의 타당성과 신뢰성을 검토할 때
문항이 실제로 측정하려는 개념(construct)을 잘 측정하고 있는지 확인
예: “자기효능감을 측정하기 위해 만든 10개 문항이 실제로 모두 자기효능감을 잘 반영하는가?”
✅ 2. 문항 난이도와 응답자 능력을 비교하고 싶을 때
문항과 응답자 능력을 동일한 척도(logit)로 수치화하여 분석
예: "이 문항은 너무 어려워서 대부분 오답인데, 누구에게도 적합하지 않은 문항일 수 있다."
✅ 3. 문항 반응이 일관적인지 평가하고 싶을 때
응답자의 반응 패턴이 모델에 적합한지를 분석함
불성실한 응답, 우연한 정답 등을 탐지 가능
✅ 4. 척도가 일차원성(unidimensionality)을 만족하는지 확인할 때
Rasch 모델은 하나의 특성만 측정하는 척도에 적합함
다차원 척도인 경우 Rasch 이전에 요인 분석 필요
✅ 5. 문항이 공정하게 작동하는지(DIF 분석)를 확인할 때
성별, 연령, 집단 간에 편향 없이 공정한 문항인지 분석
📊 Rasch 분석 필요성 요약표
| 상황 | Rasch 분석 필요 여부 | 설명 |
|---|---|---|
| 새로 개발한 심리척도의 문항 검토 | ✅ 필요 | 문항의 타당성과 신뢰도 평가 |
| 국가시험에서 문항 난이도 분석 | ✅ 필요 | 문항 난이도 및 수험생 능력 비교 |
| 단순 평균 점수 비교 | ❌ 불필요 | 통계적으로는 평균으로 충분함 |
| Likert 척도 응답 평균만 보고 싶을 때 | ❌ 불필요 | 정교한 문항 분석이 필요하지 않음 |
✨ 결론: 왜 Rasch 분석을 해야 하는가?
Rasch 분석은 단순한 통계를 넘어서, 점수와 문항이 과학적이고 타당하게 작동하는지 검증하는 도구입니다.
측정의 질을 보장하고, 공정하고 신뢰할 수 있는 평가를 만들기 위해 Rasch 분석은 다음과 같은 중요한 역할을 합니다:
- 점수 해석의 정당성 검토
- 문항 수준에서의 오류나 편향 발견
- 척도의 과학적 정당성 확보
- 공정성 있는 평가 환경 조성


0 댓글