작업치료 핵심 해설
이 문제는 연구방법론 및 평가 도구의 핵심 속성인
신뢰도(Reliability)와
타당도(Validity)의 개념적 정의를 묻고 있어요. 작업치료사는 새로운 평가 도구를 선정하거나 개발할 때, 그 도구가 신뢰할 수 있고 유효한지 반드시 검증해야 하기 때문에 매우 중요한 개념이에요.
핵심 개념 분석 (Key Concept)
핵심! 신뢰도(Reliability)는
측정의 일관성과 재현성을 의미해요. 즉, 동일한 조건에서 동일한 대상을 반복 측정했을 때 얼마나 일관된 결과가 나오는지를 평가하는 지표예요. 반면,
타당도(Validity)는 측정 도구가
측정하려고 의도한 것을 실제로 얼마나 정확히 측정하는지를 평가해요. "정답인가?"를 묻는 것이 타당도라면, "일관되게 같은 답을 내는가?"를 묻는 것이 신뢰도라고 생각하면 쉬워요.
정답 근거 (Answer Rationale)
정답인 ①번 "
반복 측정 시 일관되게 같은 결과가 나오는 정도"는 신뢰도의 핵심 정의를 정확히 표현하고 있어요. 신뢰도는 측정 오차의 영향을 받으며, 검사-재검사 신뢰도(Test-retest reliability), 평가자 간 신뢰도(Inter-rater reliability), 평가자 내 신뢰도(Intra-rater reliability) 등 여러 방법으로 평가할 수 있어요.
오답 분석 (Distractor Analysis)
혼동 주의! ②번과 ④번은 진단 검사의 정확도를 평가하는
민감도(Sensitivity)와
특이도(Specificity)의 개념이에요. ②번은 민감도(질병이 있는 사람을 양성으로 판정), ④번은 특이도(질병이 없는 사람을 음성으로 판정)를 설명하고 있어요. 이들은 타당도의 한 측면인 기준 타당도(Criterion validity)와 관련되지만, 신뢰도의 정의와는 다릅니다.
③번 "검사 결과가 질병의 중증도를 정확히 반영하는 정도"는
구성 타당도(Construct validity)나
수렴 타당도(Convergent validity)와 관련된 개념으로, 타당도의 범주에 속해요.
⑤번 "검사 비용 대비 진단 효과가 우수한 정도"는
비용-효과 분석(Cost-effectiveness analysis)과 관련된 개념으로, 신뢰도나 타당도와는 다른 경제성 평가의 영역이에요.
연관 개념 정리 (Related Concepts)
신뢰도와 타당도는 상호 보완적 관계예요. 신뢰도가 높아야 타당도가 높아질 가능성이 있지만, 신뢰도가 높다고 반드시 타당도가 높은 것은 아니에요. 예를 들어, 체중계가 항상 5kg을 더 표시한다면(신뢰도는 높지만 타당도는 낮음), 반대로 타당도가 높은 도구는 필연적으로 신뢰도도 높아야 해요.
개념 정리
- 신뢰도(Reliability): 측정의 일관성. "얼마나 안정적으로 같은 결과를 내는가?"
- 타당도(Validity): 측정의 정확성. "의도한 것을 제대로 측정하는가?"
- 민감도(Sensitivity): 질병이 있는 사람을 양성으로 올바르게 판정하는 비율.
- 특이도(Specificity): 질병이 없는 사람을 음성으로 올바르게 판정하는 비율.
한눈에 비교!
| 개념 | 핵심 질문 | 예시 (작업치료 평가 도구) |
| 신뢰도 | 다른 치료사가 측정해도, 다른 날에 측정해도 결과가 비슷한가? | MMT(도수근력검사) 시, A 치료사와 B 치료사가 같은 환자의 세갈래근을 검사했을 때 같은 등급(예: G4)을 부여하는가? |
| 타당도 | 이 검사가 정말로 '팔 기능'을 측정하고 있는가? | Jebsen-Taylor Hand Function Test가 실제 일상생활에서의 손기능을 잘 반영하는가? |
| 민감도 | 실제 연하장애가 있는 환자를 검사로 잘 찾아내는가? | 수정된 바륨연하검사(MBS)가 미세한 흡인(Aspiration)을 잘 탐지하는가? |
| 특이도 | 정상 연하 기능을 가진 사람을 검사로 정상이라고 잘 판별하는가? | 수정된 바륨연하검사(MBS)에서 정상인을 병적인 것으로 오판하지 않는가? |
암기 팁
- 신뢰도 = 믿을(Reliable) 수 있는 일관성: "신뢰(Reli)할 수 있어야 믿고 쓸 수 있다" → 믿음의 기반은 일관성!
- 타당도 = Valid(유효한)한 정확성: "이 검사가 Valid(타당)한가?" → "내가 측정하려는 것을 제대로 잡고 있나?"
- 민감도 vs 특이도: "민감(Sensitive)한 검사는 병 있는 사람(Sick)을 잘 찾아낸다", "특이(Specific)한 검사는 건강한 사람(Healthy)을 잘 가려낸다"
국시 빈출 포인트
신뢰도와 타당도의 정의를 직접 묻는 기본 문제가 자주 출제됩니다. 특히 민감도/특이도, 양성예측도/음성예측도 등 진단적 정확도 지표들과의 개념적 차이를 명확히 구분할 수 있어야 해요. "검사-재검사 신뢰도를 평가한다"는 문장이 나오면, 이는 곧 "일관성을 본다"는 의미임을 바로 떠올려야 합니다.
기출 변형 주의!
- 변형 1 (응용): "새로 개발한 아동의 놀이 참여 평가 도구의 타당도를 검증하기 위해 기존의 표준화된 놀이 평가 도구와의 상관관계를 분석했다. 이는 어떤 타당도 검증 방법인가?" → 정답: 수렴 타당도(Convergent validity)
- 변형 2 (역으로 출제): "동일한 평가자가 1주일 간격으로 두 번 측정한 결과의 일치도를 분석하는 것은 무엇을 평가하는 것인가?" → 정답: 검사-재검사 신뢰도(Test-retest reliability)