보건행정 핵심 해설
이 문제는 보건의료 연구 및 병원 행정에서 자주 활용되는 설문지의
신뢰도 평가 방법을 묻고 있어요. 신뢰도란 측정 도구가 측정하고자 하는 개념을 얼마나 일관되고 안정적으로 측정하는지를 의미합니다. 보기에서 제시한 것처럼 신뢰도를 평가하는 방법은 크게 여러 가지가 있지만, 이 문제의 핵심은
'일정 시간 간격'과
'동일 대상에게 두 번 실시'라는 조건이에요.
핵심 개념 분석 (Key Concept)
핵심! 동일한 측정 도구를 동일한 대상에게 시간 간격을 두고 반복 측정하여 얻은 두 점수 간의 상관계수를 통해 안정성을 평가하는 방법을
검사-재검사 신뢰도라고 합니다. 이는 측정 값이 시간이 지나도 얼마나 변하지 않는지를 보는 '안정성 계수'의 개념이에요. 예를 들어, 환자 만족도 설문지를 개발한 후 같은 환자 그룹에게 2주 간격으로 두 번 조사하여 그 결과가 유사하게 나오면 이 설문지는 검사-재검사 신뢰도가 높다고 판단합니다.
정답 근거 (Answer Rationale)
①번 '검사-재검사 신뢰도'가 정답입니다. 문제에서 제시한
동일한 설문지,
일정 시간 간격,
동일 대상에게 두 번 실시라는 조건이 이 방법을 완벽하게 정의하고 있어요. 이 방법은 특히 시간이 지나도 변하지 않는 속성(예: 성격, 만성 질환자의 삶의 질)을 측정하는 도구를 평가할 때 중요합니다.
오답 분석 (Distractor Analysis)
②번 평가자 간 신뢰도는 여러 관찰자나 평가자가 동일한 대상이나 현상을 독립적으로 평가했을 때 그 결과가 얼마나 일치하는지를 보는 방법입니다.
혼동 주의! 시간 간격이나 반복 측정과는 무관하게, 평가자들 간의 일관성에 초점을 맞추므로 문제의 조건과 맞지 않아요.
③번 동형 검사 신뢰도는 동일한 개념을 측정하기 위해 개발된 두 가지 버전의 서로 다른 검사(동형 검사)를 동일 대상에게 실시하여 점수 간 상관관계를 보는 방법입니다. 문항이 다르기 때문에
'동일한 설문지'를 사용한다는 문제의 조건과 배치되므로 틀렸어요.
④번 반분 신뢰도는 하나의 검사를 두 부분(예: 홀수 문항과 짝수 문항)으로 나누어 두 부분 점수 간의 상관관계를 보는 방법입니다. 이는 검사
내부의 일관성을 보는 것으로, 시간 간격을 두고 실시하는 것이 아니므로 오답입니다.
⑤번 내적 일관성 신뢰도는 검사를 구성하는 개별 문항들이 동일한 개념을 얼마나 일관되게 측정하고 있는지를 평가하는 방법으로, 대표적으로 크론바흐 알파 계수를 사용합니다. 이 또한 검사 도구 자체의 동질성을 한 번의 측정으로 평가하는 것으로, 문제의 조건인 '시간 간격'과는 거리가 멀어요.
연관 개념 정리 (Related Concepts)
검사-재검사 신뢰도에서 중요한 점은
검사 간격의 설정이에요. 간격이 너무 짧으면 피험자가 이전 응답을 기억하여 신뢰도가 과대평가되는
기억 효과가, 너무 길면 피험자의 지식이나 상태가 실제로 변하는
성숙 효과나
역사적 사건 효과가 발생할 수 있어 주의해야 해요. 일반적으로
2주~4주 간격이 적절하다고 알려져 있어요.
개념 정리
| 신뢰도 평가 방법 | 측정 초점 | 방법 요약 |
|---|
| 검사-재검사 신뢰도 | 시간적 안정성 | 동일 검사 → 동일 대상 → 일정 시간 후 재실시 |
| 평가자 간 신뢰도 | 평가자 일치도 | 여러 평가자가 동일 대상/사건을 독립적으로 평가 |
| 동형 검사 신뢰도 | 검사 양식 간 동등성 | 동일 개념을 측정하는 두 가지 다른 검사 실시 |
| 반분 신뢰도 | 문항 간 내적 일관성 | 하나의 검사를 둘로 나누어 점수 비교 |
| 내적 일관성 신뢰도 | 문항 동질성 | 전체 문항 간 상관관계 분석 (크론바흐 알파) |
한눈에 비교!
혼동 주의! 신뢰도와 타당도를 혼동하면 안 됩니다.
신뢰도는 측정 결과의
일관성에 대한 것이고,
타당도는 측정 도구가 측정하고자 하는 개념을
얼마나 정확히 측정했는지에 대한 것입니다. 신뢰도가 높다고 해서 반드시 타당도가 높은 것은 아니에요.
실무 포인트
병원에서 새로운 환자 만족도 설문지나 직원 스트레스 측정 도구를 도입할 때, 이 검사-재검사 신뢰도를 먼저 확인하는 것은 기본적인 도구 검증 절차입니다. 병원 기획팀이나 질 관리(QI)팀에서 조사 도구의 신뢰성 보고서를 작성할 때 피어슨 상관계수나 급내 상관계수를 제시하게 되는데, 이 값이
0.7 이상이면 일반적으로 신뢰도가 양호하다고 판단합니다.
암기 팁
'검사-재검사'는 영어로 'Test-retest'입니다. 핵심 키워드 'retest(다시 검사)'가 '시간 간격'을 내포하고 있다고 연상하면 좋아요. "같은 시험지를 두 번 풀게 해서 점수를 비교하는 것"으로 이미지를 떠올리면 더 쉽게 기억할 수 있습니다.
국시 빈출 포인트
보건의료정보관리사 및 병원행정사 시험의 보건의료조사방법론이나 보건통계학 파트에서 각 신뢰도 평가 방법의
정의와 예시를 매칭하는 문제로 빈출됩니다. 특히, 검사-재검사 신뢰도, 크론바흐 알파, 평가자 간 신뢰도는 구별해서 반드시 암기해야 해요.
기출 변형 주의!
사례형으로 "한 병원에서 환자 안전 문화 인식 설문지를 개발한 후, 직원 100명에게 1차 조사를 하고 3주 후에 동일한 직원에게 2차 조사를 실시했다. 이 조사 결과로 무엇을 평가할 수 있는가?"와 같은 문제가 출제될 수 있어요. 또한, 계산형으로 "두 검사 점수의 피어슨 상관계수가 0.85일 때, 이 도구의 검사-재검사 신뢰도에 대한 결론을 내리라"는 유형도 나올 수 있습니다.