신뢰도는 같은 것을 측정했을 때 결과가 얼마나 일관되는가를 말하며, 일관성을 어떤 조건에서 확인하느냐에 따라 유형이 나뉩니다. 물리치료 평가 도구를 선택하거나 연구 논문을 읽을 때 가장 자주 만나는 개념이므로 국시에도 유형 구분이 반복 출제됩니다. 이 문제의 조건은 '동일한 검사자', '같은 대상자', '시간 간격을 두고 반복'입니다.
정답은 보기 2번 검사자 내 신뢰도(intra-rater reliability)입니다. 같은 검사자가 같은 대상자를 서로 다른 시점에 측정해 결과가 일치하는 정도를 보기 때문입니다. 뇌졸중 후 편마비 환자 50명의 보행 수행검사를 7일 간격으로 반복 측정한 연구는 시기 간 검사자 내 신뢰도를 급내상관계수(ICC)로 평가했고 0.94에서 0.99로 높게 나왔습니다.[1] 임상에서 한 치료사가 환자의 관절가동범위나 근력을 매번 같은 방식으로 재야 변화를 신뢰할 수 있으므로, 이 신뢰도는 치료 효과 판정의 전제 조건이 됩니다. 연구에서는 한 검사 안에서 여러 신뢰도를 따로 구해 비교하기도 합니다. 만성 발목 불안정 환자에서 반응 균형검사를 세 번 반복한 연구는 검사-재검사, 검사자 내, 검사자 간 신뢰도를 각각 따로 산출했고, 정확도 지표에서 검사자 내 신뢰도는 좋음, 검사자 간 신뢰도는 보통 수준이었습니다.[2]
보기별 해설
1번: 검사자 간 신뢰도 — 서로 다른 검사자가 같은 대상자를 측정했을 때의 일치도입니다. 이 문제는 검사자가 같다는 조건이 있으므로 해당하지 않습니다.
3번: 내적 일관성 — 한 척도 안의 문항들이 같은 개념을 일관되게 측정하는지를 보며 크론바흐 알파로 평가합니다. 반복 측정과는 관련이 없습니다.
4번: 동형 검사 신뢰도 — 같은 개념을 재도록 만든 서로 다른 두 형태의 검사 결과가 일치하는지를 봅니다.
5번: 예측 타당도 — 신뢰도가 아니라 타당도의 한 종류로, 검사 점수가 미래의 기준을 얼마나 잘 예측하는지를 봅니다.
시험 포인트
유형을 가르는 질문은 세 가지입니다. 검사자가 바뀌는가(바뀌면 검사자 간), 시점이 바뀌는가(바뀌면 검사-재검사 또는 검사자 내), 문항이 바뀌는가(문항 간 일치면 내적 일관성, 형태 간 일치면 동형)입니다. 검사-재검사 신뢰도는 시간 간격에 초점을 두고, 검사자 내 신뢰도는 같은 검사자라는 점에 초점을 두기 때문에 실제 연구에서는 한 설계가 두 가지를 겸하기도 합니다. 일치도를 보여 주는 통계로는 연속형 자료에서 급내상관계수, 범주형 자료에서 카파 계수를 사용한다는 점도 함께 기억하세요. 타당도 보기가 섞여 나오면 바로 소거할 수 있어야 합니다.
요약하면 같은 검사자가 같은 대상자를 시간 간격을 두고 반복 측정해 일관성을 보는 것이 검사자 내 신뢰도입니다.
참고 문헌 (논문 출처)
[1]
Reliability of gait performance tests in men and women with hemiparesis after stroke.일반논문Flansbjer UB, Holmbäck AM, Downham D, Patten C, Lexell J (2005) · DOI: 10.1080/16501970410017215
[2]
Test-retest, intra- and inter-rater reliability of the reactive balance test in patients with chronic ankle instability.일반논문Maricot A, Lathouwers E, Verschueren J, De Pauw K, Meeusen R, Roelands B (2024) · DOI: 10.3389/fneur.2024.1320043
물리치료 임상 실무 가이드임상 시나리오 (Clinical Scenario)“물리치료사가 어깨관절 충돌 증후군 환자의 어깨관절 벌림(Shoulder abduction) 관절운동범위(ROM)를 측정하고 있어요. 월요일에 측정했을 때는 90도였는데, 수요일에 같은 환자를 다시 측정하니 110도가 나왔어요. 환자의 상태가 실제로 좋아진 걸까요? 아니면 치료사가 측정할 때 기준을 다르게 적용한 걸까요?”이런 상황에서 문제가 되는 것이 바로 검사자 내 신뢰도(Intra-rater reliability)예요. 경험이 많은 물리치료사라면 해부학적 랜드마크(예: 어깨뼈 가시, 위팔뼈 가쪽위관절융기)를 정확히 촉지하고, 환자의 보상 움직임(몸통 기울임 등)을 통제하며 일관된 자세로 측정하기 때문에 검사자 내 신뢰도가 높아요.물리치료 중재 전략 (Intervention Strategy)1. 평가(Examination): 측정 시 반드시 표준화된 프로토콜을 사용해요. 예를 들어, 각도계의 축(Axis)을 어깨뼈봉우리(Acromion)에 정확히 두고, 고정팔은 몸통과 평행하게, 이동팔은 위팔뼈(Humerus)에 평행하게 유지하는 기본 원칙을 지켜야 해요.2. 물리치료 진단 및 목표 설정(PT Dx & Goal): 신뢰도가 낮은 평가는 잘못된 치료 목표로 이어질 수 있어요. 만약 측정 오류 때문에 ROM이 과대평가되면, 치료 강도를 무리하게 높여 오히려 통증을 악화시키거나 손상을 유발할 수 있어요.3.중재(Intervention) 및 재평가(Re-evaluation): 측정 전에 충분한 교육과 시범을 보여주고, “아픈 쪽이 아니라 안 아픈 쪽만큼 팔을 옆으로 들어 올려 보세요”와 같은 일관된 구두 지시를 사용해요.환자 안전 및 주의사항 (Precautions)측정의 신뢰도를 높이기 위해 환자의 통증으로 인한 순간적인 보호 수축(Guarding)을 움직임의 끝으로 오인하지 않도록 주의해야 해요. 또한, 같은 시간대에 평가를 시행하여 일중 변동성(Diurnal variation, 예: 오전 경직, 오후 부종)을 최소화하는 것도 중요해요.
물리치료 프로토콜신뢰도 높은 ROM 측정을 위한 표준화 전략1. 환자에게 측정 동작을 먼저 교육하고 충분히 연습시킨다.2. 각도계의 축과 팔 위치를 눈으로 확인한 후, “하나, 둘, 셋”에 맞춰 움직이게 하여 속도를 일정하게 유지한다.3. 검사자는 반드시 환자의 움직임을 따라가며 이동팔을 정확히 고정하고, 끝 범위에서 측정값을 읽는다.
선배 물리치료사의 한마디
“임상에서 선배들이 ‘너는 각도계를 눈으로 보는 게 아니라 마음으로 본다’고 농담할 때가 있어요. 그만큼 치료사 개인의 주관이 개입되기 쉬운 게 ROM 측정이에요. 신뢰도를 높이는 유일한 방법은 정직한 반복 측정과 표준화된 프로토콜 준수라는 사실, 잊지 마세요! 내 평가 결과에 일관성이 있어야 환자의 진짜 변화를 놓치지 않을 수 있답니다.”
신뢰도 — 측정 시 오차 없이 일관된 결과를 얻을 수 있는 정도로, 검사자 내/간 신뢰도, 검사-재검사 신뢰도 등으로 분류된다.
검사자 내 신뢰도(Intra-rater reliability) — 동일한 검사자가 동일한 대상자를 시간 간격을 두고 반복 측정했을 때 측정값의 일관성을 평가하는 지표이다.
검사자 간 신뢰도(Inter-rater reliability) — 두 명 이상의 서로 다른 검사자가 동일한 대상자를 동시에 또는 근접한 시기에 측정했을 때의 일치도를 의미한다.
타당도 — 측정 도구가 측정하고자 하는 개념이나 속성을 얼마나 정확하게 측정하는지를 나타내는 정도이다. 신뢰도가 전제되어야 한다.
검사-재검사 신뢰도(Test-retest reliability) — 동일한 측정 도구를 동일한 대상자에게 시간 간격을 두고 반복 측정했을 때 결과가 얼마나 일관되는지 평가하는 지표로, 검사자 내 신뢰도와 유사한 개념이다.