측정값이 참값에 가까운 정도는?

도구가 의도한 개념을 정확히 측정하는 정도가 타당도다.

측정의 기본 개념: 타당도와 신뢰도
측정값이 참값에 가까운 정도를 묻는 개념은 타당도(validity)입니다. 타당도는 측정 도구가 측정하고자 하는 바를 얼마나 정확하게 측정하는지를 나타내며, 참값(gold standard)과의 일치 정도로 평가합니다. 반면 신뢰도(reliability)는 반복 측정 시 결과가 얼마나 일관되는지를 의미하므로, 참값과의 근접성과는 구분됩니다. 타당도는 ‘정확성(accuracy)’의 개념이고, 신뢰도는 ‘일관성(consistency)’의 개념입니다.

임상 측정기기 평가에서 타당도의 실제 적용
치과위생사가 임상에서 사용하는 혈압계, 체온계, 맥박산소측정기 등 생체신호 측정기기는 모두 참값과의 일치도를 검증하는 타당도 평가를 거칩니다. 근거 자료^[2]에서는 임신부 혈압 측정기기의 정확도를 수은혈압계(참값 기준)와 비교하여 평가했고, 근거 자료^[3]에서도 디지털 혈압계의 진단 정확도를 기존 수은혈압계와 비교했습니다. 이처럼 타당도 연구는 새 측정기기의 값을 참값 기준(gold standard)과 비교하여 그 차이와 일치도를 분석하는 방식으로 이루어집니다.

웨어러블 기기와 타당도 검증의 중요성
최근 스마트워치 등 웨어러블 기기의 보급으로 심박수, 산소포화도, 에너지 소비량 등을 일상에서 측정하는 사례가 늘었습니다. 근거 자료^[1]은 Google Pixel Watch 3의 심박수와 에너지 소비량 측정값을 간접열량계(indirect calorimetry)와 Polar H10 흉부스트랩이라는 참값 기준과 비교하여 타당도를 평가했습니다. 근거 자료^[4]의 체계적 문헌고찰에서도 팀스포츠 선수 대상 웨어러블 기기의 타당도와 정확도를 gold-standard 방법과 비교한 연구들을 분석했습니다. 핵심! 임상에서 새 측정기기를 도입할 때는 단순히 사용 편의성만 볼 것이 아니라, 참값 기준과 비교한 타당도 검증 연구가 있는지 확인해야 합니다.

보기별 개념 정리

보기	개념	평가 초점
타당도	참값에 가까운 정도	정확성(accuracy), 일치도(agreement)
신뢰도	반복 측정 시 일관된 정도	재현성(reproducibility), 반복성(repeatability)
정밀도	측정값들 사이의 흩어짐이 작은 정도	분산(variance)의 크기
재현성	다른 조건에서도 같은 결과가 나오는 정도	신뢰도의 하위 개념
일치율	두 측정값이 동일한 범주로 분류되는 비율	범주형 자료의 일치도

혼동 주의! 정밀도(precision)는 측정값들이 서로 얼마나 모여 있는지를 의미하며, 참값과의 거리와는 무관합니다. 정밀도가 높아도 참값에서 멀리 떨어져 있으면 타당도는 낮을 수 있습니다. 예를 들어 혈압계가 매번 같은 값을 보여주더라도(정밀도 높음) 그 값이 실제 혈압과 20 mmHg 차이가 난다면 타당도가 낮은 것입니다. 타당도가 높으면 일반적으로 신뢰도도 높지만, 신뢰도가 높다고 해서 타당도가 높은 것은 아닙니다.