지역사회 건강조사 측정도구의 신뢰도가 높다는 것의 의미로 옳은 것은?

신뢰도는 같은 대상을 반복해서 재도 비슷한 값이 나오는 일관성이고, 타당도는 재려던 것을 제대로 재고 있는지의 문제다. 저울이 늘 같은 값을 가리키면 신뢰도는 높지만 영점이 어긋나 있으면 타당도는 낮아, 둘은 서로 독립적으로 평가된다.

측정도구의 질을 평가할 때는 신뢰도(reliability)와 타당도(validity)를 함께 봅니다. 신뢰도는 같은 대상을 반복해서 재도 비슷한 값이 나오는 일관성, 곧 측정의 안정성을 뜻합니다. 타당도는 그 도구가 재려던 개념을 실제로 재고 있는지를 뜻합니다.
저울에 비유하면 이해가 쉽습니다. 어떤 저울이 같은 사람을 잴 때마다 늘 62kg을 가리킨다면 신뢰도는 높습니다. 그런데 영점이 2kg 어긋나 실제 체중이 60kg이라면 타당도는 낮습니다. 반대로 값이 잴 때마다 크게 흔들린다면 그 도구로는 어떤 개념도 제대로 잴 수 없으므로, 신뢰도는 타당도의 필요조건이 됩니다. 신뢰도가 높다고 타당도가 보장되지는 않지만, 신뢰도가 낮으면 타당도도 확보할 수 없습니다.
신뢰도를 재는 방법으로는 같은 도구를 시간 간격을 두고 두 번 적용하는 검사-재검사 신뢰도, 두 명 이상의 측정자가 같은 대상을 재어 일치도를 보는 측정자 간 신뢰도, 여러 문항이 같은 개념을 재고 있는지를 보는 내적 일관성이 있습니다. 타당도에는 전문가가 문항 구성을 검토하는 내용타당도, 기존의 표준검사와 비교하는 준거타당도, 이론적 개념 구조와 맞는지 보는 구성타당도가 있습니다. 선별검사에서 말하는 민감도와 특이도는 확진검사를 준거로 삼은 준거타당도의 지표에 해당합니다.
지역사회 건강조사에서는 이 개념이 자료의 신뢰성을 좌우합니다. 혈압을 잴 때 커프 크기를 통일하고 측정 전 5분 안정, 두 번 측정 후 평균값 사용 같은 절차를 정해 두는 것은 측정자 간 신뢰도를 높이는 활동입니다. 반면 표본을 편중 없이 뽑는 문제는 표본의 대표성에 관한 것이고, 결과를 다른 집단에 적용할 수 있는지는 외적 타당도의 문제이므로 측정도구의 신뢰도와는 구분해 두셔야 합니다.
정리하면 신뢰도는 '몇 번을 재도 같은 값이 나오는가', 타당도는 '재려던 것을 재고 있는가'입니다. 지역사회 건강조사를 설계할 때는 이미 신뢰도와 타당도가 검증된 표준 도구를 쓰는 것이 원칙이며, 부득이 문항을 수정했다면 예비조사를 통해 다시 확인해야 합니다. 조사원 교육에서 측정 절차와 판정 기준을 통일하는 것도 자료의 질을 지키는 중요한 활동입니다.