직원별 감염관리 수행률을 비교하려는데 관찰 항목 정의가 서로 달랐다. 우선 필요한 조치는?

비교 가능한 자료를 얻으려면 항목의 조작적 정의와 관찰자 교육을 먼저 표준화해야 한다.

치위생 감염관리 수행률을 직원 간 비교하려면 측정 도구 자체가 동일해야 합니다. 관찰 항목의 정의가 관찰자마다 다르면 같은 행위를 두고 어떤 관찰자는 ‘수행’으로, 다른 관찰자는 ‘미수행’으로 판정하게 되어 수집된 자료의 신뢰도가 무너집니다. 이는 단순한 기록 오류가 아니라 측정오차(measurement error)가 결과에 체계적으로 섞이는 상황이므로, 먼저 관찰 기준을 통일하지 않으면 이후 어떤 통계 분석도 의미를 갖기 어렵습니다.

감염관리 수행률 비교는 ‘무엇을 수행으로 볼 것인가’에 대한 조작적 정의(operational definition)가 모든 관찰자에게 동일하게 적용될 때만 타당합니다. 예를 들어 ‘손위생 수행’을 ‘물과 비누로 40–60초 문지르기’로 정의했는지, ‘알코올 손소독제 사용’까지 포함했는지에 따라 같은 직원의 수행률이 달라질 수 있습니다. 핵심! 관찰 항목 정의가 다르면 직원 간 차이가 실제 수행 능력의 차이인지, 관찰 기준의 차이인지 분간할 수 없습니다.

근거 자료 ^[1]은 치과 수련 교육에서 구조화된 단계별 평가(structured stepwise assessment)를 적용했을 때 절차적 수행의 변동성(performance variability)이 감소했다고 보고합니다. 이 연구는 치아 발치를 9단계로 나누고 단계마다 관찰 기준을 명시했는데, 이는 평가의 표준화가 수행 측정의 일관성을 높인다는 원리를 보여줍니다. 감염관리 수행률 조사도 동일한 원리가 적용됩니다. 관찰 항목을 세분화하고 각 항목의 적합/부적합 기준을 명확히 정의해야 관찰자 간 신뢰도(inter-rater reliability)가 확보됩니다.

또한 근거 자료 ^[2]는 로봇 보조 임플란트 수술의 이점으로 표준화(standardization)를 강조합니다. 기존 수기 시술은 시술자 간 편차가 클 수 있지만, 표준화된 프로토콜은 오차를 줄이고 결과의 재현성을 높입니다. 감염관리 관찰도 마찬가지로, 관찰 기준과 관찰자 교육이 표준화되지 않으면 측정값의 재현성이 낮아져 직원 간 비교 자체가 불가능해집니다.

보기 1, 2, 3, 4는 모두 측정오차를 해결하지 못한 채 자료를 왜곡하는 방법입니다. 관찰 횟수를 줄이면 오히려 무작위 오차가 커질 수 있고, 결과가 높은 직원만 포함하면 선택 편향(selection bias)이 발생합니다. 불일치 자료를 임의 삭제하면 정보 손실과 함께 결과가 왜곡되며, 모든 수행을 적합으로 처리하면 측정 자체를 포기하는 것입니다. 혼동 주의! 자료의 질 문제는 자료를 버리거나 조작해서 해결하는 것이 아니라, 자료를 만드는 측정 과정을 표준화하여 해결해야 합니다.

따라서 직원별 감염관리 수행률을 신뢰성 있게 비교하려면 표준화된 관찰 기준을 문서화하고, 모든 관찰자가 동일한 기준으로 판정하도록 관찰자 교육(observer training)을 시행한 후 재측정하는 것이 우선입니다. 이는 근거 자료 ^[1]에서 구조화된 평가 도구와 관찰 훈련이 수행 변동성을 줄였다는 결과와 일치하며, 감염관리 질 향상 활동에서도 동일하게 적용되는 원리입니다.