보건프로그램의 목표가 실제로 프로그램의 활동을 통해 달성되었는지, 외부 요인의 영향 없이 순수한 프로그램의 효과만을 추정하는 평가를 무엇이라고 하는가?

보건행정 핵심 해설
핵심 개념 분석 (Key Concept): 이 문제는 평가의 가장 높은 단계인 인과 평가의 정의를 묻고 있어요. 단순히 변화가 있었는지를 넘어, 그 변화가 정말 우리 프로그램 때문인지를 규명하는 작업이에요.
정답 근거 (Answer Rationale): 핵심! 인과 평가는 프로그램과 관찰된 결과 사이의 '인과 관계'를 입증하는 평가예요. 이를 위해서는 엄격한 실험 설계(예: 무작위 대조군 실험)를 통해 외부 변수를 통제하고, 프로그램을 실시하지 않았을 때의 가상적인 결과(반사실적 조건)와 비교하여 순수한 프로그램의 효과(Net Effect)를 추정해야 해요.
오답 분석 (Distractor Analysis): 혼동 주의! ① 과정 평가는 프로그램이 계획대로 수행되었는지를, ② 구조 평가는 프로그램의 자원과 조직 체계를 평가해요. ④ 형성 평가는 프로그램 진행 중 개선을 위한 평가이며, ⑤ 비용 평가는 프로그램에 투입된 자원의 양을 측정하는 것으로, 모두 인과 관계 규명과는 목적이 달라요. 결과 평가가 '변화가 있었는가?'를 묻는다면, 인과 평가는 '그 변화가 우리 프로그램 때문인가?'를 묻는 것이에요.
연관 개념 정리 (Related Concepts): 인과 평가를 위해서는 내적 타당도를 확보하는 것이 매우 중요해요. 내적 타당도를 위협하는 요인으로는 성숙 효과, 외부 사건, 검사 효과, 선택 편향 등이 있어요.
국시 빈출 포인트: 결과 평가와 인과 평가를 구분하는 문제가 자주 출제돼요. 결과 평가는 프로그램 전후의 변화를 보여주지만, 인과 평가는 그 변화가 프로그램 덕분임을 증명해야 해요.

핵심 해설 핵심 개념 분석 (Key Concept): 이 문제는 보건사업 평가의 여러 유형 중에서도 가장 높은 수준의 분석을 요구하는 인과 평가(Causal Evaluation)의 정의를 정확히 이해하고 있는지 묻고 있어요. 단순히 사업 전후의 지표 변화를 측정하는 것을 넘어, 그 변화가 정말로 우리 보건프로그램의 개입 때문인지, 아니면 다른 외부 요인 때문인지를 분리해내는 작업이죠. 정답 근거 (Answer Rationale): 핵심! ③번 인과 평가는 프로그램의 활동과 관찰된 결과 사이의 '인과 관계(Causal Relationship)'를 과학적으로 입증하는 평가 방법이에요. 여기서 중요한 것은 '순수한 프로그램의 효과(Net Effect)'를 추정하는 것인데, 이는 프로그램에 참여하지 않았다면 어땠을지에 대한 가상의 상황, 즉 반사실적 조건(Counterfactual Condition)과 비교해야만 가능해요. 이를 위해 무작위 대조군 실험(RCT) 같은 엄격한 연구 설계를 통해 외부 변수들을 통제합니다. 예를 들어, 금연 프로그램 후 흡연율이 감소했더라도, 같은 기간 담뱃값이 인상되었다면 흡연율 감소가 순수하게 금연 프로그램 때문이라고 보기 어렵겠죠. 인과 평가는 바로 이런 혼란 요인을 제거하고 '진짜' 효과를 찾는 과정이에요. 오답 분석 (Distractor Analysis): 혼동 주의! ① 과정 평가(Process Evaluation)는 프로그램이 계획된 대로 얼마나 충실히 수행되었는지를 평가하는 것으로, '인과 관계' 규명과는 목적이 달라요. 예를 들어, 교육 프로그램에서 강의가 계획된 횟수만큼 제대로 진행되었는지 확인하는 것이죠. 혼동 주의! ② 형성 평가(Formative Evaluation)는 프로그램이 진행되는 '도중에' 문제점을 발견하고 개선하기 위해 실시하는 평가예요. 인과 평가처럼 최종 효과의 원인을 밝히는 것이 목적이 아니며, 평가의 시기와 목적이 다릅니다. ④ 구조 평가(Structural Evaluation)는 도나베디안(Donabedian)의 의료 질 평가 모델에 나오는 개념으로, 프로그램을 수행하는 데 필요한 인력, 시설, 장비, 예산 등 '투입 자원'의 적절성을 평가하는 거예요. 결과와의 인과 관계를 분석하는 것과는 거리가 멀어요. ⑤ 비용 평가(Cost Evaluation)는 프로그램에 사용된 모든 자원을 화폐 가치로 환산하는 평가로, 비용-편익 분석(CBA)이나 비용-효과 분석(CEA)의 기초가 되지만, 프로그램의 순수한 효과를 추정하는 인과 평가와는 완전히 다른 차원의 평가입니다. 연관 개념 정리 (Related Concepts): 인과 평가를 제대로 수행하기 위해서는 연구 설계의 내적 타당도(Internal Validity)를 확보하는 것이 핵심이에요. 내적 타당도를 위협하는 요인들로는 대상자들이 시간이 지나면서 자연스럽게 변하는 성숙 효과(Maturation), 프로그램 외부에서 발생한 사건의 영향인 외부 사건(History), 사전 검사 자체가 사후 검사 결과에 영향을 미치는 검사 효과(Testing Effect), 실험군과 대조군의 구성이 애초에 달랐던 선택 편향(Selection Bias) 등이 있어요. 개념 정리:

평가 유형	핵심 질문	주요 목적
구조 평가	무엇으로 하는가?	인력, 시설, 장비 등 투입 자원의 적절성 평가
과정 평가	어떻게 하는가?	계획된 활동이 충실히 수행되었는지 평가
결과 평가	무엇이 변했는가?	프로그램 전후의 지표 변화 측정
인과 평가	우리 프로그램 때문인가?	순수한 프로그램의 효과(Net Effect) 규명
형성 평가	어떻게 개선할까?	프로그램 진행 중 문제점 발견 및 수정

한눈에 비교!: 혼동 주의! 결과 평가(Outcome Evaluation)는 '흡연율이 10% 감소했다'처럼 변화의 크기만 보여줍니다. 반면 인과 평가는 '흡연율 감소가 담뱃값 인상 때문이 아니라 우리 금연 상담 프로그램 덕분이다'라는 것을 증명하는 작업이에요. 결과 평가는 변화를 '측정'하는 것이고, 인과 평가는 변화의 원인을 '규명'하는 상위 개념입니다. 실무 포인트: 보건행정 현장에서 인과 평가를 수행하려면, 애초에 사업 기획 단계부터 평가 설계를 포함해야 해요. 예를 들어, 고혈압 관리 프로그램을 기획할 때, 프로그램에 참여하지 않는 유사한 지역사회를 비교 집단으로 미리 선정해두고, 양쪽의 혈압 변화 추이를 비교하는 이중차이분석(DID)과 같은 준실험적 설계를 고려해야 합니다. 국시 빈출 포인트: 보건의료정보관리사 및 병원행정사 시험에서 평가의 종류를 구분하는 문제는 매우 자주 출제돼요. 특히 '순수한 효과'나 '인과 관계 규명'이라는 키워드가 나오면 반드시 인과 평가를 떠올리세요. 결과 평가, 과정 평가, 구조 평가를 하나의 표로 묶어서 그 특징을 비교 암기하는 것이 효과적입니다.

보건행정 실무 가이드 실무 시나리오 (Administrative Scenario): 당신은 보건소의 보건행정 담당자입니다. 지역 내 비만율이 심각하여 작년에 새로운 '지역사회 기반 비만 예방 프로그램'을 도입했어요. 1년이 지난 지금, 지역 주민의 비만율이 2%p 감소했다는 결과 보고서가 올라왔습니다. 그런데 마침 같은 해에 구청에서 마을 곳곳에 무료 야외 운동기구를 대거 설치했어요. 구청장은 비만율 감소가 전적으로 보건소 프로그램 덕분이라고 대대적으로 홍보하길 원합니다. 하지만 당신은 그 효과가 새로 설치된 운동기구 때문일 수도 있다는 의구심이 들어요. 이 상황에서 당신은 어떻게 프로그램의 진짜 효과를 증명해야 할까요? 행정 중재 전략 (Admin Intervention): 이 상황은 전형적으로 인과 평가가 필요한 사례예요. 먼저, 프로그램의 효과와 외부 요인(무료 운동기구)의 효과를 분리해야 합니다. 1단계로, 프로그램에 참여한 집단(실험군)과 비슷한 조건이지만 프로그램에 참여하지 않은 다른 지역 주민 집단(대조군)의 비만율 변화 데이터를 수집해야 해요. 2단계로, 두 집단의 비만율 변화 차이를 비교하는 이중차이분석(Difference-in-Differences, DID) 같은 통계적 방법을 사용합니다. 만약 실험군의 비만율 감소 폭이 대조군보다 통계적으로 유의미하게 컸다면, 그 차이만큼이 외부 요인을 제거한 우리 프로그램의 '순수한 효과'라고 추정할 수 있어요. 3단계로, 이 분석 결과를 바탕으로 구청장에게 '프로그램이 효과가 있었던 것은 분명하지만, 그 효과의 크기는 운동기구 설치 효과와 구분하여 이만큼이다'라고 과학적 근거를 가지고 정확히 보고하는 것이 행정 전문가의 역할입니다. 법적 안전 및 주의사항 (Precautions): 지역 보건사업 평가 시, 개인정보보호법을 준수하여 대상자 데이터를 수집·분석해야 해요. 특히 비교 집단의 정보를 활용할 때는 사전에 정보 활용 동의를 받았는지, 데이터가 익명화되었는지 반드시 확인해야 합니다. 허위 또는 과장된 사업 평가 결과를 공표하는 것은 주민의 알 권리를 침해하고 행정 신뢰도를 떨어뜨릴 수 있어요. 업무 프로토콜:
1. 평가 계획 수립 시 대조군 설정 (지역사회 짝짓기 등) 포함하기
2. 기초 조사와 추적 조사 시, 양 집단에 동일한 측정 도구 사용
3. 성별, 연령 등 공변량을 통제한 다변량 회귀분석 또는 성향 점수 매칭(PSM) 등 고급 통계 기법 활용 검토
4. 최종 보고서에는 '순 효과(Net Effect)'와 외부 요인 영향을 분리한 근거를 명확히 제시 선배의 한마디: "보건행정가로서 사업의 성과를 정확히 평가하는 것은 예산을 효율적으로 배분하고 다음 사업을 계획하는 기초가 돼요. '우리 프로그램이 진짜 효과가 있었는가?'라는 인과 평가의 질문을 항상 염두에 두고, 과학적 근거에 기반한 행정 결정을 내리는 것이 전문가의 핵심 역량이랍니다!"