보건프로그램 평가의 유형 중, 평가 자체의 질과 적절성을 평가하는 상위 평가 활동을 의미하는 용어는 무엇인가?

보건행정 핵심 해설
핵심 개념 분석 (Key Concept): 이 문제는 '평가에 대한 평가'라는 독특한 개념인 메타 평가를 묻고 있어요. 이는 평가 결과의 신뢰성과 활용도를 높이기 위한 중요한 절차예요.
정답 근거 (Answer Rationale): 핵심! 메타 평가는 이미 수행된 평가 활동이나 평가 보고서의 질, 타당성, 유용성 등을 체계적으로 검토하고 판단하는 과정이에요. 평가가 적절한 기준과 방법으로 이루어졌는지, 결과 해석이 논리적인지 등을 평가함으로써 평가의 책무성을 확보하고, 향후 평가의 질을 개선하는 데 기여해요.
오답 분석 (Distractor Analysis): 혼동 주의! ① 자체 평가와 ② 외부 평가는 평가의 '주체'에 따른 분류이고, ④ 총괄 평가와 ⑤ 형성 평가는 평가의 '시점과 목적'에 따른 분류예요. 이들은 모두 프로그램 자체를 평가하는 활동인 반면, 메타 평가는 그 '평가 활동'을 평가 대상으로 삼는다는 점에서 차원이 달라요.
연관 개념 정리 (Related Concepts): 미국평가학회(AEA) 등에서는 평가의 질을 판단하기 위한 다양한 메타 평가 기준(예: 공동 기준)을 제시하고 있어요. 여기에는 유용성, 실행 가능성, 적절성, 정확성 등의 기준이 포함돼요.
실무 포인트: 대규모 국책 사업의 평가 결과를 발표할 때, 외부 전문가로 구성된 메타 평가 위원회를 구성하여 평가 과정과 결과의 객관성을 검증하는 절차를 거치기도 해요.

핵심 해설 핵심 개념 분석 (Key Concept): 이 문제는 보건프로그램 평가 유형 중에서도 '평가 자체를 평가'하는 상위 개념인 메타 평가(Meta-evaluation)를 묻고 있어요. 단순히 프로그램의 성과를 측정하는 것을 넘어, 그 평가 과정이 과연 적절하고 신뢰할 수 있는지를 점검하는 매우 중요한 활동이랍니다. 정답 근거 (Answer Rationale): 핵심! 메타 평가는 "평가에 대한 평가(evaluation of an evaluation)"로 정의됩니다. 특정 프로그램에 대한 평가가 끝난 후, 그 평가 설계의 타당성, 자료 수집 방법의 정확성, 해석의 논리성, 결과의 유용성 등을 체계적으로 분석하고 판단하는 과정이에요. 이를 통해 평가 결과의 객관성과 신뢰성을 담보하고, 이해관계자들로부터 평가 결과에 대한 수용성을 높이며, 궁극적으로는 조직의 평가 역량 자체를 향상시키는 데 목적이 있어요. 오답 분석 (Distractor Analysis): 혼동 주의! 나머지 선택지들은 모두 '프로그램 자체'를 평가하는 활동인 반면, 메타 평가는 '평가 활동'을 평가 대상으로 삼아요. ① 총괄 평가(Summative evaluation): 프로그램 종료 시점에 전체적인 효과성이나 가치를 최종 판단하는 평가로, 계속 여부나 확대 여부를 결정하는 데 사용됩니다. ③ 자체 평가(Self-evaluation): 프로그램 운영 주체가 스스로 자신의 활동을 평가하는 방식으로, 평가의 주체가 내부에 있습니다. ④ 외부 평가(External evaluation): 외부의 독립된 기관이나 전문가가 프로그램을 평가하는 방식으로, 주체가 외부에 있다는 점에서 자체 평가와 구분됩니다. ⑤ 형성 평가(Formative evaluation): 프로그램 진행 중에 실시하며, 과정을 개선하고 문제점을 수정하기 위한 목적의 평가입니다. 연관 개념 정리 (Related Concepts): 미국평가학회(AEA)는 메타 평가를 위한 공동 기준(Joint Committee Standards)을 마련했어요. 여기에는 평가의 유용성(Utility), 실행 가능성(Feasibility), 적절성(Propriety), 정확성(Accuracy) 등 4대 기준이 포함되어 있어, 메타 평가자가 점검해야 할 구체적인 항목을 제시합니다. 개념 정리

구분	형성 평가	총괄 평가	메타 평가
목적	프로그램 개선 및 수정	프로그램 효과성 최종 판단	평가 활동 자체의 질 점검
시점	프로그램 진행 중	프로그램 종료 후	평가 완료 후
평가 대상	프로그램 활동 및 과정	프로그램 산출 및 결과	평가 설계, 과정, 보고서

한눈에 비교!

구분	자체 평가	외부 평가
평가 주체	내부 구성원(직원, 팀장)	외부 기관, 전문가
장점	업무 이해도가 높아 현실적 문제 파악 용이	객관성 및 독립성 확보, 이해충돌 방지
단점	객관성 결여 가능, 자기 합리화 우려	조직 맥락에 대한 이해 부족 가능성

실무 포인트 대규모 국책 보건사업(예: 지역사회 통합건강증진사업)의 성과 평가가 완료되면, 보건복지부나 질병관리청은 메타 평가 위원회를 구성하여 평가 용역 기관의 평가 설계서, 데이터 수집 및 분석 방법, 도출된 결론의 논리적 근거 등을 재검토합니다. 이 과정을 통해 평가 결과의 핵심! 신뢰성을 확보하고, 평가 방법론의 개선 방향을 제시하여 다음 해 평가 체계의 질을 높이는 선순환 구조를 만듭니다. 암기 팁 메타 평가(Meta-evaluation)의 '메타(Meta)'는 '초월' 또는 '상위'를 의미합니다. 즉, '평가를 초월한 평가', 한 단계 위에서 평가를 내려다보는 활동이라고 기억하면 혼동하지 않을 수 있어요. 국시 빈출 포인트 보건의료정보관리사 및 병원행정사 시험에서 평가의 유형은 단골 주제입니다. 특히 '형성 평가 vs 총괄 평가', '구조-과정-결과 평가(의료의 질 평가 도나베디안 모델)'와 함께 메타 평가의 정의와 다른 평가 유형과의 구분을 묻는 문제가 자주 출제되니, 각 평가의 목적과 시점을 중심으로 명확히 구분해 두세요. 기출 변형 주의! "보건복지부가 특정 금연 캠페인의 성과를 측정하기 위해 외부 기관에 의뢰하여 평가를 실시하였다. 이후 보건복지부는 해당 평가 보고서의 신뢰성을 검증하기 위해 또 다른 전문가 집단을 구성하여 평가 설계와 데이터 분석 방법의 적절성을 재검토하였다. 이 재검토 활동에 해당하는 평가 유형은?"과 같은 사례형으로 출제될 수 있습니다.

보건행정 실무 가이드 실무 시나리오 (Administrative Scenario): 당신은 보건소의 기획팀장입니다. 지역사회 고혈압 관리 프로그램에 대한 연간 평가를 마치고 최종 보고서를 작성했습니다. 보고서에는 프로그램 참여자들의 혈압 수치가 유의미하게 감소했다는 긍정적인 결론이 담겨 있습니다. 하지만, 사업 담당자가 평가를 직접 설계하고 진행한 자체 평가였기 때문에, 이 결과를 지역 주민과 의회에 투명하게 공개하기 전에 평가 자체의 객관성을 검증받고자 합니다. 이때 어떤 조치를 취해야 할까요? 행정 중재 전략 (Admin Intervention): 이 상황은 평가 결과의 책무성(accountability)을 확보하기 위해 메타 평가를 실시해야 하는 전형적인 사례입니다. 우선, 지역사회 내 보건학 교수나 유관 기관의 평가 전문가로 구성된 메타 평가 위원회(소규모 TF)를 구성합니다. 이 위원회에 평가 설계서, 수집된 원자료(비식별화 처리), 분석 코드, 최종 보고서 초안을 모두 제공하고, '평가의 정확성(표본 추출 방법, 통계 분석 기법의 적절성)'과 '결과 해석의 적절성(과대 해석 여부)'을 중점적으로 검토하도록 요청합니다. 위원회의 검토 의견을 반영하여 최종 보고서를 수정·보완한 후 공식 발표하는 절차를 거칩니다. 법적 안전 및 주의사항 (Precautions): 메타 평가를 통해 사업의 성과가 미흡하거나 평가 방법에 심각한 오류가 발견될 경우, 이를 은폐하지 않고 정책 결정권자에게 투명하게 보고하는 것이 장기적으로 조직의 신뢰도를 높이는 길입니다. 핵심! 평가 과정의 투명성은 국민의 세금이 투입되는 공공 보건사업에서 가장 중요한 윤리적 원칙입니다. 업무 프로토콜 1단계: 메타 평가 필요성 인식 및 상급자 보고 → 2단계: 외부/내부 전문가 중심의 메타 평가 위원회 구성 → 3단계: 평가 자료(설계서, 원자료, 보고서 등) 제출 → 4단계: 위원회 검토 수행 (평가 기준 충족 여부 판단) → 5단계: 메타 평가 결과 보고서 수령 및 최종 보고서 반영 → 6단계: 공식 평가 결과 발표 및 차년도 평가 설계 개선. 선배의 한마디 "보건행정가에게 평가는 단순히 '잘했다, 못했다'를 판단하는 것이 아니라, '더 나은 방향으로 가기 위한 증거를 만드는 과정'이에요. 메타 평가는 그 증거가 정말 믿을 만한지 스스로 검증하는 지혜로운 시스템입니다. 이 과정을 통해 여러분의 사업 평가 결과는 더 큰 설득력을 얻게 될 거예요."