보건프로그램 평가 설계에서 프로그램의 순수한 효과를 측정하기 위해, 프로그램에 참여하지 않은 통제집단과의 비교를 통해 외부 요인의 영향을 통제하는 평가 설계는?

보건행정 핵심 해설
이 문제는 평가설계의 유형 중 인과관계 추론의 강도가 가장 높은 설계를 묻고 있어요.

핵심 개념 분석
핵심! 진실험 설계(True experimental design)는 무작위 할당(Random assignment)을 통해 실험집단과 통제집단을 구성하고, 프로그램 실시 전후로 두 집단을 모두 측정하여 순수한 프로그램 효과를 추정하는 방식이에요. 무작위 할당 덕분에 두 집단의 동질성이 확보되어, 외부 변수의 영향을 가장 엄격하게 통제할 수 있어요.

정답 근거
프로그램의 순수한 효과(순효과, Net effect)를 측정하기 위해서는 프로그램 외 다른 요인(성숙 효과, 역사적 사건 등)의 영향을 배제해야 해요. 진실험 설계, 특히 통제집단 사전사후 설계(Pretest-posttest control group design)는 무작위 할당과 통제집단을 활용하여 내적 타당도(Internal validity)를 극대화하므로, 순수한 효과 측정에 가장 적합한 방법이에요.

오답 분석
혼동 주의! ② 준실험 설계(Quasi-experimental design)는 통제집단을 활용하지만 무작위 할당이 이루어지지 않아 집단 간 동질성이 완벽히 보장되지 않아요. 따라서 선택 편의(Selection bias)가 발생할 수 있어 진실험 설계보다 내적 타당도가 낮아요. ③ 단일집단 사전사후 설계는 통제집단이 없어 외부 요인의 영향을 전혀 통제할 수 없어요. ④ 비용-효과 분석은 경제성 평가 기법이며, ⑤ 형성 평가는 프로그램 진행 중 개선을 위한 평가로, 인과관계 규명과는 거리가 있어요.

개념 정리
평가 설계의 유형은 크게 실험설계, 준실험설계, 비실험설계로 나뉘며, 인과관계 추론 능력(내적 타당도)은 실험설계가 가장 높고 비실험설계가 가장 낮아요.

한눈에 비교!

구분	진실험 설계	준실험 설계
통제집단	있음	있음
무작위 할당	있음	없음
내적 타당도	높음	중간

국시 빈출 포인트
각 설계 유형의 특징과 장단점, 그리고 내적 타당도를 위협하는 요인(성숙, 검사, 도구, 통계적 회귀 등)과 연결 지어 출제돼요.

보건행정 핵심 해설 이 문제는 보건프로그램 평가 설계의 유형 중, 프로그램의 순수한 효과(순효과, Net effect)를 측정하기 위한 가장 엄격한 방법을 묻고 있어요. 평가 설계의 핵심은 외부 요인을 통제하여 프로그램과 결과 간의 인과관계를 얼마나 명확히 입증할 수 있는가, 즉 내적 타당도(Internal validity)를 확보하는 것에 달려 있어요. 핵심 개념 분석 (Key Concept) 프로그램 평가에서 순수한 효과란, 다른 외부 요인의 개입 없이 오직 해당 프로그램만이 만들어낸 변화를 의미해요. 이를 측정하려면 프로그램에 참여한 집단(실험집단)과 참여하지 않은 집단(통제집단)을 비교해야 하고, 두 집단이 프로그램 시작 전에 동질해야 한다는 전제가 필수적이에요. 이 동질성을 가장 완벽하게 확보하는 방법이 바로 핵심! 무작위 할당(Random assignment)이며, 이는 진실험 설계(True experimental design)의 가장 큰 특징이에요. 정답 근거 (Answer Rationale) 진실험 설계는 무작위 할당을 통해 실험집단과 통제집단을 구성하기 때문에, 두 집단의 특성이 통계적으로 동등하게 분포되어 선택 편의(Selection bias)를 원천적으로 차단할 수 있어요. 특히 통제집단 사전사후 설계(Pretest-posttest control group design)는 두 집단을 사전과 사후에 모두 측정하므로, 프로그램 효과를 가장 정확하게 추정할 수 있는 표준적인 방법이에요. 따라서 외부 요인의 영향을 가장 엄격하게 통제하여 순수한 효과를 측정할 수 있어요. 오답 분석 (Distractor Analysis) 혼동 주의! 4번 준실험 설계(Quasi-experimental design)는 통제집단을 활용하지만, 무작위 할당이 아닌 기존 집단을 그대로 사용하거나 임의로 배정하기 때문에 집단 간 동질성이 완벽하게 보장되지 않아요. 따라서 외부 요인의 영향을 완전히 통제했다고 보기 어려워 진실험 설계보다 내적 타당도가 낮아요. 1번 비용-효과 분석(Cost-effectiveness analysis)은 경제성 평가의 한 방법으로, 프로그램의 효과를 화폐 가치가 아닌 자연 단위(예: 수명 연장, 혈압 강하)로 측정하여 비용 대비 효과를 비교하는 기법이에요. 인과관계를 규명하는 평가 설계와는 목적이 다릅니다. 2번 형성 평가(Formative evaluation)는 프로그램을 진행하는 과정에서 실시하는 평가로, 프로그램의 개선과 수정을 목적으로 해요. 프로그램의 최종 효과를 측정하는 총괄 평가(Summative evaluation)와 구별됩니다. 5번 단일집단 사전사후 설계(One-group pretest-posttest design)는 통제집단이 없어 외부 요인의 영향을 전혀 배제할 수 없는 비실험 설계(Non-experimental design)예요. 성숙 효과, 역사적 사건 등 내적 타당도를 위협하는 요인들을 통제할 수 없기 때문에 순수한 프로그램 효과를 측정할 수 없어요. 연관 개념 정리 (Related Concepts) 프로그램 평가에서 인과관계 추론의 강도는 진실험 설계 > 준실험 설계 > 비실험 설계 순서로 높아요. 무작위 할당의 윤리적·현실적 제약으로 인해 보건의료 현장에서는 준실험 설계가 자주 활용되며, 이때는 통계적 기법을 통해 집단 간 차이를 보정하려는 노력이 추가되어야 해요. 개념 정리 진실험 설계(True experimental design)는 인과관계 규명 능력이 가장 뛰어난 평가 설계이며, 실험 대상의 무작위 할당, 실험집단과 통제집단의 구성, 독립변수의 조작이라는 세 가지 기본 요소를 충족해야 성립해요. 한눈에 비교!

구분	진실험 설계	준실험 설계	비실험 설계
통제집단	있음	있음	없음 (또는 비교집단)
무작위 할당	있음 (필수)	없음	없음
내적 타당도	매우 높음	중간	낮음
주요 편의	거의 없음	선택 편의 발생 가능	다양한 외생변수 개입
대표 사례	통제집단 사전사후 설계	비동등 통제집단 설계, 시계열 설계	단일집단 사전사후 설계

국시 빈출 포인트 보건의료정보관리사 및 병원행정사 시험에서는 각 평가 설계의 구체적인 특징과 장단점을 비교하는 문제가 자주 출제돼요. 특히, 내적 타당도를 위협하는 요인들(성숙 효과, 검사 효과, 도구 효과, 통계적 회귀, 선택 편의 등)이 특정 설계에서 어떻게 통제되거나 발생하는지를 연결 지어 묻는 패턴이 중요하니 꼭 정리해두세요. 기출 변형 주의! 같은 개념을 사례형으로 제시하며, "어느 보건소에서 새로운 금연 프로그램의 효과를 평가하기 위해 참여 희망자 100명을 모집한 후, 제비뽑기로 50명은 프로그램에 참여시키고 나머지 50명은 대기자 명단에 올려 6개월 후 두 집단의 금연 성공률을 비교하였다."와 같은 시나리오를 주고 이에 해당하는 평가 설계를 묻는 문제로 변형될 수 있어요.

보건행정 실무 가이드 실무 시나리오 (Practical Scenario) 당신은 지역 보건소의 보건행정 담당자입니다. 관할 지역의 노인 우울증 예방을 위한 새로운 통합 관리 프로그램을 시범 운영하라는 지시를 받았습니다. 1년 후, 이 프로그램이 실제로 노인 우울증 감소에 순수하게 기여한 효과를 과학적으로 입증하여, 예산을 확보하고 전국 사업으로 확대해야 하는 상황입니다. 어떤 평가 설계를 기획해야 할까요? 행정 중재 전략 (Admin Intervention) 가장 먼저 핵심! 진실험 설계를 기반으로 기획해요. 프로그램 참여를 희망하는 노인들의 명단을 확보한 후, 컴퓨터 프로그램을 이용한 완전한 무작위 배정을 통해 실험군과 대조군으로 나눕니다. 두 집단 모두에게 프로그램 시작 전 우울증 검사를 실시하여 동질성을 확인하고, 프로그램 종료 후 동일한 검사로 변화를 측정합니다. 이때 대조군에는 기존의 표준 서비스를 제공하며, 연구 윤리를 위해 프로그램 효과가 입증된 후에는 대조군에게도 동일한 프로그램을 제공할 계획을 수립합니다. 결과 분석 시, 두 집단의 사전-사후 차이를 비교하여 프로그램의 순효과를 통계적으로 검증합니다. 법적 안전 및 주의사항 (Precautions) 연구 윤리 심의 위원회(IRB, Institutional Review Board)의 승인을 반드시 받아야 하며, 대상자들에게 연구의 목적과 방법을 설명하고 서면 동의(Informed consent)를 받아야 해요. 특히, 통제집단에게 프로그램을 제공하지 않는 것에 대한 윤리적 정당성을 확보하고, 개인정보보호법에 따라 수집된 모든 정보를 안전하게 관리해야 합니다. 업무 프로토콜 1단계: 설계 (연구 계획서 작성 및 IRB 승인) 2단계: 모집 및 할당 (대상자 모집 공고 → 동의 획득 → 난수표를 이용한 무작위 할당) 3단계: 사전 조사 (두 집단 모두에게 구조화된 설문지로 우울증 수준 측정) 4단계: 프로그램 시행 (실험군에만 신규 프로그램 제공, 대조군은 기존 서비스 유지) 5단계: 사후 조사 및 분석 (프로그램 종료 후 동일 척도로 재측정 → 공분산 분석(ANCOVA) 등 통계 기법으로 순효과 추정) 선배의 한마디 "보건행정 현장에서 예산을 확보하고 정책을 결정하기 위해서는 '감'이 아닌 '데이터'로 말해야 해요. 진실험 설계는 비용과 시간이 많이 들지만, 프로그램의 진정한 가치를 증명할 수 있는 가장 강력한 도구라는 사실을 잊지 마세요. 평가 설계의 강도를 이해하는 것은 증거 기반의 보건정책을 수립하는 첫걸음이랍니다!"