보건사업 평가 설계 시, 사업 실시 전과 후의 상태를 비교하는 데 가장 큰 제한점을 가지는 평가 설계 유형은?

보건행정 핵심 해설
핵심 개념 분석 (Key Concept): 다양한 평가 설계의 유형과 각 설계가 가지는 내적 타당도(인과 관계 추론의 정확성)의 강점과 약점을 이해하는 문제예요.
정답 근거 (Answer Rationale): 핵심! 단순 사후 측정 설계(One-shot case study design)는 사업 실시 후 단 한 번의 측정만을 실시하는 가장 취약한 설계예요. 사업 실시 '전'의 상태(기초선)에 대한 정보가 전혀 없기 때문에, 관찰된 결과가 사업으로 인한 변화인지, 아니면 원래 그런 상태였는지를 전혀 알 수 없어 비교 자체가 불가능합니다.
오답 분석 (Distractor Analysis): ① 사전-사후 설계는 기초선 정보를 제공하여 변화를 확인할 수 있지만, 외부 요인의 영향을 통제하지 못하는 한계가 있어요. ② 시계열 설계는 여러 시점의 측정을 통해 추세를 파악할 수 있고, ③, ④ 통제집단을 활용한 설계는 사업의 순수한 효과를 추정하는 데 더 강력한 근거를 제공합니다. 이들은 모두 사업 전후 또는 집단 간 비교가 가능한 설계들이에요.
한눈에 비교!: 실험 설계의 질은 비교(Comparison)와 통제(Control)의 정도에 따라 결정돼요. 단순 사후 측정 설계는 비교와 통제가 모두 결여된 가장 기초적인 탐색 수준의 설계입니다.
국시 빈출 포인트: 각 평가 설계의 도식화된 기호(X, O 등)를 이해하고, 어떤 위협 요인(성숙, 역사, 검사 효과 등)에 취약한지 연결 짓는 문제가 출제됩니다.

핵심 해설 핵심 개념 분석 (Key Concept): 이 문제는 보건사업 평가에서 사용되는 다양한 연구 설계(Research Design) 유형과 각 설계가 가진 내적 타당도(Internal Validity)의 강점 및 제한점을 정확히 구분하는 능력을 평가해요. 특히, 사업의 효과를 평가할 때 '비교'와 '통제'가 얼마나 가능한지가 핵심 포인트입니다. 정답 근거 (Answer Rationale): 핵심! 단순 사후 측정 설계(One-shot case study design)는 '사업 실시 전'의 상태를 전혀 측정하지 않고, '사업 실시 후'에 단 한 번만 결과를 측정하는 가장 기본적이고 취약한 설계예요. 이 설계의 가장 큰 제한점은 사업 실시 전과 후의 상태를 비교할 수 있는 기초선(Baseline) 정보 자체가 존재하지 않는다는 점이에요. 따라서 관찰된 결과가 정말 사업 때문에 나타난 것인지, 아니면 사업 이전부터 원래 그런 상태였는지 알 수 없기 때문에 '비교'가 원천적으로 불가능해요. 오답 분석 (Distractor Analysis): ① 통제집단 사후 비교 설계: 사업을 받은 집단과 받지 않은 집단의 사후 결과를 비교할 수 있어요. 사전 측정은 없지만, 통제집단이 있으므로 집단 간 비교가 가능해 단순 사후 측정 설계보다는 타당도가 높아요. ② 시계열 설계: 사업 실시 전과 후에 걸쳐 여러 시점에서 반복 측정을 실시해요. 사업 전후의 추세 변화를 비교할 수 있어 강력한 설계이지만, 외부 사건(역사 요인)의 영향을 완전히 배제하긴 어려워요. ③ 사전-사후 비교 설계: 동일 집단에서 사업 전과 후를 측정하여 변화를 비교할 수 있어요. 하지만 외부 요인이나 대상자의 성숙 효과 등을 통제하지 못해 순수한 사업 효과라고 단정하기 어려운 한계가 있어요. ⑤ 통제집단 사전-사후 비교 설계: 실험군과 통제군 모두 사전-사후 측정을 하여 집단 간 변화의 차이를 비교해요. 사업 전후 비교와 집단 간 비교가 모두 가능하여 내적 타당도가 가장 높은 이상적인 설계에 가까워요. 연관 개념 정리 (Related Concepts): 연구 설계는 크게 실험설계, 준실험설계, 비실험설계로 나뉘며, 설계의 질은 무작위 배정, 비교집단 존재 여부, 사전 측정 여부에 따라 결정돼요. 내적 타당도를 위협하는 요인으로는 역사, 성숙, 검사, 도구, 통계적 회귀, 선택 편향 등이 있어요. 개념 정리

설계 유형	사전 측정	통제집단	비교 가능성
단순 사후 측정 설계	X	X	불가능 (매우 낮음)
사전-사후 비교 설계	O	X	사업 전후 비교 가능
통제집단 사후 비교 설계	X	O	집단 간 비교 가능
통제집단 사전-사후 비교 설계	O	O	사업 전후 및 집단 간 비교 가능

한눈에 비교! 혼동 주의! '사전-사후 비교 설계'는 전후 비교가 가능하지만, '단순 사후 측정 설계'는 사전 정보가 없어 비교가 원천적으로 불가능하다는 점에서 완전히 달라요. 문제에서 "가장 큰 제한점"을 묻는다면 비교 자체가 불가능한 단순 사후 측정 설계가 정답이에요. 실무 포인트 보건소에서 새로운 금연 프로그램을 기획할 때, 예산과 인력이 부족하다고 해서 프로그램 종료 후 참여자 만족도 조사만 실시한다면 이것이 바로 단순 사후 측정 설계예요. 이 경우, 참여자들의 높은 만족도가 정말 프로그램 때문인지, 아니면 원래 금연 의지가 높은 사람들이 참여했기 때문인지 증명할 방법이 없어 사업 성과 보고서의 근거로 매우 취약해져요. 최소한 프로그램 전에 설문을 한 번 더 실시하는 사전-사후 설계를 적용해야 해요. 암기 팁 "단순 사후는 원샷! 비교는 불가!"라고 외워보세요. 사업을 한 번(One-shot) 진행하고 딱 한 번만 측정하는 설계이기 때문에, 기준이 없어 비교가 불가능한 유일한 설계임을 기억하는 것이 핵심이에요. 국시 빈출 포인트 보건의료정보관리사 및 병원행정사 시험에서 각 설계 유형의 도식화된 기호(X: 사업, O: 측정)를 제시하고, 어떤 설계인지 묻거나 특정 내적 타당도 위협 요인(성숙, 역사, 검사 효과 등)에 가장 취약한 설계를 고르는 문제로 자주 출제돼요. 기출 변형 주의! "외부 사건의 개입, 즉 역사(History) 요인의 영향을 가장 통제하기 어려운 설계는?"이라는 질문으로 변형될 수 있어요. 이 경우 통제집단이 없는 단일집단 설계(사전-사후, 시계열, 단순 사후 측정 모두)가 취약하지만, 문제의 핵심 키워드가 '통제 부재'인지 '비교 불가'인지 정확히 파악해야 해요.

보건행정 실무 가이드 실무 시나리오 (Clinical Scenario): 보건소 행정팀에서 근무하는 당신은 상사로부터 "작년에 우리가 실시한 비만 예방 캠페인의 효과를 분석해 주세요. 캠페인 참여자들의 현재 체중 데이터는 여기 있어요."라는 지시와 함께 데이터를 받았어요. 하지만 캠페인 실시 '전'의 참여자 체중 데이터는 어디에도 없었어요. 이 상황이 바로 단순 사후 측정 설계의 한계를 그대로 보여주는 사례예요. 당신은 상사에게 현재 데이터만으로는 "캠페인 덕분에 체중이 줄었다"거나 "캠페인이 효과가 있었다"라는 결론을 절대 내릴 수 없음을 설명해야 해요. 행정 중재 전략 (Admin Intervention): 핵심! 상황 파악 단계에서 수집된 데이터가 사후 측정치만 있는 단순 사후 측정 설계임을 인지해요. 법적/규정 검토 단계에서 평가 결과는 향후 예산 배정 및 사업 지속 여부 결정에 사용될 중요한 근거이므로, 잘못된 해석은 예산 낭비로 이어질 수 있다는 점을 인식해요. 대응 및 처리 단계에서 상사에게 "현재 데이터만으로는 캠페인 전과 비교할 수 없어 인과관계를 입증할 수 없습니다. 대신 참여자들의 만족도, 주관적 인식 변화 같은 2차 지표를 분석해 보고하거나, 다음 사업부터는 사전 조사를 필수로 포함하도록 기획에 반영하겠습니다"라고 구체적인 대안과 함께 보고하는 것이 바람직해요. 사후 기록/보고 단계에서는 분석 보고서에 연구 설계의 제한점(Limitation)을 명확히 기재하여 데이터 해석의 범위를 제한해야 해요. 법적 안전 및 주의사항 (Precautions): 객관적 근거 없이 사업 효과를 과장하여 보고할 경우, 이는 행정 신뢰도를 떨어뜨리고 향후 감사에서 지적받을 수 있어요. 항상 데이터가 말해주는 범위 내에서만 결론을 내리는 것이 행정 전문가의 윤리예요. 업무 프로토콜 1단계: 사업 기획 시 평가 설계를 반드시 포함 (KPI 설정 및 측정 시점 명시) 2단계: 예산 편성 시 사전-사후 측정을 위한 인쇄비, 조사 인력 비용 확보 3단계: 데이터 수집 시 사전 측정(Pretest)과 사후 측정(Posttest)을 동일한 도구로 실시 4단계: 분석 시 사전 점수를 공변량으로 통제하는 통계적 방법(공분산분석, ANCOVA) 적용 가능 여부 검토 선배의 한마디 "행정 현장에서 '단순 사후 측정'은 흔하게 발생하는 실수예요. 바쁘다는 이유로, 혹은 번거롭다는 이유로 사전 조사를 생략하면 결국 모든 노력이 물거품이 될 수 있어요. 사업의 성과를 제대로 증명하지 못하면 내년 예산을 확보할 수 없고, 결국 그 사업은 사라지게 돼요. 평가 설계는 사업의 생명줄이라는 마음가짐으로 처음부터 꼼꼼하게 설계하는 습관을 들이세요!"