다음 중 설문지의 신뢰도(Reliability)를 저해하는 대표적인 질문 작성 오류에 해당하는 것은?
1한 번에 하나의 개념만을 측정하는 단일 차원 질문
2하나의 질문에 두 가지 이상의 내용을 동시에 묻는 이중 질문✓ 정답
3리커트 척도를 사용하여 응답의 강도를 측정하는 질문
4응답 범주가 상호배타적이고 포괄적으로 구성된 질문
5응답자의 수준에 맞춰 쉬운 용어로 작성된 질문
해설
이중 질문(Double-barreled Question)은 하나의 문항에 두 개 이상의 개념을 동시에 질문하여 응답자가 어느 부분에 응답해야 할지 혼란을 주므로 신뢰도와 타당도를 크게 저해한다. 예를 들어 "이 병원의 서비스는 친절하고 신속했습니까?"와 같은 질문은 친절도와 신속도를 분리하여 질문해야 한다.
핵심 해설
이 문제는 설문지 개발 과정에서 측정 도구의 신뢰도(Reliability)를 저해하는 질문 작성의 오류 유형을 묻고 있어요. 신뢰도는 측정 도구가 측정하고자 하는 속성을 일관성 있고 안정적으로 측정하는 정도를 의미해요. 핵심! 신뢰도를 저해하는 대표적인 오류 중 하나가 바로 이중 질문(Double-barreled Question)입니다.
핵심 개념 분석 (Key Concept)
설문지 문항 설계 시, 신뢰도를 높이기 위해서는 한 문항에서 하나의 개념만을 명확히 측정해야 해요. 혼동 주의! 신뢰도는 측정 결과의 '일관성'에, 타당도는 측정하고자 하는 바를 '정확히' 측정했는지에 초점을 맞춘다는 차이가 있답니다.
정답 근거 (Answer Rationale)
②번 '하나의 질문에 두 가지 이상의 내용을 동시에 묻는 이중 질문'이 신뢰도를 저해하는 대표적인 오류예요.
이중 질문(Double-barreled Question)은 응답자에게 두 개의 질문을 동시에 던지기 때문에, 응답자가 어느 부분에 초점을 맞춰 답해야 할지 혼란을 줘요. 예를 들어 "이 병원의 직원들은 친절하고 신속하게 업무를 처리했나요?"라는 질문에 '친절함'은 긍정적이지만 '신속함'은 부정적이라고 느낀 응답자는 정확한 답변을 할 수 없게 되고, 이는 측정의 일관성을 크게 떨어뜨려 신뢰도를 저해해요.
오답 분석 (Distractor Analysis)
①번 '한 번에 하나의 개념만을 측정하는 단일 차원 질문'은 신뢰도를 저해하는 오류가 아니라, 오히려 신뢰도를 높이기 위한 올바른 질문 작성 원칙이에요.
③번 '리커트 척도를 사용하여 응답의 강도를 측정하는 질문' 역시 잘못된 것이 아니에요. 리커트 척도(Likert scale)는 태도나 만족도 조사에서 응답의 강도를 측정하는 대표적인 방법으로, 적절하게 사용되면 신뢰도와 타당도를 확보하는 데 유용한 도구입니다.
④번 '응답 범주가 상호배타적이고 포괄적으로 구성된 질문'은 선택지 구성의 기본 원칙을 설명한 것으로, 신뢰도를 저해하는 요인이 아니에요. 오히려 응답자가 어디에도 속하지 않거나 중복 선택하는 문제를 막아 데이터의 질을 높입니다.
⑤번 '응답자의 수준에 맞춰 쉬운 용어로 작성된 질문'은 응답자의 이해도를 높여 신뢰도를 향상시키는 바람직한 방법입니다. 어려운 용어나 전문적인 약어 사용은 측정 오차를 발생시켜 신뢰도를 떨어뜨려요.
연관 개념 정리 (Related Concepts)
설문지 작성 시 신뢰도를 저해하는 주요 오류는 다음과 같아요.
오류 유형
설명
예시
이중 질문
하나의 문항에 두 가지 이상의 내용을 동시에 질문
"이 병원의 진료는 신속하고 친절했나요?"
유도 질문
특정 응답을 유도하는 표현 사용
"대부분의 사람들은 이 서비스에 만족합니다. 당신도 그렇습니까?"
부정적 질문
이중 부정 등 해석이 복잡한 문장 구조
"흡연이 건강에 나쁘지 않다고 생각하지 않습니까?"
가정적 질문
응답자가 실제 경험하지 못한 상황 가정
"만약 당신이 병원장이라면 어떤 결정을 내리시겠습니까?"
개념 정리신뢰도(Reliability): 측정 도구가 측정하고자 하는 현상을 일관성 있게 측정하는 정도. 검사-재검사 신뢰도, 동형 검사 신뢰도, 내적 일관성 신뢰도(Cronbach's alpha) 등으로 평가.
타당도(Validity): 측정 도구가 측정하고자 하는 개념을 정확히 측정했는지의 정도. 내용 타당도, 기준 타당도, 구성 개념 타당도 등으로 평가.
암기 팁
"하나의 문항에는 하나의 개념만"을 측정해야 한다는 원칙을 기억하세요. 설문 문항에서 '~하고', '~하며' 같은 연결어미가 보이면 이중 질문일 가능성이 높아요!
국시 빈출 포인트
보건의료정보관리사 및 병원행정사 시험에서 설문지 작성법은 보건통계학 또는 연구방법론 파트에서 자주 출제돼요. 이중 질문과 유도 질문을 구별하는 문제, 신뢰도와 타당도의 개념 차이를 묻는 문제로 출제될 가능성이 높으니 개념을 명확히 해두세요.
보건행정 실무 가이드실무 시나리오
병원 기획실에서 근무하는 보건행정가로서 환자 만족도 조사 설문지를 검토하게 되었어요. 설문 초안에 "진료 접수 절차가 간편하고 안내 직원의 설명이 충분했습니까?"라는 문항이 포함되어 있습니다. 이 문항은 접수 절차의 간편성과 직원 설명의 충분성이라는 두 가지 개념을 동시에 묻고 있어요. 만약 접수 절차는 매우 편리했지만 직원 설명이 부족했다고 느낀 환자는 어떻게 답변해야 할지 몰라 응답을 포기하거나 부정확하게 표기할 수 있어요. 이렇게 수집된 데이터는 분석 결과를 왜곡하여 잘못된 개선 방향을 제시할 위험이 큽니다.행정 중재 전략 (Admin Intervention)핵심! 이중 질문을 발견하면 즉시 분리해야 해요. 위 문항은 "진료 접수 절차가 간편했습니까?"와 "안내 직원의 설명이 충분했습니까?"의 두 문항으로 나누어 각각 질문하는 것이 바람직해요. 이렇게 함으로써 각 서비스 요소에 대한 정확한 평가를 받을 수 있고, 부서별 책임 소재를 명확히 하여 구체적인 개선 계획을 수립할 수 있답니다.
업무 프로토콜
1단계: 설문 문항 초안 검토 시 모든 문항에서 '그리고/하며' 등 연결어 확인
2단계: 이중 질문 의심 시, 해당 질문이 측정하려는 개념을 하나로 분리 가능한지 검토
3단계: 분리된 문항이 연구 목적에 부합하는지 확인 후, 파일럿 테스트를 통해 응답자 혼란 여부 최종 점검
선배의 한마디
"환자 경험 평가는 병원의 질 향상 활동의 출발점이에요. 좋은 설문지는 정확한 데이터를, 정확한 데이터는 올바른 의사 결정을 만들어요. 설문 문항 하나를 분리하는 작은 노력이 병원 서비스를 크게 변화시킬 수 있다는 점, 잊지 마세요!"
신뢰도 — 측정 도구가 측정하고자 하는 현상을 일관성 있고 안정적으로 측정하는 정도. 검사-재검사법, 반분법, 내적 일관성 계수(Cronbach's alpha) 등으로 평가함.
타당도 — 측정 도구가 측정하고자 하는 개념이나 속성을 정확히 측정했는지를 나타내는 정도. 내용 타당도, 기준 관련 타당도, 구성 개념 타당도 등으로 평가함.
이중 질문 — 하나의 설문 문항에 두 가지 이상의 서로 다른 내용을 동시에 질문하는 오류 형태. 응답자의 혼란을 야기하여 신뢰도와 타당도를 크게 저해함.
리커트 척도 — 응답자가 주어진 진술에 대해 동의하거나 동의하지 않는 정도를 여러 등급으로 평정하는 척도. 주로 5점 또는 7점 척도로 구성되며 태도 및 만족도 측정에 광범위하게 사용됨.
측정 오차 — 측정 과정에서 발생하는 실제 값과 측정값 간의 차이. 무작위적 오차(random error)는 신뢰도를, 체계적 오차(systematic error)는 타당도를 저해하는 주요 원인임.