— 설문 설계에서 자주 발생하는 실수
설문지를 만들다 보면
의도하지 않게 다음과 같은 문항이 만들어지기도 합니다.
예를 들어
“우리 조직은 의사소통이 원활하고 협력이 잘 이루어진다.”
이 문장은 자연스럽게 보이지만
사실 두 가지 질문이 동시에 포함된 문항입니다.
- 의사소통이 원활한가
- 협력이 잘 이루어지는가
이처럼 하나의 문항 안에
두 개 이상의 내용을 포함한 질문을 통계에서는 이중 질문(double-barreled question)이라고 합니다.
1️⃣ 응답자가 무엇에 답해야 하는지 애매해집니다
위 문항을 다시 생각해보겠습니다.
어떤 응답자는 이렇게 느낄 수 있습니다.
- 의사소통은 잘 되지만 협력은 잘 안 된다
- 협력은 잘 되지만 의사소통은 부족하다
이 경우 응답자는 어떤 기준으로 답해야 할지 혼란스러워집니다.
결국 응답은 연구자가 의도한 의미와 다른 방식으로 기록될 수 있습니다.
2️⃣ 데이터 해석이 어려워집니다
이중 질문이 포함된 문항은
분석 단계에서도 문제가 됩니다.
예를 들어
“우리 조직은 의사소통이 원활하고 협력이 잘 이루어진다”
라는 문항의 평균값이 높게 나타났다고 해도 다음 중 무엇 때문인지 알 수 없습니다.
- 의사소통이 좋은 것인지
- 협력이 좋은 것인지
- 둘 다 좋은 것인지
즉, 데이터 해석이 모호해집니다.
3️⃣ 해결 방법은 생각보다 간단합니다
이 문제를 해결하는 가장 좋은 방법은 문항을 나누는 것입니다.
예를 들어 다음과 같이 작성할 수 있습니다.
- 우리 조직에서는 의사소통이 원활하게 이루어진다.
- 우리 조직에서는 구성원 간 협력이 잘 이루어진다.
이렇게 하면 각 문항이 하나의 개념만 측정하게 됩니다.
4️⃣ 설문 설계에서 가장 중요한 원칙
좋은 설문 문항의 기본 원칙은 매우 단순합니다.
“한 문항에는 하나의 의미만 담는다.”
문항이 길어지거나
여러 내용을 포함하게 되면
응답자의 해석이 달라질 가능성이 높아집니다.
설문 설계에서는 문항을 많이 만드는 것보다
명확한 문항을 만드는 것이 훨씬 중요합니다.
정리
설문조사에서 이중 질문은
생각보다 자주 발생하는 실수입니다.
하지만 이 작은 실수가
데이터 해석 전체에 영향을 줄 수도 있습니다.
설문 문항을 만들 때는 항상
다음 질문을 스스로에게 던져보는 것이 좋습니다.
“이 문항은 하나의 개념만 묻고 있는가?”
이 기준만 지켜도
설문 데이터의 품질은 훨씬 안정적으로 유지될 수 있습니다.
