설문지를 만들다 보면
한 번쯤 이런 고민을 하게 됩니다.
“질문이 너무 짧은 것 같은데…”
“조금 더 자세히 설명해야 하나?”
“응답자가 오해하면 어떡하지?”
그래서 처음에는 간단했던 문항이
점점 길어지기 시작합니다.
설명 한 줄 추가하고,
예시 넣고,
조건 넣고,
예외사항 넣고,
결국 한 문항이 몇 줄씩 되는 경우도 있습니다.
그런데 정말
문항이 길어질수록
더 정확한 데이터를 얻을 수 있을까요?
1️⃣ 길다고 무조건 정확한 것은 아닙니다
많은 연구자들이
문항을 길게 만들면
응답자가 질문을 더 정확하게 이해할 것이라고 생각합니다.
물론 어느 정도는 맞습니다.
너무 짧은 문항은
해석이 다양하게 될 수 있기 때문입니다.
하지만 설명이 많아진다고 해서
반드시 이해도가 높아지는 것은 아닙니다.
오히려
응답자가 질문을 끝까지 읽지 않는 경우도 발생합니다.
2️⃣ 응답자는 생각보다 문항을 빨리 읽습니다
연구자는 문항 하나를 만들기 위해
몇 시간씩 고민합니다.
하지만 응답자는
몇 초 안에 읽고 답하는 경우가 많습니다.
특히 모바일 설문에서는
긴 문항일수록
대충 읽고 넘어갈 가능성이 높아집니다.
즉,
연구자가 추가한 설명이
실제로는 제대로 읽히지 않을 수도 있습니다.
3️⃣ 문항이 길어질수록 핵심이 흐려질 수 있습니다
예를 들어
측정하려는 개념은 하나인데
설명이 계속 추가되면
응답자는 무엇에 답해야 하는지 헷갈릴 수 있습니다.
처음에는 직무만족을 묻고 있었는데
읽다 보면
조직문화인지,
상사 만족인지,
급여 만족인지
애매해지는 경우가 있습니다.
이렇게 되면
질문은 길어졌지만
오히려 측정 정확도는 떨어질 수 있습니다.
4️⃣ 특히 두 가지 이상을 한 번에 묻는 문항은 위험합니다
실제로 설문에서 자주 발견되는 문제입니다.
예를 들어
“귀하는 현재 근무 환경과 복지제도에 만족하십니까?”
라는 문항이 있다고 가정해보겠습니다.
근무 환경은 만족하지만
복지는 불만족인 사람은
어떻게 응답해야 할까요?
이처럼
문항이 길어질수록
여러 개념이 섞일 가능성도 커집니다.
5️⃣ 좋은 문항은 ‘짧은 문항’이 아니라 ‘명확한 문항’입니다
많은 사람들이
짧은 문항과 좋은 문항을 동일하게 생각합니다.
하지만 핵심은 길이가 아닙니다.
응답자가
질문의 의미를 한 번에 이해할 수 있는가
가 중요합니다.
짧아도 애매하면 안 되고,
길어도 명확하면 괜찮습니다.
결국 중요한 것은
가독성과 명확성입니다.
6️⃣ 실제로 응답 품질에도 영향을 줍니다
문항이 길어지면
응답 피로도가 증가합니다.
특히 문항 수가 많은 설문에서는
뒤로 갈수록 집중력이 떨어질 수 있습니다.
그 결과
👉 중간값 반복 선택
👉 동일 번호 반복 선택
👉 질문 오해
같은 문제가 발생하기도 합니다.
그래서 설문 설계에서는
문항 하나의 길이도 중요하게 고려합니다.
7️⃣ 연구자는 ‘설명’보다 ‘전달’을 고민해야 합니다
설문 문항의 목적은
연구자가 많이 설명하는 것이 아닙니다.
응답자가 같은 의미로 이해하는 것입니다.
아무리 좋은 개념이라도
응답자가 이해하지 못하면
좋은 데이터는 얻을 수 없습니다.
그래서 좋은 문항은
복잡한 문항이 아니라
누가 읽어도 비슷하게 이해되는 문항입니다.
🔥 핵심 정리
문항이 길다고 해서
더 정확한 설문이 되는 것은 아닙니다.
중요한 것은
👉 얼마나 많이 설명했는가가 아니라
👉 얼마나 명확하게 전달했는가입니다.
👀 많이 틀리는 포인트
설명 계속 추가하기 ❌
여러 개념 한 문항에 넣기 ❌
응답자 입장에서 안 읽어보기 ❌
길수록 전문적이라고 생각하기 ❌
질문보다 설명이 길어지기 ❌
👉 좋은 설문 문항은
“길게 만든 문항”이 아니라
“응답자가 같은 의미로 이해하는 문항”입니다.
