설문지 어떻게 만드시나요?
논문이나 연구 자료를 보다 보면
설문지 만드는 건 다른 부분보다 상대적으로 쉬워 보이기도 합니다.
레퍼런스 논문에서 문항 몇 개 가져오고,
내 연구 맥락에 맞게 표현 조금 고치고,
빠진 것 같아서 질문 몇 개 더 추가하고,
응답자가 헷갈릴까 봐 선택지는 줄이고…
그렇게 설문지를 완성합니다.
그런데 막상 분석을 하려고 보면,
👉 분석이 안 됩니다. 😭😭😭
👉 신뢰도가 안 나오고
👉 요인은 안 묶이고
👉 교수님은 측정이 불안정하다는 말만 하시죠.
이유는 아주 단순합니다.
설문지를 ‘질문지’로 만들었지,
‘측정도구’로 만들지 않았기 때문이에요.
1️⃣ 설문지는 ‘질문지’가 아니라 ‘측정도구’다
설문지는 단순히 의견을 묻는 도구가 아닙니다.
이론적 개념(construct)을 숫자로 변환하는 장치예요.
그리고 중요한 사실 하나.
👉 한 문항 = 한 개념 ❌
👉 대부분의 개념은 다문항 척도로 측정합니다.
| 개념 | ❌ 잘못된 접근 | ✔️ 올바른 접근 |
|---|---|---|
| 신뢰 | “이 브랜드 얼마나 신뢰하세요?” | 신뢰를 구성하는 하위차원 문항 |
| 만족 | “만족하십니까?” | 기대–성과–전반만족 문항 |
| 태도 | 자유 질문 | 리커트 척도 다문항 |
📌 설문지는 “뭘 묻고 싶으냐”가 아니라
“통계적으로 측정 가능한가”가 기준입니다.
2️⃣ 레퍼런스 문항, 내 마음대로 바꾸면 안 돼요
논문에서 검증된 설문 문항은 이미
- 개념 타당도
- 요인구조
- 신뢰도를 모두 검증받은 상태입니다.
그래서 그대로 사용해도 되는 거예요.
그런데 설문지를 만들다 보면, 이런 수정이 들어갑니다.
❌ 긍정문 → 부정문으로 변경
❌ 문항 일부 삭제
❌ 응답 척도 변경 (5점 → 4점)
❌ 두 개념을 한 문항에 섞음 (이중질문)
이 순간,
👉 요인분석 ❌
👉 신뢰도 ❌
👉 가설검증 ❌이 됩니다.
📌 문항을 조금이라도 수정했다면 사전조사(pretest) 필수
📌 가능하면 기존 검증 척도 그대로 사용하는 게 가장 안전
3️⃣ 좋은 설문지를 만드는 핵심 원칙
✅ 한 문항에는 하나의 의미만
❌ 이 제품은 편리하고 가격도 합리적이다
✔️ 이 제품은 사용하기 편리하다
✔️ 이 제품의 가격은 합리적이다
✅ 애매한 표현 피하기
❌ 자주 / 적당히 / 꽤 / 어느 정도
✔️ 지난 1개월 기준 / 5점 척도
✅ 응답자 언어로 쓰기
❌ 본 서비스는 이용자의 지각된 유용성이 높다
✔️ 이 서비스는 나에게 도움이 된다고 느낀다
✅ 모든 응답자가 답할 수 있는가?
서비스 이용 경험이 없는 사람에게
만족도를 묻는 건 불가능합니다.
👉 필터 문항 먼저 배치하세요.
✅ 척도는 일관되게
❌ 5점 척도 ↔ 7점 척도 혼용
❌ 긍정 ↔ 부정 방향 뒤섞기
👉 척도의 점수 수와 방향을 통일
✅ 분석 방법을 먼저 정하기
설문을 만들기 전에
이미 분석은 시작되어 있어야 합니다.
- 요인분석 → 다문항 필수
- 회귀분석 → 척도 수준 고려
- 집단비교 → 집단 변수 명확화
📌 “설문부터 만들고 분석은 나중에” → 실패 확률 ↑
4️⃣ 설문지 구성의 정석 순서
설문지는 심리적 부담을 최소화하는 흐름이 중요합니다.
1️⃣ 도입부
- 연구 목적
- 소요 시간
- 익명성
- 참여 동의
2️⃣ 워밍업 문항
- 쉽고 가벼운 질문
- 연구 주제와 간접 연결
3️⃣ 핵심 변수 문항
- 독립변수
- 매개·조절변수
- 종속변수
👉 가장 집중도가 높은 중반부
4️⃣ 민감한 문항은 뒤로
- 태도
- 가치
- 평가 문항
5️⃣ 인구통계학적 문항은 맨 뒤
- 직업
- 학력
- 소득
📌 단, 성별·연령·지역처럼
응답자 선별이 필요한 변수는 앞에 둘 수 있습니다.
5️⃣ 완성 직전, 반드시 체크할 질문 3가지
설문지를 완성했다면 꼭 확인하세요.
- 이 문항은 분석에 실제로 쓰이나?
- 이 문항이 없으면 가설검증이 불가능한가?
- 이 문항을 삭제해도 논문에 영향이 없는가?
👉 영향이 없다면 과감히 삭제하세요.
설문지는 많을수록 좋은 게 아닙니다.
✨ 핵심 정리
- 설문지는 질문지가 아니라 측정도구
- 한 문항 = 한 개념 ❌, 다문항이 기본
- 검증된 척도는 함부로 수정하지 말 것
- 설문 설계 단계에서 이미 분석은 시작됨
- 잘 만든 설문지는 분석을 쉽게 만들고, 논문을 탄탄하게 만듦
설문지는 많이 묻는 도구가 아니라, 정확하게 재는 도구입니다.
설문지를 만드는 순간부터
이미 논문 결과의 절반은 결정돼요.
👉 설문지 = 분석의 시작
이걸 기억하면 설문은 만들었는데 분석이 안 되는 상황에서 훨씬 자유로워집니다 😊
