설문 데이터를 보다 보면
유독 눈에 띄는 응답들이 있습니다.
처음부터 끝까지,
거의 모든 문항에서 같은 번호만 선택한 응답.
이걸 발견하는 순간
많은 분들이 바로 이렇게 생각합니다.
“이건 불성실 응답 아닌가요?”
“다 지워야 하는 거죠?”
같은 번호 반복 응답을 보면 왜 불안해질까요?
같은 번호만 반복해서 고른 응답은
겉으로 보기엔 굉장히 ‘성의 없어’ 보입니다.
- 설문을 대충 넘긴 것 같고
- 결과를 왜곡할 것 같고
- 남겨두면 연구가 망가질 것 같은 느낌
그래서 가장 먼저 떠오르는 선택지는 보통 하나입니다.
“삭제하자.”
하지만 이 역시,
바로 결론을 내리기 전에 한 번 더 확인할 필요가 있습니다.
1️⃣ 같은 번호 반복 응답은 왜 생길까요?
이런 응답에는 여러 가능성이 있습니다.
- 실제로 해당 태도에 매우 일관된 응답자
- 문항 내용이 전반적으로 비슷하게 느껴졌던 경우
- 설문 길이가 길어 피로도가 누적된 경우
- 설문에 큰 관심 없이 빠르게 끝낸 경우
즉, 같은 번호 반복 응답이 모두 불성실 응답이라고 단정할 수는 없습니다.
중요한 것은
‘반복했다’는 사실보다
그 반복이 어떤 패턴으로 나타나는지입니다.
2️⃣ 정말 문제가 되는 반복 응답의 특징
다음과 같은 경우라면
불성실 응답 가능성을 더 강하게 의심해볼 수 있습니다.
- 역문항이 있음에도 동일한 번호를 선택한 경우
- 문항 의미와 전혀 맞지 않는 응답 패턴
- 응답 시간이 비정상적으로 짧은 경우
- 다른 불성실 지표와 함께 나타나는 경우
이 경우에는
단순히 ‘느낌상 이상하다’가 아니라,
객관적인 근거를 가지고 판단할 수 있습니다.
3️⃣ 그럼 언제 삭제하지 않아도 될까요?
반대로, 이런 경우라면
무조건 삭제할 필요는 없습니다.
- 역문항에서도 논리적으로 일관된 응답
- 특정 개념에 대해 매우 명확한 태도를 보이는 경우
- 응답 시간이 정상 범위에 있는 경우
이런 응답은
비록 단조로워 보이더라도
응답자의 실제 태도를 반영한 결과일 수 있습니다.
4️⃣ 삭제 여부보다 더 중요한 질문
여기서 중요한 질문은 이것입니다.
“이 응답이 분석 결과를 왜곡하고 있는가?”
- 특정 집단에만 반복 응답이 몰려 있는지
- 이 응답들을 포함했을 때와 제외했을 때
결과 해석이 크게 달라지는지
이 기준을 통해 판단하는 것이
훨씬 연구자다운 접근입니다.
5️⃣ 지도교수님이나 심사에서 실제로 보는 포인트
같은 번호 반복 응답 때문에 지적을 받는 경우는
대부분 이런 상황입니다.
- 반복 응답을 어떻게 처리했는지 언급이 없는 경우
- 삭제 기준이 전혀 설명되지 않은 경우
- 불성실 응답 정의가 모호한 경우
반대로,
- 어떤 기준으로 문제 응답을 판단했고
- 왜 제외하거나 포함했는지 설명할 수 있다면
반복 응답 자체가
큰 문제로 이어지는 경우는 많지 않습니다.
🔥 정리
- 같은 번호 반복 응답이 있다고 해서 무조건 삭제할 필요는 없습니다.
- 반복의 ‘존재’보다 ‘패턴’이 중요합니다.
- 역문항, 응답 시간, 다른 지표와 함께 판단해야 합니다.
- 중요한 것은 일관된 기준과 설명 가능성입니다.
설문 데이터에서 막히는 순간들은
대부분 기술적인 문제라기보다는
이걸 어떻게 판단해야 하는지 기준이 없을 때 찾아옵니다.
이 구간에서 많은 대학원생들이 비슷한 고민을 합니다.
- 지우자니 과한 것 같고
- 남기자니 찜찜한 상태
- 어떤 선택이 맞는지 확신이 서지 않는 느낌
그래서 이런 말이 자주 나옵니다.
“이건 그냥 제 느낌으로 판단해도 되는 건가요?”
혹시 지금 이 단계에 계신가요?
그렇다면,
설문을 잘못해서 생긴 문제가 아니라
판단 기준을 정리하는 과정에 들어선 것일지도 모릅니다.
같은 번호 반복 응답은
설문 데이터에서 아주 흔하게 등장합니다.
중요한 것은 없애는 것이 아니라,
어떻게 해석하고 설명하느냐입니다.
