설문조사가 끝나면 많은 대학원생들이 가장 먼저 하는 일이 있습니다.
바로 SPSS를 켜는 것입니다.
“이제 분석만 하면 되겠지.”
“드디어 끝이 보인다.”
라고 생각합니다.
그런데 교수님은 종종 이런 질문을 하십니다.
“데이터 정리는 했나요?”
“불성실 응답은 제외했나요?”
“이상치는 확인해봤나요?”
처음에는 의아합니다.
설문은 다 끝났는데,
왜 또 확인해야 하는 걸까요?
설문이 끝났다고 데이터가 완성된 것은 아니다
생각보다 많은 대학원생들이 놓치는 부분입니다.
설문조사가 끝났다는 것은
데이터가 모였다는 의미이지,
바로 분석이 가능한 상태라는 의미는 아닙니다.
실제로 데이터를 열어보면
- 응답이 중간에 끊긴 경우
- 동일 번호만 반복한 경우
- 지나치게 빠른 응답
- 논리적으로 맞지 않는 응답
이 섞여 있는 경우가 생각보다 많습니다.
데이터 정리는 생각보다 중요하다
예를 들어,
150명을 목표로 조사했다고 가정해봅시다.
그런데 데이터를 확인해보니
20명이 불성실 응답이었다면?
실제로 분석 가능한 데이터는
130명일 수 있습니다.
즉,
좋은 통계분석은
좋은 데이터에서 시작됩니다.
이상치는 꼭 확인해야 한다
통계분석을 하다 보면
유독 다른 응답이 발견되기도 합니다.
대부분의 응답이 20~30점인데,
혼자 100점에 가까운 응답이 있다면
한 번쯤 확인해볼 필요가 있습니다.
이런 이상치(Outlier)는
분석 결과에 생각보다 큰 영향을 줄 수 있습니다.
역문항은 처리했나요?
대학원생들이 정말 많이 놓치는 부분입니다.
예를 들어,
- 나는 내 삶에 만족한다.
- 나는 내 삶이 불행하다고 느낀다.
이 두 문항은 방향이 다릅니다.
역문항 처리가 되지 않으면
신뢰도가 낮게 나오거나,
예상과 전혀 다른 결과가 나타날 수 있습니다.
경험이 많은 연구자일수록 먼저 보는 것
의외로 경험이 많은 연구자들은
통계분석보다 데이터를 먼저 봅니다.
왜냐하면
분석은 몇 분이면 끝날 수 있지만,
잘못된 데이터로 분석한 결과는
논문 전체를 흔들 수 있기 때문입니다.
데이터 정리 체크리스트
분석 전에 한 번 확인해보세요.
- 불성실 응답은 없는가?
- 결측치는 없는가?
- 이상치는 확인했는가?
- 역문항 처리는 완료했는가?
- 응답 시간이 지나치게 짧지는 않은가?
- 분석 가능한 최종 표본 수는 몇 명인가?
이 과정만 거쳐도
분석 결과의 신뢰도는 크게 달라질 수 있습니다.
마무리
많은 대학원생들이
설문조사가 끝나면 연구도 거의 끝났다고 생각합니다.
하지만 실제로는
데이터를 정리하는 과정이 남아 있습니다.
그리고 이 과정은
논문의 결과를 바꿀 만큼 중요할 수도 있습니다.
그래서 교수님들이
“데이터 정리는 했나요?”
라고 먼저 물어보시는 것입니다.
좋은 통계분석은 복잡한 기법에서 시작되는 것이 아니라
신뢰할 수 있는 데이터를 만드는 것에서 시작됩니다.
