— 자주 하는 오해와 실제 해석 방법 설문 데이터를 분석할 때가장 먼저 확인하는 지표 중 하나가 신뢰도(Cronbach’s α)입니다. 그리고 많은 경우 이렇게 판단합니다. “0.7 넘었으니까 문제 없다.”“0.9니까 아주 좋은 설문이다.” 하지만 신뢰도 값 하나만으로설문의 품질을 판단하는 것은 충분하지 않습니다. 1️⃣ 신뢰도는 ‘일관성’을 보는 지표입니다 Cronbach’s α는문항들이 얼마나 비슷한 방향으로 응답되는지를 보여줍니다. 즉, 여기서...

— 결과 해석 전에 반드시 점검해야 할 부분 설문조사를 진행하고 나면표본 수와 분석 결과에 집중하게 됩니다. 하지만 그보다 먼저 확인해야 할 것이 있습니다. 바로 표본 편향(sample bias)입니다. 표본 편향은데이터가 특정 집단에 치우쳐 수집되는 현상을 의미하며,연구 결과의 신뢰도에 직접적인 영향을 줍니다. 1️⃣ 표본이 특정 집단에 몰리는 경우 가장 흔한 표본 편향은응답자가 특정 특성에 집중되는...

— 분석 전에 반드시 확인해야 하는 단계 설문 데이터를 정리하다 보면빠지지 않고 등장하는 문제가 있습니다. 바로 결측값(missing data)입니다. 이러한 결측값은분석 결과에 영향을 줄 수 있기 때문에적절한 처리 과정이 필요합니다. 1️⃣ 결측값이 생기는 이유부터 확인해야 합니다 결측값은 단순한 오류가 아니라응답 과정에서 발생한 결과입니다. 대표적인 원인은 다음과 같습니다. 결측값을 처리하기 전에왜 발생했는지 파악하는 것이 중요합니다....

— 분석 전에 반드시 고민해야 하는 문제 설문 데이터를 정리하다 보면평균과 크게 다른 값들이 눈에 띄는 경우가 있습니다. 예를 들어 이러한 데이터를 이상치(outlier)라고 합니다. 이때 많은 연구자들이 고민합니다. “이 값은 제거해야 할까?” 1️⃣ 이상치는 무조건 제거 대상이 아닙니다 이상치는 단순한 오류가 아니라실제 응답일 가능성도 있습니다. 예를 들어 이러한 응답은 평균과 다르게 나타날 수...

— 데이터 해석 전에 꼭 생각해볼 것 설문 데이터를 정리하다 보면다음과 같은 현상을 자주 발견하게 됩니다. 많은 응답자가 ‘보통이다’, ‘중간이다’ 같은중앙값에 응답하는 경우입니다. 특히 5점 척도 설문에서는3번 응답이 유난히 많이 나타나는 경우가 흔합니다. 이때 연구자들은 종종 이렇게 생각합니다. “응답자들이 대충 응답한 것 아닐까?” 하지만 실제로는 여러 이유로 중간값 응답이 발생할 수 있습니다. 1️⃣...

— 많이 쓰이지만 자주 오해되는 설계 방법 설문지를 만들다 보면다음과 같은 조언을 한 번쯤 듣게 됩니다. “역문항을 꼭 넣어야 한다.” 그래서 실제 설문에서는 다음과 같은 방식이 자주 사용됩니다. 예를 들어 처럼 같은 개념을 반대 방향으로 묻는 문항을 넣는 것입니다. 이러한 문항을 역문항(reverse item)이라고 합니다. 하지만 역문항은 무조건 많이 넣는다고 좋은 것은 아닙니다. 1️⃣...

— 설문 설계에서 자주 발생하는 실수 설문지를 만들다 보면의도하지 않게 다음과 같은 문항이 만들어지기도 합니다. 예를 들어 “우리 조직은 의사소통이 원활하고 협력이 잘 이루어진다.” 이 문장은 자연스럽게 보이지만사실 두 가지 질문이 동시에 포함된 문항입니다. 이처럼 하나의 문항 안에두 개 이상의 내용을 포함한 질문을 통계에서는 이중 질문(double-barreled question)이라고 합니다. 1️⃣ 응답자가 무엇에 답해야 하는지...

— 설문 설계에서 자주 고민되는 부분 설문지를 만들다 보면 다음과 같은 고민을 하게 됩니다. “모른다”, “잘 모르겠다” 같은 선택지를 넣어야 할까? 어떤 설문에서는 이 선택지를 포함하고,어떤 설문에서는 아예 제외하기도 합니다. 사실 이 선택지는 연구 목적에 따라 다르게 판단해야 하는 요소입니다. 1️⃣ 응답자가 실제로 판단하기 어려운 질문일 수 있습니다 모든 설문 질문이응답자가 명확하게 판단할...

— 설문 설계에서 자주 나오는 질문 설문지를 만들다 보면 한 번쯤 고민하게 되는 부분이 있습니다. “리커트 척도는 5점이 좋을까, 7점이 좋을까?” 실제로 많은 논문에서5점 척도와 7점 척도가 모두 사용되고 있습니다.하지만 두 척도는 각각 장단점이 있으며, 연구 목적에 따라 선택이 달라질 수 있습니다. 5점 척도는 응답이 더 쉽습니다 5점 척도는 다음과 같은 형태입니다. 이...

— 많은 연구자들이 빠지는 함정 설문조사를 처음 설계할 때 흔히 이런 생각을 하게 됩니다. “문항이 많을수록 더 정확하게 측정할 수 있지 않을까?”“혹시 빠뜨린 내용이 있으면 어떡하지?” 그래서 설문 문항을 계속 추가하다 보면어느 순간 설문지가 50문항, 70문항이 되어 있기도 합니다. 하지만 설문 문항은많을수록 좋은 것이 아닙니다. 1️⃣ 문항이 많아질수록 응답 피로가 커집니다 응답자가 설문을...