— 많이 쓰이지만 자주 오해되는 설계 방법
설문지를 만들다 보면
다음과 같은 조언을 한 번쯤 듣게 됩니다.
“역문항을 꼭 넣어야 한다.”
그래서 실제 설문에서는 다음과 같은 방식이 자주 사용됩니다.
예를 들어
- “나는 현재 연구 생활에 만족한다.”
- “나는 연구 생활에 만족하지 않는다.”
처럼 같은 개념을 반대 방향으로 묻는 문항을 넣는 것입니다.
이러한 문항을 역문항(reverse item)이라고 합니다.
하지만 역문항은 무조건 많이 넣는다고 좋은 것은 아닙니다.
1️⃣ 역문항의 목적은 응답 편향을 줄이기 위함입니다
설문에서는 종종 다음과 같은 현상이 나타납니다.
- 모든 문항에 비슷한 번호를 선택하는 경우
- 질문을 충분히 읽지 않고 응답하는 경우
이러한 현상을 응답 편향(response bias)이라고 합니다.
역문항을 포함하면
응답자가 문항을 조금 더 주의 깊게 읽도록 만들 수 있습니다.
그래서 일부 연구에서는
응답 품질을 높이기 위해 역문항을 활용합니다.
2️⃣ 하지만 역문항은 응답 혼란을 만들 수도 있습니다
문제는 역문항이 응답자에게 혼란을 줄 수 있다는 점입니다.
예를 들어
“나는 업무 스트레스를 자주 느낀다.”
“나는 업무 스트레스를 거의 느끼지 않는다.”
이 두 문항이 섞여 있으면
응답자가 문항 방향을 헷갈릴 수 있습니다.
특히 설문이 길거나
문장이 복잡한 경우에는
응답 오류가 더 많이 발생할 수 있습니다.
3️⃣ 역문항이 많으면 요인분석에서 문제가 생기기도 합니다
실제 연구에서는
역문항 때문에 다음과 같은 문제가 나타나기도 합니다.
- 역문항들끼리만 하나의 요인으로 묶이는 현상
- 신뢰도가 낮게 나타나는 현상
이 경우 연구자가 측정하려는 개념이 아니라
문항 방향 자체가 요인을 형성하는 상황이 발생할 수 있습니다.
그래서 최근 연구에서는
역문항을 과도하게 사용하는 것을 권장하지 않는 경우도 많습니다.
4️⃣ 중요한 것은 문항의 명확성입니다
설문 설계에서 가장 중요한 것은
응답자가 문항을 쉽고 정확하게 이해할 수 있는가입니다.
응답 품질을 높이기 위해서는
- 문장을 간결하게 작성하고
- 하나의 문항에 하나의 의미만 포함하며
- 부정 표현을 최소화하는 것이 좋습니다.
이러한 설계가 이루어지면
굳이 많은 역문항을 사용하지 않아도
안정적인 데이터를 얻을 수 있습니다.
정리
역문항은 설문 설계에서
유용하게 사용할 수 있는 도구입니다.
하지만 중요한 것은
얼마나 많이 넣었느냐가 아니라 어떻게 사용했느냐입니다.
설문에서 가장 중요한 기준은 항상 하나입니다.
응답자가 문항을 명확하게 이해하고 일관되게 응답할 수 있는가입니다.
이 기준을 중심으로 설문을 설계하면 더 안정적인 데이터를 얻을 수 있습니다.
