논문을 작성하면서 통계분석을 마치면
가장 먼저 확인하게 되는 것은
분석 결과일 것입니다.
가설이 지지되었는지,
통계적으로 유의한 관계가 나타났는지,
연구모형이 적절한지 등을
중심으로 결과를 정리하게 됩니다.
그런데 논문 심사 과정에서는
분석 결과만큼이나 중요한 질문을
받을 수 있습니다.
“왜 이 분석 방법을 선택했나요?”
“다른 분석 방법을 사용하면 안 되나요?”
“연구문제에 이 분석이 적절한 이유는 무엇인가요?”
연구자 입장에서는
이미 통계분석을 완료했고
결과도 도출했는데,
왜 분석 방법을 다시 설명해야 하는지
의문이 들 수 있습니다.
하지만 이러한 질문은
단순히 통계분석 방법을 알고 있는지
확인하기 위한 것만은 아닙니다.
중요한 것은 분석을 수행할 수 있느냐가 아니라, 연구문제와 자료의 특성에 맞는 분석 방법을 선택했는지 설명할 수 있느냐입니다.
1️⃣ 통계분석은 연구문제에서 출발해야 합니다
통계분석 방법을 선택할 때
가장 먼저 확인해야 할 것은
연구자가 무엇을 알고 싶은지입니다.
예를 들어 대학생의 학업스트레스와
학업만족도에 관한 연구를
진행한다고 가정해보겠습니다.
연구문제가
“학업스트레스와 학업만족도 사이에
관계가 있는가?”라면
상관분석을 검토할 수 있습니다.
반면 연구문제가
“학업스트레스가 학업만족도를
어느 정도 설명하는가?”라면
회귀분석을 고려할 수 있습니다.
또한
“학년에 따라 학업스트레스의
평균에 차이가 있는가?”라는
연구문제라면
집단 간 평균 차이를 비교하는
분석 방법이 필요할 수 있습니다.
이처럼 동일한 변수를 사용하더라도
연구문제에 따라
적절한 분석 방법은 달라질 수 있습니다.
따라서 통계분석 방법을 선택할 때는
익숙한 분석부터 적용하기보다
연구문제가 어떤 관계나 차이를
확인하려는 것인지
먼저 정리하는 것이 좋습니다.
📌 통계분석 방법은 연구자가 사용하고 싶은 기법이 아니라, 연구문제에 답하기 위해 선택하는 도구입니다.
2️⃣ 같은 연구문제라도 자료의 특성에 따라 분석이 달라집니다
연구문제가 명확하더라도
자료의 특성을 고려하지 않으면
적절하지 않은 분석 방법을
선택할 수 있습니다.
예를 들어 두 집단의 평균을
비교하려는 연구를 생각해보겠습니다.
서로 다른 두 집단의 평균을
비교하는 경우라면
독립표본 t검정을 검토할 수 있습니다.
반면 동일한 사람을 대상으로
교육 프로그램 참여 전과 후의
점수를 비교한다면
대응표본 t검정을 고려할 수 있습니다.
두 분석 모두 평균 차이를
검토한다는 공통점이 있지만,
자료의 구조가 다르기 때문에
분석 방법도 달라지는 것입니다.
또한 종속변수가
연속형인지, 범주형인지에 따라서도
분석 방법이 달라질 수 있습니다.
예를 들어 종속변수가
연속형 만족도 점수라면
선형회귀분석을 검토할 수 있지만,
취업 여부처럼 두 범주로 구성된 변수라면
로지스틱 회귀분석이
더 적절할 수 있습니다.
따라서 분석 방법을 선택할 때는
다음과 같은 자료의 특성을
함께 확인해야 합니다.
🔎 변수의 측정 수준
🔎 종속변수의 형태
🔎 집단의 수와 독립성
🔎 반복측정 여부
🔎 관측치 간 관계
👉 연구문제가 같아 보이더라도 자료의 구조와 변수의 특성이 다르면 적절한 통계분석 방법도 달라질 수 있습니다.
3️⃣ 분석 방법을 선택했다면 가정도 확인해야 합니다
연구문제와 자료의 특성에 맞는
분석 방법을 선택했다고 해서
모든 과정이 끝나는 것은 아닙니다.
각 통계분석 방법에는
결과를 적절하게 해석하기 위해
확인해야 할 가정이나 조건이 있습니다.
예를 들어 선형회귀분석에서는
선형성, 오차의 독립성,
등분산성 등을 검토할 수 있습니다.
또한 다중회귀분석에서는
독립변수 간 다중공선성 문제도
확인할 필요가 있습니다.
하지만 이러한 가정이
충족되지 않았다고 해서
분석을 무조건 포기해야 하는 것은 아닙니다.
가정 위반의 종류와 정도,
연구목적에 따라
적절한 대응 방법이 달라질 수 있습니다.
예를 들어 이분산성이 존재한다면
강건 표준오차를 검토할 수 있고,
자료가 특정 집단에 속한 응답자들로
구성되어 있다면
관측치 간 독립성이 충족되는지
살펴볼 필요가 있습니다.
이처럼 분석 방법을 선택한 이유뿐 아니라
그 방법을 적용하기 위한 조건을
검토했는지도 중요합니다.
📌 분석 방법의 적절성은 이름이나 사용 빈도로 결정되는 것이 아니라, 해당 방법의 가정과 자료의 특성이 얼마나 부합하는지에 따라 판단해야 합니다.
4️⃣ 복잡한 분석이 반드시 더 좋은 분석은 아닙니다
논문을 작성하다 보면
단순한 분석보다 복잡한 분석을
사용해야 연구의 수준이
높아질 것이라고 생각하기 쉽습니다.
예를 들어 회귀분석보다
구조방정식모형을 사용하면
더 전문적인 연구가 될 것이라고
생각할 수도 있습니다.
하지만 분석 방법의 복잡성이
연구의 우수성을 결정하는 것은 아닙니다.
예를 들어 두 변수 사이의
기본적인 관계를 확인하는 것이
연구목적이라면
상관분석이나 회귀분석으로도
연구문제에 답할 수 있습니다.
반면 여러 잠재변수의
측정모형과 구조적 관계를
함께 검토해야 한다면
구조방정식모형이 적절할 수 있습니다.
물론 구조방정식모형은
모형의 복잡성과 추정 방법에 따라
충분한 표본과 추가적인 검토가
필요할 수 있습니다.
따라서 단순히 고급 분석이라는 이유로
복잡한 방법을 선택하는 것은
적절하지 않습니다.
분석 방법이 복잡해질수록
해석해야 할 요소도 많아지고,
추가적인 가정과 검토 사항이
발생할 수 있기 때문입니다.
👉 좋은 통계분석은 가장 복잡한 방법을 사용하는 것이 아니라, 연구문제에 필요한 분석을 적절하게 수행하는 것입니다.
5️⃣ 논문 심사에서는 분석의 논리적 연결성을 확인합니다
논문 심사에서
“왜 이 분석을 선택했나요?”라는 질문은
연구의 전체적인 흐름을
확인하는 질문이기도 합니다.
일반적으로 연구는
연구문제 설정에서 시작해
가설과 변수 설정,
자료 수집,
통계분석,
결과 해석으로 이어집니다.
이 과정에서 어느 한 부분이
다른 부분과 연결되지 않는다면
연구의 설득력이 약해질 수 있습니다.
예를 들어 연구문제에서는
변수 간 관계를 확인한다고 작성했지만,
실제 분석에서는 집단 간 평균 차이만
비교했다면 어떨까요?
분석 결과가 통계적으로 유의하더라도
연구문제에 충분히 답하지 못할 수 있습니다.
또한 연구가설에서는
인과관계를 주장하고 있지만
연구설계가 단면 설문조사라면
분석 결과를 인과적 효과로
해석하는 데 한계가 있습니다.
따라서 논문 심사에서는
분석 결과의 유의성뿐 아니라
연구문제와 분석 방법,
결과 해석이 서로 일관되게
연결되어 있는지를 확인하게 됩니다.
이때 분석 방법을 선택한 이유를
설명할 수 있도록 준비하는 것이 좋습니다.
예를 들어 다음과 같이 답변할 수 있습니다.
“본 연구는 독립변수와 종속변수 간의 관계를 확인하고, 다른 관련 변수를 고려한 상태에서 독립변수의 회귀계수를 추정하는 것이 목적이므로 다중회귀분석을 선택하였습니다. 또한 자료의 특성과 분석 가정을 검토하여 해당 방법의 적절성을 확인하였습니다.”
다만 실제 심사에서는
연구문제와 변수의 측정 수준,
연구설계에 맞게
구체적인 근거를 제시해야 합니다.
📌 논문 심사에서 중요한 것은 분석 방법의 이름을 설명하는 것이 아니라, 연구문제부터 결과 해석까지 이어지는 논리를 설명하는 것입니다.
🔥 핵심 정리
통계분석 방법을 선택할 때는
단순히 많이 사용하는 분석인지,
익숙한 분석인지,
복잡한 분석인지를
기준으로 판단해서는 안 됩니다.
먼저 연구문제가 무엇인지 확인하고,
변수의 특성과 자료의 구조를
함께 검토해야 합니다.
또한 선택한 분석 방법의
가정과 적용 조건을 확인하고,
분석 결과가 실제로
연구문제에 답하고 있는지도
살펴볼 필요가 있습니다.
논문 심사에서 분석 방법을 선택한 이유를
질문하는 것은 이러한 과정이
논리적으로 연결되어 있는지
확인하기 위한 것입니다.
👉 통계분석에서 중요한 것은 어떤 분석을 사용했느냐보다, 왜 그 분석이 연구문제와 자료에 적절한지 설명할 수 있느냐입니다.
📌 이렇게 보면 됩니다
✔ 연구문제가 관계, 차이, 예측 중 무엇을 확인하려는지 정리하기
✔ 변수의 측정 수준과 자료의 구조 확인하기
✔ 선택한 통계분석 방법의 가정과 적용 조건 검토하기
✔ 분석의 복잡성보다 연구목적과의 적합성 우선하기
✔ 연구문제와 분석 결과 및 해석이 일관되게 연결되는지 확인하기
👀 많이 틀리는 포인트
익숙하다는 이유만으로 통계분석 방법을 선택하기 ❌
변수의 측정 수준과 자료의 구조를 확인하지 않고 분석하기 ❌
복잡한 분석을 사용하면 논문의 수준이 높아진다고 생각하기 ❌
통계적으로 유의한 결과가 나왔다는 이유만으로 분석 방법이 적절했다고 판단하기 ❌
👉 논문 심사에서 분석 방법을 선택한 이유를 질문받는 것은 자연스러운 일입니다.
연구자는 단순히 분석 결과를 제시하는 것을 넘어, 해당 분석이 연구문제에 적절한 이유를 설명할 수 있어야 합니다.
결국 중요한 것은 통계분석을 얼마나 많이 알고 있느냐가 아니라, 연구문제와 자료의 특성을 이해하고 그에 맞는 분석 방법을 논리적으로 선택했느냐입니다.
