왜 그런가요
학습용 가상 연구에서 간호교육 설문의 Cronbach α가 0.90이라고 보고했습니다. 이를 보고 “문항은 하나의 개념만 측정하고 타당도도 입증되었다”고 요약해도 될까요? 높은 알파는 척도 평가의 한 정보이지만 서로 다른 측정 속성을 한꺼번에 증명하지 않습니다. 0.90은 이 사례의 가상 값이며 모든 척도의 합격 기준으로 제시한 숫자가 아닙니다.
문장을 먼저 판단해 봅시다
“알파가 높으므로 이 설문은 단일차원이며 타당하다.” 맞는 해석일까요?
아닙니다. 내적 일관성, 단일차원성, 내용·구성 타당도는 구별해야 합니다. 문항 간 관계가 강하다는 정보만으로 무엇을 얼마나 적절히 측정했는지까지 확정할 수 없습니다.
알파를 읽기 전에 구조를 봅니다
COSMIN은 내적 일관성과 단일차원성이 같은 뜻이 아니라고 설명합니다. 내적 일관성을 해석하려면 척도의 구조가 뒷받침되어야 하며, 여러 하위척도가 있다면 하위척도별 해석이 필요합니다. 서로 다른 개념을 합친 전체 점수의 알파만 높다고 각 하위척도까지 잘 작동한다고 단정하지 않습니다.
Nottingham 원저자들의 설명도 알파가 문항 수나 문항 간 관계의 영향을 받고 단일차원성 자체를 입증하는 검정은 아니라고 짚습니다. 비슷한 질문을 여러 번 반복하면 계수가 높아 보일 수 있습니다. 반복성이 높다는 것과 필요한 내용을 폭넓고 적절하게 담았다는 것은 다릅니다.
추가로 읽을 근거
설문이 측정하려는 개념이 무엇인지, 문항이 그 내용을 충분히 담는지, 대상자가 뜻을 이해할 수 있는지 살펴봅니다. 요인분석 등 구조에 관한 근거와 예상한 다른 변수 관계에 관한 타당도 근거도 구별해 읽습니다. 알파 수치를 더 크게 만들려는 목적으로 중요한 문항을 무조건 빼거나 반복 문항을 덧붙이는 방법은 척도 품질 평가를 대신하지 않습니다.
좋은 요약은 범위를 줄이지 않습니다
가상 연구는 “알파 0.90이 보고되었으나 구조와 타당도는 별도의 근거를 확인해야 한다”고 요약할 수 있습니다. 계수 하나의 좋고 나쁨을 모든 목적에 맞는 보편 절단점으로 외우지 마세요. 척도 사용 목적과 대상, 문항 구성과 점수 해석에 맞춰 필요한 근거가 달라집니다. 국시에서는 신뢰도와 타당도를 구별하고, 논문을 읽을 때는 무엇을 실제 평가했는지 그 이름을 정확하게 남기는 것이 중요합니다.