타당도와 신뢰도

논문을 작성할 때 타당도와 신뢰도라는 개념을 알아야 합니다. 타당도는 측정하고자 하는 것을 실제로 측정하였는지를 검증하는 척도인데요. 한편 신뢰도는 동일한 대상들의 집합을 동일하거나 비교 가능한 측정도구로 반복해서 측정했을 때 동일하거나 서로 비슷한 결과를 얻는 정도를 말합니다. 그러면 이제 타당도와 신뢰도의 종류 및 내용을 살펴보겠습니다.

타당도에는 내용타당도와 기준관련타당도, 구성타당도가 있습니다. 우선 내용타당도는 측정도구가 갖고 있는 내용이 적절한지 하는 것입니다. 또 측정 내용이 측정하려는 속성 내용의 전집을 대표하는지를 살펴보는 것을 내용타당화라고 부릅니다.

일반적으로 전체 모집단에서 모든 내용을 망라한다는 것은 불가능하지요? 그래서 문항들을 선별하게 되는데요. 이렇게 수집한 문항의 내용타당도는 항상 문제가 됩니다. 따라서 여기에는 판단이 개입되게 됩니다. 만약 내용타당도가 결여되면 논문의 가설은 실제로 검증되지 못한 것으로 간주됩니다. 따라서 측정되고 있는 속성과 각 문항이 어느 정도 관련이 있는지를 적절히 판단해야 하는 것입니다.

기준관련타당도는 검사점수나 척도점수를 한 가지 이상의 외적 변인이나 연구하는 속성을 측정하는 것입니다. 이 기준관련타당화는 실제 결과인 기준에 크게 관심을 둡니다. 즉 기준과 기준의 예측에 집중하구요. 여기서 예측이란 독립변인으로 종속변인을 예측하는 것을 말하며 관계성의 유무를 예측한다는 뜻입니다. 모든 검사는 어떤 결과나 측정치, 현재나 미래의 상태를 예측하기 때문이지요. 따라서 이 기준관련타당도를 얻기는 매우 어렵습니다.

마지막으로 구성타당도는 심리측정의 개념과 실제를 이론적인 개념에 연관시키는 것입니다. 어떠한 심리적 속성 또는 다른 속성들이 검사의 변량을 ‘설명’할 수 있는가 하는 것이지요. 이 구성타당도는 검사의 저변에 있는 이론을 타당화하는 것입니다. 따라서 이론적 구성개념 및 가설적 관계를 검증하는 과학적인 경험을 중시합니다.

신뢰도란 측정도구에 의해 산출된 자료가 지니고 있는 얻은 전체변량에 대한 ‘실제’ 변량의 비율을 말하는데요. 이 신뢰도란 완전한 신뢰를 나타내는 신뢰도 지수 1.00에서 측정도구에 의해 산출된 전체변량에 대한 오차변량의 비율을 뺀 것입니다. 따라서 측정도구의 정확성(accuracy) 또는 정밀성(precision)을 의미합니다.

신뢰도는 일련의 대상들에게 검사를 실시해 검사점수를 얻어 평균, 표준편차 및 변량을 계산해야 합니다. 이를테면 첫 번째 실시한 검사에서 개인의 순위가 결정되었다고 가정하고 두 번째, 세 번째 등등 계속적인 측정결과에서 거의 모두 동일한 순위가 나타났다면 그 검사는 신뢰로운 것이며 이는 안정성 즉 검사-재검사(test-retest) 방식에 의한 신뢰도의 해석으로 봅니다. 즉 신뢰도가 낮은 측정은 오차가 많이 발생해 관계성을 발견하기 어렵다는 것이지요.

논문작성이 어려운 이유는 이러한 타당도와 신뢰도를 모두 갖추어야 하기 때문입니다. 모든 측정도구는 신뢰도와 타당도라는 측면에서 비판적이면서 경험적으로 검증되어야 하니까요.

출처 : http://dohwan.tistory.com/entry/%ED%83%80%EB%8B%B9%EB%8F%84Validity