1. 신뢰도
※ 신뢰도 측정 : 재검사법, 대체법(동형법, 대안법), 반분법, 내적일치도법 등
1) 재검사법(test-retest method)
○ 재검사법이란 : 동일한 측정대상에 대하여 동일한 질문지를 이용하여 서로 다른 두 시점에서 측정하여 얻 결과를 비교하는 방법
♣ 상관계수(설문지의 신뢰도)가 ρ ≥ 0.7이면 신뢰도가 좋다
2) 대체법 (alternative-form method) (대안법, 동형법)
★ 단점 : 유사한 문항을 만드는 일이 쉽지 않다
3) 반분법(split halves method)
4) 내적일치도(internal consistency)
○ 내적일치도 : 동일한 개념을 나타내는 서로 다른 특성들을 측정하는 문항들이 같은 내용을 얼마나 잘 측정하는가에 대한 지표
○ 내적일치신뢰도 :크론바흐 알파(Cronbach‘s alpha) 계수를 계산함으로써 측정.
2. 타당도
1) 준거관련 타당도
○ 준거 관련 타당도 : 검사 점수들이 준거변인이라고 부르는 다른 변인의 점수들과 얼마나 일치하느냐의 정도
○ 경험적 타당도 : 이미 타당성이 입증되거나 지금까지 널리 사용되고 있는 기준을 타당성의 평가 잣대로 이용.
○ 객관적 타당도 : 비교 기준이 되는 것의 측정값과 측정도구에 의한 측정값의 상관계수를 구하여 평가
① 예측타당도(predictive validity)
▷ 현재의 측정 또는 평가도구와 미래의 측정값과의 상관을 기준으로 예측타당도를 평가
(예) 신입생 선발시 내신성적을 어느 정도 반영할 것인가?
② 동시타당도(concurrent validity)
▷ 측정도구의 측정값과 같은 시점에서 기준이 되는 기준값과의 관련성에 의해 측정
(예) 정치적 보수성에 대한 측정도구의 타당도
2) 내용타당도
○ 내용 타당도 : 경험이나 전문 지식을 바탕으로 측정도구의 타당도를 검토하고 결정하는
○ 내용 타당도를 결정하는 두 가지의 과정
① 심리검사문항들 각각이 원래 정의된 특성을 잘 측정하고 있는가를 판단하는 과정
② 개별 문항을 토대로 한 전체 점수가 측정하고자 하는 바를 잘 측정하는 가를 판단하는 과정
3) 구성타당도
★ 제3의 가설 “논리적 사고력은 권위주의 성향과는 역U자형 관계에 있는 반면, 창의력과는 정적인 상관관계를 갖는다” |
○ 구성체타당도가 낮게 나타나는원인
▷ 측정 개념을 구성하는 가상적 요인의 설정이 적절치 못한 경우
▷ 요인을 측정하는 문항들을 잘못 만든 경우
○ 구성체타당성을 높이기 위해선?
▷ 요인들 간의 상관뿐만 아니라 요인을 측정하는 문항들 간의 상관도 높아야 함
▷ 구성체타당성을 평가하기 위한 통계적 방법으로는 상관분석, 요인분석, 분산분석 등이 있음
3. 문항분석
