2. 타당도란?
- 검사한 점수가 목적을 위해 얼마나 적합하게 이
용 될 수 있는지, 검사가 본래 재고자 했던 것을 잘
재고 있는지 등을 보여주는 지표.
타당도의 설명에 앞서 평가 도구 자체가 타당도를
가지는 것이 아닌 평가 도구의 결과가 타당도를 가
지는 것이다. (검사의 특성 X, 검사 점수의 특성O)
=> 있고 없고의 개념이 아닌, 높고 낮음의 개념
또한 신뢰도는 타당도의 필수조건이다.
(하지만 신뢰도는 타당도의 충분조건이 아니다.)
3. 낮은 신뢰도 &
낮은 타당도
높은 신뢰도 &
낮은 타당도
높은 신뢰도 &
높은 타당도
4. 전체 중에서 일부분만을 재어 해석하는 검사 속에서
전체 내용의 표본이 되는 검사의 내용이 타당한가를
판단하는 것.
판단 과정
① 검사가 재고자 하는 전채적 내용을 확인
② 문항 하나하나가 문항이 재고자 목적한 내용을 적절
하게 재는가를 확인
③ 문항의 집합인 검사의 내용이 재고자 하는 전체적
내용을 충분히 대표하는가를 확인
위의 과정을 통해 검사의 내용이 재고자 목적하는 내
용을 적절하게, 대표적으로 재고 있는가를 판단하게
된다.
5. 이러한 내용 타당도 증거를 위해서는 문항 하나하
나가 목적한 내용을 적절하게 재고 있는가 ㉡ 문항
이 모두 모인 검사의 내용이 재고자 하는 전체 내
용을 충실히 대표하는가 하는 것이 관건이 됨.
결과적으로 그 내용을 잘 알고 있는 내용 전문가
(담당 교사)의 역할이 중요.
이원분류표는 내용 타당도의 판단을 위해 큰 도움
이 될 수 있다. (전체 내용을 충실히 대표, 이원분
류표의 계획을 충실이 이행)
6. 검사 점수가 타당성을 가지고 있음을 보이기 위하
여 그 검사 점수를 제 3의 평가도구(준거)의 점수
와 비교하는 것.
이러한 준거 타당도 증거는 공인(concurrent) 타
당도 증거와 예언(predictive)타당도 증거로 나누
어진다.
- 둘의 차이는 검사 점수와 준거 점수가 얻어지는
시간적 간격
7. 공인(concurrent) 타당도 증거
- 동일한 능력 혹은 특성을 재고 있는 두 평가 도구
(검사와 준거)가 동일한 시기에 치러졌을때 사용
- 새 검사 점수와 준거 점수와의 높은 상관계수는
새 검사의 공인 타당도 증거가 된다
예언(predictive) 타당도 증거
- 관심되는 검사의 점수와 미래의 실제 수행의 적절
한 평가 결과 사이의 관련 정도를 통해 타당도를
입증하는 것
- 예언 타당도 증거를 위해서는 상관계수보다는 통
계적으로 복잡한 회귀분석을 사용함.
8. ※구인이란 직접 측정하거나 관찰하는 것이 불가능
한 인간의 인지적 심리적 특성
구인 타당도란, 검사가 재고자 하는 것을 실제로
재고 있다는 것을 보여주는 증거이다.
=> 내용, 준거 타당도 증거를 포함하는 포괄적인
개념
구인 타당도 증거를 위한 과정
① 검사가 재고자 하는 것을 충분히 재고 있는가가
점검되어야 함.
9. ② 재고자 목적하지 않거나 혹은 부수적인 능력이
검사 점수에 영향을 미치는가 하는 것이 점검되어
야 함.
구인 타당도 증거를 위해 사용되는 방법
- 다중특성, 다중도구 상관계수 분석방법
- 요인분석
- 공변량 구조 방정식 모형 방법
