체육측정평가 : 영역관련타당도와 결정타당도

• 영역관련타당도 : 1) 준거행동의 기준설정, 2) 대표성을 지닌 검사항목의 구성
• 결정타당도 :  1) 분류정확성을 지닌 기준설정방법, 2) 피험자의 참상태를 분류하는 방법

---

1. 준거지향검사의 타당도

• 교육목표나 건강과 같은 절대적인 준거에 비추어 피험자를 평가(신뢰도 < 타당도 중요)

• 준거행동에 기초하여 운동수행력을 측정하는 검사

• 준거행동이란, 검사에서 관심 사항이 되는 목표를 의미하며,

• 준거지향검사에서는 대표성을 지니고 있는 준거행동이 정의되어야 한다.

• 준거지향검사의 사용목적 : 피험자가 측정하고자 하는 특성을 얼마나 알고 있는지 또는 얼마나 할 수 있는지를 평가하는데 중점

 

 

 

2. 영역관련타당도

• 준거행동의 각 구성 요소가 준거지향검사의 구성 항목에 제대로 포함되어 있는가?

• 영역(준거행동) : 검사에 포함된 항목들이 준거행동을 대표할 수 있는 항목들로 구성

• 검사가 적절하게 선정되었다면 이는 영역관련 타당도가 확보되었다고할 수 있다.

• 따라서, 준거행동 (영역에 대한 정의) 매우 중요하며,

• 통계적인 방법으로 타당도를 추정하는 것처럼 인위적인 과정은 아니지만 체계적이고 논리적인 과정

• 대표성을 가지고 있는 준거행동을 지닌 검사항목의 구성여부

 

 

 

3. 결정타당도

• 분류의 정확성 : 피험자를 완수자와 미수자로 구분하여 정확한 분류를 위하여 기준을 설정한다.

• 기준점수의 위치에 따라 피험자를 정확하게 분류정확확률이 결정

• 기준을 설정하는 방법 ) 판단적방법, 판단-경험적방법, 경험-판단적방법으로 구분된다.

  • 판단적방법 : 전문가 집단의 경험과 판단을 기초로 준거행동과 관련한 기준을 설정하는 방법판단-경험적방법 : 전문가의 판단에 주로 의존하되 경험 자료를 참고하는 방법

  • 경험적방법 : 경험자료에 의존하되 전문가의 판단을 참고하는 방법 (참상태분류가 어려워 아래와 같이 피험자의 참 상태를 분류하는 방법 활용)

•  피험자의 참 상태를 분류하는 방법 :
  • 준거검사 : 준거검사를 통해서 2개의 집단을 분류한 뒤, 2개집단의 현장검사(결정검사)를 통해 점수분포곡선을 얻는다. 2개 집단의 점수준포곡선이 교차하는 교차점을 기준점수로 설정한다.
  • 준거집단 : 진완수자와 진미수자의 비율을 합한 분류정확확률 값을 활용하여 진완수자와 진미수자의 비율이 많아지도록 기준점으로 설정한다
  • 경계집단 : 평가자가 피험자를 주관적으로 두 집단으로 구분, 완수자나 미수자로 분류되지 않는 피험자를 경계집단으로하고 경계집단의 중앙값을 기준으로 피험자를 분류하는 방법

• 분류정확확률 : 진완수자와 진미수자의 비율을 합한 값 ( vs 분류오류확률)

  • 준거지향검사를 제자할 때 분류정확확률을 높이려면 진완수자와 진미수자의 비율이 많아지도록 기준점을 설정해야 할 것이다.

  • 분류정확확률이 0.5 라는 것은 타당도가 전혀 없다는 의미로 해석되며, 결정타당도계수는 0.5~1.0 의 범위만이 의미있는 계수로 해석되고, 일반적으로 0.8 이상의 분류정확확률이 바람직한 타당도 수준으로 인정된다.

• 분류오류확률 : 오완수자 + 오미수자. 이 값이 작아야 결정타당도가 높다고 할 수 있다.

---