측정

측정 measurement

• 정보이론적 정의:

  • 관찰에 기반하여
  • 정량적으로 표현된
  • 불확실성의 감소

• 측정은 반드시 물리량에만 국한되지 않음

• 또한 완벽하거나 정확해야만 하는 것도 아님

• 측정의 결과로 불확실성이 감소한다면, 그것이 무엇이든 측정될 수 있음

• 측정이 잘 되었는가를 평가하는 지표로 신뢰도와 타당도가 있음

신뢰도 reliability

• 신뢰도: 측정 결과가 일정함
• 예) 동일 환자에게 서로 다른 의사가 동일한 증상 설문지를 이용해 질문을 하고, 동일한 진단을 내렸다면 그 증상 설문지는 신뢰로움(reliable)
• 예) 동일 상황에서 같은 온도계로 온도를 여러 번 쟀을 때, 결과가 매번 다르다면, 그 결과는 신뢰롭지 않음(unreliable)
• 신뢰도는 결과의 일관성에 대한 개념으로, 무엇을, 어떻게 측정하는지는 따지지 않음
• 환자가 증상 설문지에 아무렇게나 대답하고 있다고 해도 설문지를 통해 내릴 수 있는 진단이 동일하다면 설문지는 신뢰로움
• 온도계가 첨단 과학으로 만들어진 것이라고 해도 결과가 일정하지 않으면 그 이유가 무엇이든 신뢰롭지 않음
• 주의: 일상적 의미에서 "믿을 수 있음"과는 다름

타당도 validity

• 타당도: 측정하고자 하는 것을 잘 측정함
• 예) 고장난 온도계는 항상 같은 온도를 보여줌(= 신뢰로움) 그러나 온도를 재고 있는 것이 아님(=타당하지 않음)
• 신뢰도와 달리 타당도는 평가가 훨씬 어려움
• 측정하고자 하는 것을 잘 측정하는지 알려면, 올바른 측정값을 알아야 함(닭과 달걀의 문제)
• 예) 근대 과학 초기에 과학자들은 버터, 피, 천문대 지하실 등등을 온도의 기준점으로 제시
• 기준점이 되려면 녹는 온도와 끓는 온도가 일정해야 함
• 온도가 일정하다는 것을 알려면 측정이 필요
• 측정을 하려면 기준점이 필요(무한 반복)

신뢰도의 종류

• 검사-재검사 (test-retest) 신뢰도
  • 동일 대상을 시간을 두고 반복적으로 검사하여 측정했을 때 결과가 일정
  • 측정이 간편하고, 동일 검사 도구의 신뢰도를 평가할 수 있음
  • 시간에 따라 대상이 달라지는 문제
• 동형 검사(parallel-forms) 신뢰도
  • 비슷한 두 가지 검사의 결과가 일정
  • 검사-재검사와 달리 시간 간격 문제가 없음
  • 두 검사가 동일하다는 것을 보장이 어려움
• 평정자간(interrater) 신뢰도
  • 동일 대상을 여러 사람이 평정(=rating, 점수를 매김)했을 때 결과가 일정
  • 사람이 평가해야 할 경우, 사람에 따라 달라지는 정도를 판단할 때 사용
• 내적 일관성(internal consistency) 신뢰도
  • 측정의 부분적 결과들이 일정
  • 예) 한 시험에서 일부 문제의 채점만으로 평가해도 점수가 비슷

타당도의 종류

• 내용(content) 타당도: 검사의 내용이 측정 대상과 관련이 있음
• 안면(face) 타당도: 일반인의 눈으로 보기에 타당함
• 논리적(logical) 타당도: 전문가적 관점에서 논리적 타당함
• 준거(criterion) 타당도: 외적 준거와 비슷함
  • 예) 채용 시험 점수는 채용 후 직무 성과와 비슷해야 함
• 예측(predictive) 타당도: 미래의 준거를 잘 예측함
• 동시(concurrent) 타당도: 동일 시점에 다른 준거를 잘 예측함