Валидность и близкие понятия (конспект)

Валидность и близкие понятия (конспект)

Валидность – способность оценочного инструмента (например, теста) оценивать именно то, что он пытается оценить. Иначе говоря: пригодность измерительного инструмента для заявленного измерения.

Типы валидности, природа валидности – могут быть разными. Как минимум, надо различать (NB! терминология, особенно русская, не является устойчивой – различайте понятия, а не пытайтесь запомнить слова).

В конспекте изложение несколько отличается от лекционного; тем не менее, за подробностями – к лекциям J

а) по способу установления

Содержательная валидность (критериальная, «по ключу») Определяется логическим путем: - описывается модель измеряемого качества (результата); в том числе – выделяются элементы и уровни; - определяется, в выполнении каких заданий проявляется каждый из описанных элементов/уровней; - проверяется, включены ли в тест задания, проверяющие все выделенные элементы/уровни, и в адекватных ли пропорциях

Эмпирическая валидность Определяется экспериментальным путем: - выделяются выборки испытуемых, у которых измеряемое качество заведомо присутствует или отсутствует (или развито в разной степени); - проверяется, различает ли тест (отличаются ли результаты тестирования) эти группы.

Не противоречат друг другу, в идеале – следует обеспечить оба типа валидизации.

б) по оцениваемому периоду

Текущая валидность (констатирующая, фиксирующая) Пригодность инструмента для измерения оцениваемых качеств на момент оценки

Прогностическая валидность Пригодность инструмента для предсказания вероятного развития или проявления оцениваемых качеств в будущем (например – прогноз успешности обучения)

Не противоречат друг другу, но на практике, как правило, проблематично обеспечить оба типа валидности в одном тесте. Выбор способа валидизации здесь зависит от целей оценивания.

в) по типу различения испытуемых

Дискриминативная валидность (различающая, фиксирующая, устанавливающая) Способность инструмента четко различить испытуемых, достигших или не достигших заранее заданного уровня оцениваемого качества (например, именно такой валидностью должен обладать тест на знание ПДД при выдаче водительских прав)

Дифференцирующая (дифференциальная) валидность Способность инструмента ранжировать испытуемых по степени выраженности оцениваемого качества (например, такой валидностью должен обладать тест, используемый для оценки претендентов на вакансию, замещаемую по конкурсу)

Важно: дискриминативная и дифференцирующая валидность, как правило, не могут быть обеспечены одними и теми же заданиями. (Это связано с тем, что дискриминативная валидность обеспечивается заданиями заданного уровня трудности, примерно одинакового по всему тесту – дифференцирующая же, наоборот, включением в тест заданий разной трудности). На практике это означает, что тест, обладающий обоими этими типами валидности, всегда будет сравнительно большим по размерам (фактически, в нем «два теста в одном»).

г) по степени непосредственности измерения

Очевдная (непосредственная) валидность Присутствует в ситуациях, когда оцениваемое качество совпадает с измеряемыми действиями (например, очевидной валидностью может обладать физиологический тест на скорость реакции)

Конструктная валидность Зависит от того, что понимается под оцениваемым качеством, якобы проявляющемся косвенно в измеряемых действиях (например, валидность любого теста «знаний» зависит от того, что мы понимаетм под «знанием», и в чем, как мы полагаем, оно проявляется внешне)

В тестах учебных достижений в большинстве случаев мы имеем дело именно с проблемой конструктной валидности, а иногда – даже с проблемой ложной «очевидной валидности».

д) по способности измерения в различающихся условиях

Внешняя валидность Связана с вопросом о том, можно ли делать выводы о проявлении измеряемых качеств в ситуациях, отличающихся от тестирования (например, означает ли правильное выполнение задач теста по ПДД способ­ность испытуемого руководствоваться ПДД в реальной дорожной ситуации)

Внутренняя валидность Связана с вопросом о том, влияют ли на результаты теста именно оцениваемые качества, а не какие-то другие (например, не будут ли различаться оценки испытуемых в тесте по истории из-за разницы не в знаниях и умениях, а в политических или религиозных убеждениях)

Не противоречат друг другу и независимы друг от друга. Оба типа всегда необходимы.

е) по способу нормирования (с чем сравниваем). Как правило, рассматривается не как тип валидности, а как особый параметр – «ориентация оценивания»

Критериально-ориентированное оценивание Результат испытуемого сравнивается с заранее заданным критерием (например, в экзамене на получение водительских прав, в любом аттестационном образовательном экзамене)

Нормативно-ориентированное оценивание Результат испытуемого сравнивается со средним результатом, полученном в некоторой группе (все сдававшие тест, или особая выборка валидизации). Например, именно так устанавливается проходной балл во вступительном экзамене. Другой пример – тест IQ: результаты сравниваются со срденими результатами людей этого возраста.

Индивидуально-ориентированное оценивани е Результат испытуемого сравнивается с его же собственным предыдущим результатом (именно такие инструменты необходимы в процессе обучения, чтобы оценить успешность работы с конкретным учеником)

Выбор «оценочной ориентации» (или их комбинации) полностью зависит от целей оценивания.

Дата добавления: 2015-11-05