Валидность психодиагностического инструментария
Другим после надежности ключевым критерием оценки качества методик является валидность. Вопрос о валидности решается лишь после того, как установлена достаточная ее надежность, поскольку ненадежная методика не может быть валидной. Но самая надежная методика без знания ее валидности является практически бесполезной.
Следует отметить, что вопрос о валидности до сих пор представляется одним из самых сложных. Наиболее укоренившимся определением этого понятия является то, которое приведено в книге А. Анастази: «Валидность теста – понятие, указывающее нам, что тест измеряет и насколько хорошо он
это делает».
Валидность (с англ.действенный,пригодный,имеющий силу) —этокомплексная характеристика методики, которая включает сведения об области исследования явлений и репрезентативности диагностической процедуры по отношению к ним.
Валидность – это комплексная характеристика, включающая, с одной стороны, сведения о том, пригодна ли методика для измерения того, для чего она была создана, а с другой стороны, какова ее действенность, эффективность, практическая полезность.
В стандартных современных требованиях к психологическим тестам валидность определяется как комплекс сведений о том:
- относительно каких групп психических свойств личности могут быть сделаны выводы с помощью конкретной методики, т.е., «что мы изучаем»;
|
|
|
- о степени обоснованности выводов при использовании конкретных тестовых оценок или других форм оценивания «насколько хорошо методика изучает психическое явление».
Валидность рассматривается как обязательная и включает в себя данные
о степени согласованности результатов теста с другими сведениями об обследуемой личности, но полученными из других достоверных источников (теоретические ожидания, наблюдение, экспертные оценки, результаты других методик, достоверность которых установлена и т.д.). Валидность описывает также конкретную направленность методики (контингент испытуемых по возрасту, образовательному уровню, социально -культурной принадлежности и т.д.) и степень обоснованности выводов в конкретных условиях использования теста.
С методологической точки зрения валидность является основной гносеологической проблемой психодиагностики. Надежность — это необходимое, но недостаточное условие валидности. Эти два понятия тесно связаны между собой, но они не пересекаются, т.к. надежность — это устойчивость процедуры относительно объекта исследования, а валидность — это устойчивость, но относительно измеренных свойств предмета. Между ними нет прямо пропорциональной зависимости и, следовательно, повышение надежности не свидетельствует о повышении валидности. Каждая методика имеет четко определенную валидность. Большинство методик позволяют определить валидность по отношению к нескольким психическим характеристикам.
|
|
|
Как видно из вышеизложенного в понятие валидности входит большое количество самой разнообразной информации о тесте. Различные категории этих сведений и способы их получения образуют виды валидности.
Виды валидности
Конструктная валидность —это один из основных видов валидности,который отражает степень репрезентации исследуемого психологического конструкта в результатах теста. Степень обоснованности теории, положенной в основу создания данного теста.
Она устанавливается путем доказательства правильности теоретических концепций, положенных в основу теста. Обращение к концептуальной валидности необходимо в тех случаях, когда результаты тестовых измерений используются не просто для предсказания поведения, а как основа выводов о том, в какой степени испытуемые обладают некоторой определенной психологической характеристикой. Причем измеряемая психологическая характеристика не может быть отождествлена с какой-либо наблюдаемой особенностью поведения, а представляет собой теоретическую концепцию.
|
|
|
Примерами таких концепций являются интеллект, черты личности, мотивы, установки и т.д.
Т.к. проявление таких конструктов в деятельности человека многообразны и неоднозначны с точки зрения их выделения, то установление конструктной валидности является сложным процессом.
Важнейшим аспектом конструктной валидности является внутренняя согласованность, отражающая то, насколько определенные пункты (т.е. задания, вопросы), составляющие материал теста, подчинены основному направлению теста как целого, ориентированы на изучение одного и того же явления. Одним из компонентов концептуальной валидности является валидность по возрастной дифференциации. Она связана с возрастной динамикой исследуемого качества.
Среди конкретных методов определения конструктной валидности выделяется: сопоставление исследуемого текста с другими методиками, конструктное содержание которых известно. Корреляции между результатами двух тестов должны показывать, что разработанный тест измеряет примерно ту же сферу или то же явление, что и эталонная методика, т.к. в данном случае не требуется высокой степени связи между этими двумя тестами. Смысл процедуры конструктной валидности состоит как в установлении одновременно сходства двух методик, так и их различия.
|
|
|
При анализе конструктной валидности осуществляется подтверждение совокупности теоретически ожидаемых связей, которые, в свою очередь, определяются следующими подходами:
1) конвергентная валидность (проверка степени близости прямой и обратной связи);
2) дискриминантная валидность (установление отсутствия связи);
3) факторная валидность, позволяющий строго статистически проанализировать следующие моменты:
Особое место в процедуре определения конструктивной валидности занимает факторный анализ, позволяющий строго статистически проанализировать структуру связей показателей исследуемого теста с другими известными и латентными (скрытыми) факторами, выявить общие и специфические для группы сопоставляемых тестов факторы, степень их представленности в результатах, т.е. определить факторный состав и факторные нагрузки результата теста (факторная валидность).
Критериальная валидность —комплекс характеристик,включающийвалидность текущую и прогностическую и отражающий соответствие диагноза и прогноза определенному кругу критериев измеряемого явления.
В качестве критерия валидизации может выступать проверенный тест, общепризнанная теория, уровень достижения в какой-либо деятельности. Так, критериальная валидность личностного опросника для измерения социальной интроверсии может быть определена на основании сопоставления результатов теста с экспертными оценками хорошо знающих обследуемого лиц, с результатами наблюдения за проявлениями этой особенности в его поведении, с объективными сведениями о круге общения.
При валидизации тестов достижений результат измерений сравнивается с мнением педагогов о знаниях обследуемого в определенной области, с академическими оценками, контрольными проверками и т.д. В случае валидизации профориентационных тестов тестовые оценки сравниваются как
с экспертными оценками коллег и руководителей, так и с объективными показателями достижений в профессиональной сфере. Тест может иметь столько показателей валидности, сколько критериев. Критерий должен быть объективным, бесспорным и легко определяемым и надежным.
Критериальная валидность включает как комплекс связей с текущим состоянием изучаемого явления, так и вероятность и обоснованность прогноза о его состоянии в будущем.
Показатели текущей валидности демонстрируют степень репрезентативности характеристик изучаемого психического явления в результате теста, т.е. этот показатель демонстрирует представлено ли психическое свойство, которое мы изучаем.
Прогностическая валидность — это информация о том, с какой степенью точности и обоснованности методика позволяет судить о диагностируемом психологическом качестве, спустя некоторое время после измерения. Она отражает временной интервал, на который распространяется обоснование такого суждения.
Содержательная валидность —это один из основных видоввалидности методики, характеризующий степень репрезентативности содержания заданий теста измеряемой области психических свойств. Эта валидность имеет большее значение для тестов, исследующих деятельность, близкую или совпадающую с реальной (чаще учебной или профессиональной деятельность). Поэтому одной из важнейших задач создания адекватной модели тестируемой деятельности является подбор таких заданий, которые будут охватывать главные аспекты изучаемого феномена в правильной пропорции к реальной деятельности в целом.
Эта валидность закладывается в тест еще при подборе заданий для конструирования теста. Первый этап — определение перечня исследуемых свойств и видов деятельности, разделение какой-либо сложной способности на элементы (учебная деятельность складывается из умения слушать и запоминать). Второй этап — разработка собственно модели тестовой деятельности на основе наиболее важных элементов. Третий этап — проведение анализа степени соответствия разработанной модели реальной деятельности, т.е. соответствует ли модель той деятельности, которая диагностируется. Задания теста оцениваются экспертами по принципу их близости к реальным требованиям. Эксперты выносят суждение о том, охватывает ли тест репрезентативную выборку конкретных навыков и знаний исследуемой области обучения.
Использование экспертных оценок сближает содержательную валидность с процедурой определения критериальной валидности. Однако существенным различием между данными типами валидности является то, что экспертные оценки при анализе содержания являются критерием самого
теста, в то время, как при критериальной валидизации они относятся к испытуемым из выборки стандартизации.
Показатель валидности — это количественное и качественное определение того, насколько методика адекватно измеряет исследуемый признак личности.
Для вычисления количественного показателя – коэффициента валидности – сопоставляются результаты, полученные при применении диагностической методики, с данными, полученными по внешнему критерию у тех же лиц, используются разные виды линейной корреляции. Достаточно того, чтобы коэффициент валидности был статистически значим, низким признается коэффициент валидности порядка 0,20 – 0,30 , средним – 0,30 – 0,50 и высоким – свыше 0,60.
Дата добавления: 2021-11-30; просмотров: 34; Мы поможем в написании вашей работы! |
Мы поможем в написании ваших работ!