Критерии эффективности психолого-педагогического исследования.

Понятия «критерий», «показатель», «признак».

$Критерий – это признак, на основании которого производиться оценка, определение или классификация чего либо, мерило оценки. Мера сформированности того или иного критерия определяется показателями.

Пример:

Критерий – уровень знаний и умений, показатель - показатель — их успеваемость в баллах

$ Критерии должны удовлетворять определенным требованиям:

· объективность, то есть отражение признаков, присущих изучаемому предмету, независимо от воли и сознания субъекта;

· валидность, т.е. критерии должны отражать наиболее важные признаки предмета, оцениваться должно именно то, что исследователь хочет оценить;

· комплексность и интегративность, т.е. совокупность всех критериев должны охватывать с достаточной полнотой все существенные характеристики исследуемого явления или процесса.

Пример:

В двадцатые годы нашего столетия пожарным, чтобы они вроде бы «меньше спалив», была установи лена заработная плата, пропорциональная числу потушенных за месяц пожаров. В итоге дело кончилось тем, что пожарные сами стали устраивать поджоги.

$Рекомендации по выбору критериев и показателей:

1. Критерий должен отражать реальное состояние объекта и находиться в прямой зависимости от состояния изучаемого явления, процесса и т.п. Если формируемое качество может быть реализуемо только в определенном виде деятельности, то тогда критерием должна выступать успешность этой деятельности.

Пример:

Такой «критерий», как результаты анкетирования студентов по окончании эксперимента «какая музыка вам нравится больше — эстрадная или классическая?» (изучалось воспитание эстетического вкуса у студентов) вряд ли может о чем-то говорить. Ведь студенты, зная, какой ответ от них хотят получить, могут просто «подыграть» преподавателю, экспериментатору. Или же «критерий» — ответы школьников на вопрос «Понравились ли занятия по основам информатики и вычислительной техники?». Ведь, во-первых, школьники опять же могут «подыграть» спрашивающему, а во-вторых, наверное, не всегда учение может и должно нравиться — так же, как горькое, но необходимое лекарство для больного.

2. Если исследуемое явление имеет комплексный характер, то должна быть выявлена система критериев, отражающих все стороны изучаемого явления.

Пример:

Так, в связи с введением аттестации учителей некоторые специалисты предлагают для учителей математики, физики разработать систему тестов, позволяющих оценивать их умение решать математические и физические задачи — это и будет якобы критерием квалификации учителя. Наверное, это должен быть лишь один из многих критериев, поскольку, помимо профессионально-математической подготовки, подготовки по физике учитель в том числе должен еще владеть и педагогическим, методическим мастерством, что в данном случае остается без внимания.

3. Если в качестве критерия выбираются уровни сформированности того или иного качества, то более высокую объективность дают не количественные уровни (высокий, средний, низкий), а качественные (например, шкала уровней развития знаний по Беспалько: 1 уровень — знания-знакомства — узнавание объектов, явлений, процессов, свойств при повторном восприятии ранее усвоенной информации; II уровень — знания-копии — предполагает репродуктивное воспроизведение и применение полученной информации; III уровень предполагает продуктивные действия по применению полученной информации в процессе самостоятельной деятельности; IV уровень — знания-трансформации — предполагает возможность творческого применения полученной информации посредством самостоятельного конструирования собственной деятельности.

Критерии оценивания могут быть как качественными, так и количественными.

Шкалирование.

$ Шкалирование — также один из методов педагогического исследования, позволяющий превратить качественные факторы в количественные ряды.

Шкалирование дает возможность, например, качества личности изобразить в виде шкалы. Шкалы могут быть односторонними и двусторонними. Шкалирование, при котором оцениваются качества личности с помощью компетентных людей (экспертов), называется рейтингом. Разновидностью шкалирования является метод парного сравнения.

$ Виды шкал:

Номинальная шкала

Номинальная шкала (шкала наименований) – это самый «низший» уровень измерения, предполагающий лишь констатацию подобия или различия объектов относительно какого-либо признака, то есть качественную однородность признака. Шкалу наименований представляет приписывание числовых индексов объектам. В них объекты помещаются в отдельные категории. При этом числовые индексы используются в качестве отличительных ярлыков (0–1), не имеющих количественного значения. Измерение в шкале наименований обеспечивает лишь группировку предметов в классы, идентичные в отношении определенного признака или свойства предмета. Измерить в шкале наименований – значит приписать число определенному признаку. Например, группировка учащихся по полу, социальному положению, месту жительства. К номинальному измерению относится и измерение типа «знает – не знает».

При использовании номинальных шкал можно определить, какой номинальный класс имеет самый большой состав, и назвать этот класс модой распределения. В данном случае мода является статистической мерой «центральной тенденции», т.е. если продолжить наблюдения, изменяя условия, в которых они проводились ранее, то мода будет представлять наблюдения, которые можно ожидать с максимальной вероятностью.

Пример:

Если в каком-то классе 14 детей являются единственным ребенком в семье (эта категория условно будет поименована нулем «0»), 11 детей имеют брата или сестру (обозначим единицей «1»), 5 детей – двух (присвоим данной категории детей цифру «2»), 3 ребенка – трех (обозначим тройкой «3») и 1 ребенок – четырех братьев и сестер (обозначим «4»), то «0» («единственный ребенок в семье») является здесь модальной величиной. В данном примере упорядочить по возрастающей номинальные величины условно можно следующим образом: 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 0, 1, 1, 1, 1, 1, 1, 1, 1, 1, 1, 1, 2, 2, 2, 2, 2, 3, 3, 3, 4.

Свойство шкалы	Различает предметы по проявлению свойства. Не различает уровней проявления свойства
Область применения	Классификация студентов в группах, групп в институте, заданий. Результат сдачи зачета (сдал, не сдал, не явился, не допущен). Классификация специальностей вузов, анкетные данные, номера автомобилей, футболистов и т.п.
Статистический аппарат	Частота ni Мода Mo

Порядковая шкала

Измерение в шкале порядка возможно при том условии, что имеется возможность определить не только признаки свойств предмета, но и различие интенсивности признака или свойства. Ранговые измерения характеризуют только порядок расположения предметов по возрастанию или убыванию их свойств. Данный вид измерения использует два свойства чисел – различие их и порядок расположения. Большая часть шкал, широко применяемых в педагогических, социологических, социально-психологических исследованиях, является шкалами порядка.

Шкала порядка является неравномерной. Расстояния между соседними метками шкалы неизвестны. В ранговых измерениях числа приписываются интенсивностям признака предмета таким образом, что если число, присвоенное предмету A, в процессе измерения, меньше числа B, то это значит, что в B содержится больше данного свойства, чем в A.

Примером измерений шкалы порядка может служить ранжирование по индивидуальным чертам личности, ранжирование учащихся по успехам в учении, ранжирование по физическим данным, обозначение твердости минералов, военные ранги, ученые степени и звания, награды за заслуги. Например, мы ранжируем учащихся по росту. В этом случае учащихся ранжируют в порядке роста и каждому присваивают соответственно числа 1, 2, 3, 4, 5, 6, 7, 8, 9.

Свойства шкалы	Различает уровень проявления свойств объекта, не определяет величину различия проявления свойств, не имеет эталона (масштабной единицы)
Область применения	Балльные оценки за учебу, годы обучения, твердость минералов, сила ветра, урагана, землетрясения, место на спортивных соревнованиях, сортность
Статистический аппарат	Частота ni . Мода Mo. Медиана Me. Коэффициент Кендэла. Коэффициент Спирмена

Шкала интервалов

Шкала интервалов имеет отличительные свойства, заключающиеся в следующих возможностях: определение признаков, свойств предметов, выявление различия в степени измеряемых свойств, опора на условно определенную нулевую точку отсчета, произвольное определение величины единицы измерения (интервальной величины).

Интервальная шкала характеризуется тем, что интервалы между объектами могут быть измерены. При создании шкал интервалов основная проблема состоит в том, чтобы изобрести такие операции, которые позволили бы уравнять единицы шкал. В этой шкале имеются интервалы с соответствующими номерами, и характер ответов испытуемого фиксируется на определенной точке шкалы, выражающей его отношение к данному вопросу.

Характеристики шкалы интервалов

Свойства шкалы	Определяет величину различия проявления свойств. Не определяет уровни исчезновения свойств. Имеет масштабную единицу. Сравнивает на сколько больше
Область применения	Уровни проявления психических, физических свойств. Календарное время. Измерение температуры по шкале Цельсия, Фаренгейта. Рейтинговая оценка в учебе, спорте
Статистический аппарат	Частота ni. Относительная частота wi. Квантили Pi. Мода Mo. Медиана Me. Среднее . Дисперсия D. Коэффициент корреляции rxy

Шкала отношений

Шкала отношений (пропорциональная шкала) характеризуются возможностью определения каждого из следующих четырех соотношений: равенство, ранговый порядок, равенство интервалов и равенство отношений. В свою очередь, равенство отношений может быть установлено только в том случае, когда по шкале может быть найдена естественная (абсолютная) нулевая точка.

Измерение в шкале отношений существенно отличается от интервального тем, что положение абсолютной нулевой точки известно, что указывает на полное отсутствие измеряемого свойства. Все операции, присущие цифрам (сложение, вычитание, умножение и деление), можно производить без каких-либо ограничений. Отношения чисел, присвоенных в измерении, отражают количественные отношения измеряемого свойства. Поэтому в условиях шкалы отношений возможны утверждения, что у A в два, четыре раза больше свойств, чем у B. Значение абсолютного нуля свидетельствует об отсутствии оцениваемого свойства.

Характеристика шкалы отношений

Свойства шкалы	Определяет абсолютно любые отношения между уровнями проявления свойств. Имеет масштабную единицу. Фиксирует исчезновение свойства
Область применения	Скорость выполнения задания. Количество однородных сделанных ошибок. Количество запоминаемых при первоначальном изучении слов иностранного языка. Процент учащихся. Объем часов по предметам. Измерение температуры по шкале Кельвина (абсолютный нуль). Измерение массы, размеров, отсчет времени от начала (до конца)
Статистический аппарат	Частота ni. Относительная частота wi. Квантили Pi. Мода Mo. Медиана Me. Среднее . Дисперсия D. Коэффициент корреляции rxy

Критерии эффективности психолого-педагогического исследования.

Значение слова Эффективный по Ефремовой:
Эффективный - 1. Соотносящийся по значению с существительным: эффект (1), связанный с ним.
2. Приводящий к нужным результатам; действенный.
3. Дающий наибольший эффект (1). // Предназначенный для выполнения полезной работы; производительный.

В экономике эффективность понимается как отношение результата к затратам на его получение.

Таким образом эффективность деятельности может пониматься как наиболее полное и точное достижение поставленных целей при наименьших затратах.

$ Оптимальность – это такое состояние системы, при котором значение каждого частного критерия, описывающего состояние системы, не может быть улучшено без ухудшения положения других элементов (В. Парето).

В зависимости от начальных условий в качестве данных критериев оптимальность в целом могут выступать могут выступать следующие факторы:

- оптимальность конечного результата;

- оптимальность промежуточного шага (процедур) и процесса в целом;

- оптимальность ресурсных затрат, в т.ч. временных;

- оптимальность краткосрочных и долгосрочных последствий

Эффективность научно-педагогического исследования можно рассматривать в социальном и экономическом плане. Для большинства педагогических исследований характерен социальный эффект.

Основной единицей анализа качества педагогического исследования является его результат (продукт). Для оценки качества результат должен быть раскрыт с содержательной и внутренне связанной с ней аксиологической (ценностной) стороны. Содержательную сторону результата характеризует критерий новизны. Ценностную сторону - критерии теоретической и практической значимости, актуальности. Теоретическая и практическая значимость характеризует реальную ценность полученных результатов, актуальность - потенциальную, которая может быть выявлена после завершения работы.

В основе оценки качества научно-педагогических исследований лежит дифференцированный подход. Результат исследования оценивается в зависимости от области педагогики и типа работы с помощью общенаучных, типовых и конкретно-научных критериев.

Критерии качества должны быть семантически однозначными, одинаково пониматься как самими разработчиками, так и экспертами.

$ Критерий новизны характеризует содержательную сторону результата, новые теоретические положения и практические рекомендации, которые ранее не были известны и не были зафиксированы в науке и практике. Научной ценностью обладают лишь те исследования, которые содержат общественно новые знания, выступающие исходной ступенью для постоянно возрастающего их числа. Преднамеренное или случайное повторение ранее известных в педагогической науке и практике положений не может получить признания как результат исследовательского труда. Это требование распространяется и на те случаи, когда «новые результаты» отличаются от старых лишь терминологически.

Для описания новизны мы предлагаем использовать следующие характеристики.

Вид новизны. С этой точки зрения можно выделить теоретическую новизну (концепция, гипотеза, терминология и т.д.) и практическую (правило, предложение, рекомендация, средство, требование, методическая система и т.д.). В зависимости от типа работы и области исследования на первый план будет выходить его теоретическая или практическая новизна.

Уровень новизны - характеризует место полученных знаний в ряду известных и их преемственность. Он оценивается с помощью уровня конкретизации, дополнения и преобразования.

$ Критерий теоретической значимости характеризует ценностную сторону результата, показывает влияние результатов исследования на существующие концепции, подходы, идеи, теоретические представления в области обучения и воспитания, определяет вклад работы в развитие педагогической науки, ценностную сторону результатов исследования. В отличие от критерия актуальности он характеризует готовый продукт исследования, менее зависит от времени и может не совпадать с актуальностью. Нередко правильная оценка работ дается через несколько лет, когда более четко обозначатся изменения, которые произошли в теории под влиянием полученных результатов.

По степени и широте влияния на теорию мы выделяем несколько уровней теоретической значимости: общепедагогический уровень, дисциплинарный уровень, общепроблемный уровень, частнопроблемный. Перечисленные уровни условны, границы между ними подвижны, однако в большинстве случаев их можно определить.

Теоретическая значимость исследования тесно связана с его новизной, степенью сформированности теоретических положений, т.е. концептуальностью, доказательностью полученных выводов, перспективностью результатов исследования для разработки прикладных тем. В фундаментальных исследованиях концептуальность является сущностной характеристикой и отражает теоретическое кредо автора. Исследование, лишенное концепции, будет носить описательный или эклектический характер и в теоретическом отношении малоубедительно. Критерий теоретической значимости позволяет получать знания о сущности и закономерностях процесса воспитания, совершенствовать и преобразовывать практику, намечать проекты новой педагогической деятельности.

$ Критерии практической значимости характеризует реальные достижения в обучении и воспитании, организации различных видов деятельности, методике преподавания, которые стали результатом использования педагогических исследований в практику.

Практическая значимость результатов прикладных педагогических исследований и разработок зависит от следующих показателей.

Число и состав пользователей, заинтересованных в результатах исследования; масштаб использования результатов; социально-экономический эффект; готовность результатов исследования к использованию. В зависимости от степени разработанности дидактических и методических предложений и предписаний различают начальный, основной и завершающий этапы готовности. В зависимости от области применения полученных результатов можно выделить три уровня практической значимости: частнометодический уровень, общеметодический уровень, общедидактический уровень.

$ Критерий актуальности указывает на необходимость и своевременность изучения и решения проблемы для дальнейшего развития теории и практики обучения и воспитания, характеризует противоречия, возникающие между общественными потребностями (спросом на научные идеи и практические рекомендации) и наличными средствами их удовлетворения. Критерий актуальности динамичен, зависит от времени, конкретных условий и специфических обстоятельств.

Дата добавления: 2021-04-15; просмотров: 1841; Мы поможем в написании вашей работы!

Поделиться с друзьями:

Мы поможем в написании ваших работ!