Индикаторы могут быть количественными и качественными.
Количественные индикаторы – это числовые меры (например, статистические данные). Качественные индикаторы можно определить как суждения и восприятие людей.
Например, число людей в деревне, у которых есть швейные машинки – это количественный индикатор, а уверенность в завтрашнем дне, которую дает этим людям обладаниешвейной машинкой как инструментом финансовой независимости, – это качественныйиндикатор. Обратите внимание, что индикаторы «качества жизни», с помощью которых,например, измеряют здоровье, образование и занятость населения, часто путают с качественными индикаторами, так как в обоих случаях употребляется слово «качество».
Список основных отличий между количественными и качественными индикаторами:
| Количественные | Качественные |
| Выражаются в цифрах | Выражаются в словах |
| Процедуры измерения стандартизированы, легко могут дублироваться | Процедуры измерения дублируются редко, часто отражают индивидуальный исследовательский подход |
| Часто нуждаются в качественной интерпретации | Часто используются в локальных ситуациях или с небольшим количеством людей |
| Представляются в виде статистическихданных, графиков и диаграмм, результатов измерений и взаимосвязей | Представляются в виде высказываний, фрагментов документов, наблюдений |
| Анализ проводится статистическими иматематическими методами | Анализ проводится путем выделения ключевого содержания или обобщения тем из количественных данных; организацияданных нацелена на получение целостной картины. |
Примеры индикаторов и показателей:
|
|
|
- Количество программ, проектов, мероприятий, курсов и партнеров.
- Количество лиц, получивших услуги/принявших участие в проекте.
- Количество публикаций и их тираж.
- Число обращений в организацию.
- Некоторые характеристики проведенных мероприятий (например, частота ипродолжительность семинаров, консультаций и т.д.).
- Количество волонтеров, занятых в проекте;
- Количество человеко-часов, отработанных волонтерами и сотрудниками организации.
Используя качественные индикаторы, мы можем оценивать:
- Удовлетворенность благополучателей полученными услугами.
- Достижения благополучателей, изменения в их жизни.
Качественные индикаторы влияния на сообщество могут демонстрировать:
- Воздействие на причины возникновения проблемы.
- Улучшение или изменение условий жизни.
Описывая повышение качества предоставляемых услуг, мы можем использовать такие индикаторы, как:
- расширение ассортимента/объемов предоставляемых услуг;
- повышение доступности услуг;
- распространение положительного опыта оказания услуг.
|
|
|
Примеры индикаторов для оценки обучения (после тренинга/семинара):
Оценка действия (реакции на тренинг).
Вопросы:
1) Насколько тренинг понравился участникам?
2) Насколько выполнены согласованные ожидания участников?
Возможные индикаторы:
1) Процент участников, которые оценивают степень исполнения своих ожиданий как
высокую/среднюю/низкую.
2) Появление у участников новых идей.
3) Сбалансированность и уместность форм проведения тренинга.
4) Желание применять полученные знания.
5) Доступность изложения материала.
6) Степень вовлеченности участников в процесс.
7) Полезность раздаточных и наглядных материалов.
8) Новизна полученной информации.
9) Тренерский стиль.
Оценка продуктивности (усвоения знаний, умений, установок).
Вопросы:
1) Правильно ли были определены цели, задачи тренинга?
2) Достигнуты ли цели, выполнены ли задачи тренинга?
Возможные индикаторы:
1) Попытка применения полученных знаний.
2) выполнение «домашних заданий».
3) Способность участника применить умения в конкретных ситуациях.
4) Активность участников после семинара/тренинга.
5) Мнение коллег о работе участника;
6) Заказ руководителя организации на проведение тренинга для всей организации, группы сотрудников;
|
|
|
7) Контрольное тестирование (начало – конец).
8) Проявление личностного роста участника.
9) Изменение поведенческих реакций.
Оценка изменений (влияния на организацию).
Вопросы:
1) Насколько полученные знания и умения применяются в повседневной практике?
2) Как это повлияло на деятельность организации?
Возможные индикаторы:
1) Возникновение новых связей и партнеров, улучшение старых.
2) Модификация услуг, появление новых услуг, новых направлений деятельности.
3) Создание команды.
4) Использование инструментов, полученных на тренинге, в целом в организации.
5) Практические действия (проекты, истории успеха) после тренинга в организации.
6) Процент выполнения индивидуальных планов участников, заявленных во время тренинга\семинара.
7) Удовлетворенность клиентов, оценка клиентами изменений в организации.
8) Решение каких-либо организационных проблем, затруднений.
9) Рост бюджета организации/количества проектов/внешних связей.
Представление количественных индикаторов в результатах может выглядеть в отчете
достаточно сухо. Важно постараться сделать цифры наглядными, чтобы читатель мог
|
|
|
себе представить масштабность и эффект проделанной работы. Кроме общих индикаторов можно искать и формулировать свои уникальные индикаторы, которые помогут продемонстрировать результаты проекта.
Несмотря на то, что существует возможность проведения оценки на всех этапах проекта и выборе индикаторов на всех его уровнях от целей до результатов, следуетотметить, что в документации конкурса субсидий требуются именно количественныепоказатели результатов. Чаще всего в формах отчетов органов государственной власти можно встретить такие индикаторы, какколичество предоставленных услуг; численность граждан, получивших услуги;численность добровольцев, привлеченных некоммерческой организациейдля предоставления услуг.Для такого отчета по субсидии собираются списки участников мероприятий и ведется статистика оказанных услуг.
Однако можно пойти и дальше в оценке проекта. Указать не только количество проведенных мероприятий и охваченных социальной услугой людей, но и отразить, что
изменилось в жизни наших клиентов (например, через опрос по принципу «до и после»), как изменилась наша жизнь, какой вклад сделала организация/проектная группа в решение социальной проблемы.Результаты можно представить в отчете в том числе и в виде процентных соотношений (сколько участников проекта развили новые умения и навыки, какой процент участников наблюдает позитивные изменения своей жизненной ситуации и т.д.).
Для того чтобы показать достижение целей изадач проекта, а также для доказательств того, что изменение ситуации возникло врезультате действий проекта,есть много вариантов и большое поледля творчества. Можно выбрать различные индикаторы, как качественные, так и количественные, исходя из требований донора и из собственного понимания ситуации.
Сбор данных.
Существует много способов для сбора, записи и анализа информации для оценки.Большинство из них основано на следующих ключевых методах сбора данных:
- анкетирование;
- интервью;
- наблюдение;
- изучение документации.
Преимущества и ограничения различных методов:
| Метод | Преимущества | Ограничения |
| Анкетирование | • Большой охват • Стандартизация • Удобство обработки данных • Гарантия анонимности | • Сложно получить достаточное количество ответов • Нельзя менять «фокусировку» в процессе проведения • Не узнаем того, о чем не спросим |
| Интервью | • Очень большой объем детальной информации. • Возможность смены «фокусировки» в процессе проведения • Возможность уточнить и вопросы, и ответы • В некоторых случаях только такможно узнать действительноеположение вещей | • Большая трудоемкость (продолжительность) • Требует особых условий дляпроведения • Зависимость от психологического контакта иэмоционального состояния участников • Обработка данных занимаетмного времени |
| Наблюдение | • Жизнь программы изучается, как она есть, а не опосредованно • Возможность получения новых,незапланированных и непредвиденных данных • Не требует ни создания особыхусловий, ни дополнительныхдействий со стороны проектной группы | • Возможно влияние наблюдателя, которое ложно исключить • Этические ограничения – невсе, что важно для оценки,можно наблюдать • Сложность регистрации и обработки данных требует времени |
| Изучение документации | • Неизменность информации,возможность многократногообращения к одному и тому жедокументу, перепроверки • Не требует создания специальных условий: можно проводить,когда удобно и где удобно | • Может отражать официальную точку зрения, а также содержать нормы и стандарты • Не всегда адекватно отражает проект • Слишком большой объем «лишней» информации • Трудоемкость изучения • Неудобство работы с документами на разных носителях • Недоступность некоторых документов по причине конфиденциальности |
Выбор инструментов будет определяться планом оценки.Инструментом станет анкета, которая будет использована в интервью.
Анализ данных.
Анализ собранных данных является процессом изучения данных, извлечения полезной
информации и предложения выводов. Есть статистические программы, которые могут
облегчить анализ количественных данных, включая такие программы, как SPSS и Excel.
С качественными данными работают по-другому, извлекая и классифицируя информацию из текстовых источников.
Дата добавления: 2018-06-27; просмотров: 5500; Мы поможем в написании вашей работы! |
Мы поможем в написании ваших работ!