Структура оценки — это методическая основа, ориентированная на задачи и вопросы оценки и устанавливающая методы сбора и обработки данных, план работ, ресурсное обеспечение, систему отчетности и контроля исполнения проекта. Чтобы определить структуру оценки, необходимо продумать, какая информация понадобится для ее проведения, каким образом можно будет получить необходимые данные, кто именно будет собирать информацию, какие методы анализа данных следует применить, потребуется ли в ходе оценки консультация специалиста в какой-либо области; потребуются ли помощники (например, для проведения анкетирования или интервьюирования клиентов организации); сколько времени понадобится для проведения оценки, какие ресурсы нужны для этого.
Для тех, кто будет использовать результаты оценивания, важно понимать, не только что и почему произошло, но и что нужно делать. Вот почему непосредственно после оценки проделанного следует этап корректировки планов. Например, в случае проведения оценки деятельности одного из реабилитационных центров, опрос клиентов помог точнее определять их потребности и соответственно более качественно и адресно предоставлять им услуги.
Иными словами, необходимо отслеживать воздействие проекта на целевые группы «благополучателей», или клиентов. Кроме того, для повышения эффективности деятельности организации важно не только уделять внимание соответствию первоначальному плану мероприятии, но отслеживать причины успеха и неудач, чтобы повлиять в дальнейшем на управленческие решения. Для этого следует еще на этапе написания заявки продумать и включить в проект четкие показатели его эффективности в долгосрочной перспективе; вызовет ли запланированный цикл мероприятий желаемые изменения.
По итогам проекта важно оценить результаты относительно данных показателей: например, изменилось ли у школьников после проведенного тренинга по вопросам инвалидности их отношение к людям с инвалидностью и их проблемам.
Перед выбором параметров оценки очень важно детально разобраться в логике самой программы, понять ее механизм, определить, что входит в реальные задачи программы, как они соотносятся с набором программных мероприятий и к чему они должны привести по плану. Для этого иногда полезно даже представить механизм программы схематично или в виде рисунка. Важнейший момент при изучении программы - структурирование предполагаемых результатов программы. Итоги и выводы большинства современных программ можно расположить в определенном иерархическом порядке.
Рассмотрим для примера программу развития самозанятости инвалидов, содержательная основа которой - проведение курсов по обучению инвалидов навыкам организации и ведения бизнеса и предоставление кредитов вновь создаваемым фирмам. Логическая последовательность результатов данной программы будет выглядеть примерно так:
| |||||||||||||||||||
|
| ||||||||||||||||||
|
| ||||||||||||||||||
Как правило, на одной или нескольких указанных ступенях в последовательности результатов и фокусируется оценка в зависимости от своих задач и возможностей проекта. Параметры оценки выбираются с таким расчетом, чтобы их можно было измерить с помощью доступных количественных показателей, которые называются индикаторами.
Выбор индикаторов оценки - задача увлекательная, и, вместе с тем, сложная. Индикатор должен обладать определенными свойствами - однозначностью, доступностью, измеримостью.
|
|
| |||||||||
|
| ||||||
Сравнение значений индикаторов с целевыми показателями, заложенными в программе, дает ответы на вопросы оценки в количественном выражении и позволяет экспертам судить об успешности программы.
Возвращаясь к нашему примеру с программой развития малого бизнеса инвалидов, определим возможные индикаторы, с помощью которых можно измерить каждый из результативных уровней данной программы.
Однако оценка не обязательно фокусируется на анализе тех или иных результатов программы. В ее задачи может входить оценка процесса создания программы или, эффективность механизма реализации программы. Для каждой из этих и других задач подбираются собственные параметры и индикаторы оценки.
Итак, у нас сформировалась логика оценки:
Каждый из этапов работы играет особую роль и по-своему важен. Технически последовательность действий по оценке выглядит так: