Методические рекомендации по написанию социального проекта методическое пособие
 Скачать 128.92 Kb.
|
|
В. Финальная оценка. Проводится на стадии окончания проекта. Цель финальной оценки вытекает из ее названия. Она используется для подведения итогов выполнения проекта. Результаты итоговой оценки составляют основу содержательного отчета по проекту. В ситуации с конкурсом субсидий такой отчет должен продемонстрировать не только достижение запланированных результатов, но и обоснованность расходования ресурсов. Органы государственной власти уделяют огромное внимание контролю за целевым использованием денежных средств конкурса. Во всех объявлениях о конкурсах есть указание на то, что средства, использованные не по назначению, должны быть возвращены государству. Г. Оценка влияния (воздействия). Как правило, проводится через некоторое время после окончания проекта. Такая оценка проверяет, насколько устойчивы результаты проекта, как действия проекта повлияли на проблему, произошли ли изменения в благосостоянии клиентов/благополучателей проекта. Если возвращаться к конкурсам субсидий, то государство не требует от самих СО НКО проводить такую оценку, но при этом Министерство экономического развития РФ и ряд региональных органов исполнительной власти заказывают проведение такой оценки экспертным или исследовательским организациям для выявления социально-экономической отдачи вложенных бюджетных средств. Инициативно данный тип оценки обычно проводят те организации, которые ведут длительные программы, а профинансированный за счет субсидий проект является частью такой программы. Часто оценку влияния проводят для тренингов и программ обучения. Таким образом, можно увидеть, пользуются ли участники обучения приобретенными навыками и знаниями на практике. Еще одной ситуацией является проведение оценки влияния по требованию донора. Оценка влияния напрямую не востребована в отчетности на конкурсах субсидий. Главный фокус контроля органов государственной власти сосредоточен на целевом использовании средств. И здесь правомерно задавать два вопроса. Первый: какие результаты были достигнуты при реализации проекта, и соответствуют ли они запланированным результатам? И второй вопрос: в какой мере фактические денежные расходы соответствуют расходам, определенным при заключении соглашения о выделении субсидии (гранта)? По формам отчетов видно, что органы государственной власти уделяют большое внимание тому, чтобы получить ответ на второй вопрос. И это в большей степени касается финансовой отчетности. Но для организации и сотрудников, работавших в проекте, важен ответ и на первый вопрос. Самой НКО важно понять, какие результаты были достигнуты в ходе реализации проекта и какое влияние эти проекты оказали на жизнь ее благополучателей, какой вклад внесли исполнители проекта в решение заявленной социальной проблемы, стала ли наша жизнь лучше благодаря этому проекту. В большинстве своем эти вопросы исследуются в оценке влияния. Что касается оценки воздействия, то она помогает повысить эффективность программ, поскольку обращается к следующим вопросам. 1) Достигает ли проект запланированных целей? 2) Могут ли изменения, произошедшие в целевой группе, быть объяснены данным проектом, или они возникли под воздействием каких-то других параллельных факторов? 3) Различается ли эффект воздействия проекта для разных групп благополучателей (например, мужчин, женщин, коренных народов и т.д.), разных регионов и в различные временные промежутки? 4) Имеет ли проект какие-то побочные эффекты, позитивные либо негативные? 5) Насколько эффективен данный проект по сравнению с другими проектами, направленными на достижение этих же целей? 6) Эффективен ли проект с точки зрения затраченных на него ресурсов? Центральный вопрос оценки воздействия: «Какова была бы ситуация теперь, если бы проект, который подвергается оценке, не был реализован?» Если речь идет об обучающей программе, то хорошим результатом будет решение актуальных задач с помощью полученных знаний и приобретенных навыков. Д. Еще о видах оценки. В зависимости от того, кто проводит оценку, можно говорить о внутренней или внешней оценке. • Оценка внутренняя осуществляется теми же самыми людьми, которые работают в организации. • Внешняя, или независимая оценка проводится приглашенным специалистом. При этом важно, чтобы он не только не работал в вашей организации, но и не был связан с ней отношениями, которые можно расценить как конфликт интересов. 4. 4. Планирование оценки. Первое, что следует учесть при планировании оценки - влияние, результаты и действия. В следующей таблице показаны различия между влиянием, действиями и результатами проекта. Уточнено, что измеряется в каждом из случаев и что является индикатором достижения.
Пример описания действий, результата и влияния в рамках социального проекта: Действия: предоставление профилактических медицинских услуг пациентам, недостаточно охваченным системой здравоохранения. Результаты: - Повысилось количество визитов в формальные медицинские учреждения пациентами, недостаточно охваченными медицинским обслуживанием; - Снизилось количество обращений в отделения экстренной медицинской помощи пациентами, недостаточно охваченными системой здравоохранения. Влияние: снизились затраты пациентов, недостаточно охваченных системой здравоохранения, на медицинские услуги. Когда мы говорим об инструментах оценки, мы часто представляем себе методики, разработанные экспертами. К ним относятся такие инструменты, как например, метод «Наиболее существенного изменения» или «Логико-структурной схемы проекта». Однако есть и более органичные инструменты – ментальные (определение Макса Пибоди из ассоциации «ИНТРАК»). Это ключевые вопросы, которые мы должны задать себе каждый раз, когда мы планируем провести любой мониторинг или оценку. Три ключевых вопроса: - Для кого мы делаем оценку? Проводим ли мы оценку для команды проекта? Для Правления или попечительского совета организации? Для доноров? Или эта оценка нужна тем, кто получает выгоду от проекта – благополучателям5? Ведь они главные стейкхолдеры6 (заинтересованные группы) нашей работы. - Что мы собираемся мониторить или оценивать? Например, органы местного самоуправления, оценивая успешность проекта, могут руководствоваться достижением целей стратегии социально-экономического развития региона. А женщины из небольших поселков могут назвать проект успешным, если в результате их повседневная жизнь стала легче. - Как мы будем проводить мониторинг и оценку? Какими ресурсами мы располагаем: временными, денежными и человеческими? Методика проведения оценки, которая должна быть сделана за несколько дней без дополнительных ресурсов, будет отличаться от оценки, которую нужно проводить несколько месяцев, с большим бюджетом и профессиональной командой оценщиков. Только когда мы ответим на эти вопросы, мы сможем начать думать о процессе проведения мониторинга и оценки. Индикаторы оценки могут быть различными. Самое простое определение понятия «индикатор оценки» – количественная или качественная информация, которая доказывает, что произошло изменение ситуации. Индикаторы всегда должны быть приведены в соответствие с целями, задачами или продуктами проекта. Они должны демонстрировать, что изменения произошли в результате наших действий. В качестве индикаторов часто используются, например, снижение заболеваемости, повышение образовательного уровня, снижение численности и состава групп риска, расширение сферы деятельности лиц с ограниченными возможностями, повышение качества природной среды. Помимо термина «индикаторы» также используется термин «показатели» – строго говоря, индикатор является параметром измерения (например, температура), а показатель – его конкретным выражением (например, не менее 80 градусов), но часто «индикаторы» и «показатели» используют как синонимы (в том числе, и в данной методической разработке). Решение о выборе индикаторов зависит от организации и благополучателей. Основные вопросы при выборе индикаторов: 1. Сможете ли вы собрать информацию об индикаторе? Если да, то где вы сможете получить эту информацию? 2. Будет ли информация точной (можно ли ей доверять)? 3. Сколько будет стоить получение информации с точки зрения времени сотрудника, времени клиента, денег? 4. Как часто вы сможете получать информацию? 5. Будет ли у ваших сотрудников возможность (или желание) собирать информацию честно и точно? 6. Сможете ли вы обосновать, что индикатор демонстрирует изменения в результате ваших действий? 7. Показывает ли он то, чего вы не знали раньше? 8. Поможет ли он принимать решения, которые улучшат следующие результаты? 9. Поможет ли индикатор продемонстрировать результаты деятельности разным оценщикам и благополучателям? 10. Поможет ли он в дальнейшем исследовании ситуации или последующей оценке? Индикаторы могут быть количественными и качественными. Количественные индикаторы – это числовые меры (например, статистические данные). Качественные индикаторы можно определить как суждения и восприятие людей. Например, число людей в деревне, у которых есть швейные машинки – это количественный индикатор, а уверенность в завтрашнем дне, которую дает этим людям обладание швейной машинкой как инструментом финансовой независимости, – это качественный индикатор. Обратите внимание, что индикаторы «качества жизни», с помощью которых, например, измеряют здоровье, образование и занятость населения, часто путают с качественными индикаторами, так как в обоих случаях употребляется слово «качество». Список основных отличий между количественными и качественными индикаторами:
Примеры индикаторов и показателей: - Количество программ, проектов, мероприятий, курсов и партнеров. - Количество лиц, получивших услуги/принявших участие в проекте. - Количество публикаций и их тираж. - Число обращений в организацию. - Некоторые характеристики проведенных мероприятий (например, частота и продолжительность семинаров, консультаций и т.д.). - Количество волонтеров, занятых в проекте; - Количество человеко-часов, отработанных волонтерами и сотрудниками организации. Используя качественные индикаторы, мы можем оценивать: - Удовлетворенность благополучателей полученными услугами. - Достижения благополучателей, изменения в их жизни. Качественные индикаторы влияния на сообщество могут демонстрировать: - Воздействие на причины возникновения проблемы. - Улучшение или изменение условий жизни. Описывая повышение качества предоставляемых услуг, мы можем использовать такие индикаторы, как: - расширение ассортимента/объемов предоставляемых услуг; - повышение доступности услуг; - распространение положительного опыта оказания услуг. Примеры индикаторов для оценки обучения (после тренинга/семинара): 1. Оценка действия (реакции на тренинг). Вопросы: 1) Насколько тренинг понравился участникам? 2) Насколько выполнены согласованные ожидания участников? Возможные индикаторы: 1) Процент участников, которые оценивают степень исполнения своих ожиданий как высокую/среднюю/низкую. 2) Появление у участников новых идей. 3) Сбалансированность и уместность форм проведения тренинга. 4) Желание применять полученные знания. 5) Доступность изложения материала. 6) Степень вовлеченности участников в процесс. 7) Полезность раздаточных и наглядных материалов. 8) Новизна полученной информации. 9) Тренерский стиль. 2. Оценка продуктивности (усвоения знаний, умений, установок). Вопросы: 1) Правильно ли были определены цели, задачи тренинга? 2) Достигнуты ли цели, выполнены ли задачи тренинга? Возможные индикаторы: 1) Попытка применения полученных знаний. 2) выполнение «домашних заданий». 3) Способность участника применить умения в конкретных ситуациях. 4) Активность участников после семинара/тренинга. 5) Мнение коллег о работе участника; 6) Заказ руководителя организации на проведение тренинга для всей организации, группы сотрудников; 7) Контрольное тестирование (начало – конец). 8) Проявление личностного роста участника. 9) Изменение поведенческих реакций. 3. Оценка изменений (влияния на организацию). Вопросы: 1) Насколько полученные знания и умения применяются в повседневной практике? 2) Как это повлияло на деятельность организации? Возможные индикаторы: 1) Возникновение новых связей и партнеров, улучшение старых. 2) Модификация услуг, появление новых услуг, новых направлений деятельности. 3) Создание команды. 4) Использование инструментов, полученных на тренинге, в целом в организации. 5) Практические действия (проекты, истории успеха) после тренинга в организации. 6) Процент выполнения индивидуальных планов участников, заявленных во время тренинга\семинара. 7) Удовлетворенность клиентов, оценка клиентами изменений в организации. 8) Решение каких-либо организационных проблем, затруднений. 9) Рост бюджета организации/количества проектов/внешних связей. Представление количественных индикаторов в результатах может выглядеть в отчете достаточно сухо. Важно постараться сделать цифры наглядными, чтобы читатель мог себе представить масштабность и эффект проделанной работы. Кроме общих индикаторов можно искать и формулировать свои уникальные индикаторы, которые помогут продемонстрировать результаты проекта. Несмотря на то, что существует возможность проведения оценки на всех этапах проекта и выборе индикаторов на всех его уровнях от целей до результатов, следует отметить, что в документации конкурса субсидий требуются именно количественные показатели результатов. Чаще всего в формах отчетов органов государственной власти можно встретить такие индикаторы, как количество предоставленных услуг; численность граждан, получивших услуги; численность добровольцев, привлеченных некоммерческой организацией для предоставления услуг. Для такого отчета по субсидии собираются списки участников мероприятий и ведется статистика оказанных услуг. Однако можно пойти и дальше в оценке проекта. Указать не только количество проведенных мероприятий и охваченных социальной услугой людей, но и отразить, что изменилось в жизни наших клиентов (например, через опрос по принципу «до и после»), как изменилась наша жизнь, какой вклад сделала организация/проектная группа в решение социальной проблемы. Результаты можно представить в отчете в том числе и в виде процентных соотношений (сколько участников проекта развили новые умения и навыки, какой процент участников наблюдает позитивные изменения своей жизненной ситуации и т.д.). Для того чтобы показать достижение целей и задач проекта, а также для доказательств того, что изменение ситуации возникло в результате действий проекта, есть много вариантов и большое поле для творчества. Можно выбрать различные индикаторы, как качественные, так и количественные, исходя из требований донора и из собственного понимания ситуации. |