библто. Теоретические аспекты оценки эффективности социальных программ
 Скачать 2.41 Mb.
|
3.2 Основные направления совершенствования методики разработки и оценки эффективности социальных программСпециалистам комитета по здравоохранению и социальной поддержке администрации города Мурманска рекомендуется в дальнейшем использовать применяемую методику, позволяющую оценить экономическую эффективность социальной программы, включающую оценку экономической эффективности наиболее значимых мероприятий, стоимости и эффективности использования объектов. Необходимость совершенствования применяемой методики мотивируется выделением её наиболее слабых сторон, нуждающихся в коррекции. Поскольку слабой стороной социальных программ, разрабатываемых на базе комитета по здравоохранению и социальной поддержке, относится недостаточно четкое следование критериям качества выполнения социальной программы, то при проведении мониторинга программы необходимо более тщательно отслеживать следующие показатели: ) использование ресурсов (соответствие потраченных ресурсов плану); ) процесс выполнения программы (соответствие содержания и сроков мероприятий графику выполнения работ; соблюдение технологий, методов, процедур); ) результаты (в какой мере удается достигать поставленных целей); ) влияние (как влияет программа на ситуацию, в чем заключается это влияние). В том случае, если в результате выполнения программы необходимо построить схему потребления определенным контингентом граждан продуктов, предназначенных для реализации по социальной программе, то необходимо заранее определить параметры результатов и элементы, из которых они должны состоять. Специалисты комитета по здравоохранению и социальной поддержке каждый раз при разработке программы должны ставить перед собой главный вопрос: как строится система мониторинга данной социальной программы? Отметим существенный момент: прежде чем начать строить систему мониторинга, необходимо определять не только то, что нужно знать о системе (программе), но и почему эта информация важна. Таким образом, следующим шагом в построении системы мониторинга является определение периодичности получения информации о системе (программе). Здесь также нужна тщательная аргументация. От периодичности получения информации будет зависеть, в конечном итоге, стоимость системы мониторинга. Специалистам комитета необходимо рекомендовать в качестве избираемых на основе применяемого алгоритма следующие этапы построения социальных программ: ) чрезвычайно тщательно отбирать измеряемые показатели (индикаторы), по которым можно будет отслеживать ход программы; ) более четко устанавливать источники информации для проведения мониторинга (организации, отделы, отдельные люди или группы людей, документы и т.д.); ) более предметно выбирать методы сбора информации; ) точнее определять частоту и график сбора информации; ) заранее назначать ответственных за получение необходимой информации и договариваться с теми, кто эту информацию будет предоставлять; ) оптимизировать технологию обработки и анализа получаемой информации; ) уточнять и заранее планировать, как и кому будут переданы данные мониторинга, а также кто и как будет их использовать. ) учитывать в бюджете программы расходы, необходимые для проведения мониторинга. Специалистам комитета по здравоохранению и социальной поддержке целесообразно предложить систему оптимизации мер, связанных с оценкой социальных программ, основанную на методике "Оценка программы как процесс, ориентированный на практическое использование результатов" Майкла Патона (США). Хотелось бы подчеркнуть, что указанная методика увязывается с концепцией проводимой в Российской Федерации административной реформы, одним из результатов которой должно стать оценивание выполненных в государственном и муниципальном управлении работ по их результату. Адаптированный для комитета по здравоохранению и социальной поддержке вариант схемы оценки социальной программы для жителей г. Мурманска мог бы выглядеть следующим образом (рис.10): Рис.10 Схема оценки социальной программы для жителей г. Мурманска Главной частью "Задания на проведение оценки" (далее по тексту - Задание) на проведение оценки является перечень вопросов, на которые надлежит ответить. Эти вопросы должны быть логически связаны с целью проведения оценки. Вопросы Задания должны быть общими и не слишком многочисленными: ) Каковы фактические результаты Программы в какой мере они соответствуют целям Программы? ) Что можно считать основными достижениями Проекта? Чего по сравнению с планом сделать не удалось и почему? ) Каковы перспективы продолжения работы по окончании Проекта? На этапе планирования определяется, какие методы предполагается использовать для сбора информации. В самом общем виде все существующие методы необходимо разделить на четыре группы: наблюдение, изучение документации, анкетирование и интервьюирование. Для того чтобы собрать нужную информацию, необходимо не только выбрать метод, но и подготовить соответствующие инструменты: ) разработать и апробировать анкету; ) сформулировать вопросы для проведения интервью; ) определить, на что обращать внимание при наблюдении и как регистрировать результаты наблюдения. На этапе планирования также определяется график проведения работ и необходимые ресурсы. ) Сбор необходимой информации. На этапе сбора информации самым главным является беспристрастное фиксирование фактов, отказ от попыток их интерпретирования. Главная идея разделения этапов сбора информации и последующего анализа заключается в том, что выводы должны базироваться не на отдельных фактах, а на их совокупности. При сборе информации могут использоваться данные мониторинга. ) Анализ информации. На этапе анализа информации совершается главное таинство: из мозаики разрозненных фактов составляется целостная картина. На основании полученных данных делаются выводы и формируются рекомендации относительно принятия того самого управленческого решения, с которого все начиналось. Выводы представляют собой ответы на вопросы Задания. Полученные в результате оценки ответы передаются тем, кто принимает решения. Важно иметь в виду, что, в зависимости от цели, оценка может быть формирующей (по ее результатам можно повлиять на ход программы) или итоговой, суммирующей (по ее результатам можно извлечь уроки на будущее, но изменить что-либо в программе уже нельзя). Понятия формирующей и суммирующей оценки ввел Майкл Скривен (США), чей рекомендуется использовать специалистами комитета по здравоохранению и социальной политике. Специалистам комитета следует иметь в виду, что существуют стандарты проведения оценки программ, адаптированные для конкретных условий государственного и муниципального управления в Российской Федерации в условиях административной и социальной реформ. Стандарты направлены на то, чтобы оценка была полезной, осуществимой, правомерной и точной. Ниже приводится описание стандартов, которые могут быть использованы специалистами комитета при разработке параметров оценки социальных программ (табл.7) Таблица 7 Описание стандартов, адаптированных для специалистов комитета по здравоохранению и социальной поддержке администрации города Мурманска)
Сотрудники комитета должны иметь в виду, что мониторинг и оценку программ могут проводить: ) независимые специалисты, которые не имеют отношения к программе (внешняя оценка). ) сотрудники организации, не принимающие участия в программе (внутренняя оценка). ) участники программы (в этом случае процесс точнее было бы назвать самооцениванием). Необходимо учитывать, что методология, принципы и инструменты оценки социальных программ должны определяться не столько тем, что программы реализуются государственными структурами, сколько особенностями программ как таковых. Социальные программы, разработанные и реализуемые комитетом по здравоохранению и социальной поддержке, должны быть направлены на решение комплексных проблем и являться долгосрочными и масштабными, эти программы должны: предполагать значительные объемы финансирования; разрабатываться и выполняться с учетом национальных и культурных особенностей страны или региона; иметь политическое значение. Следует иметь в виду, что цена ошибки в программах со значительными объемами финансирования очень высока. Именно поэтому в таких случаях целесообразным представляется вначале проводить небольшие экспериментальные проекты, тщательно отслеживать их ход и анализировать результаты. Только потом, с учетом данных мониторинга и оценки экспериментальных проектов, корректируют программу и принимают окончательное решение о масштабном финансировании. Естественно, что государственные программы разрабатываются с учетом местных национальных и культурных особенностей. Оценку таких программ целесообразно проводить с участием местных специалистов. Знание языка, истории, местных традиций, норм поведения и особенностей текущей ситуации позволяет местным специалистам получать данные. Естественно, могут быть и другие варианты, которые во многих случаях окажутся недоступными для профессионалов комитета по здравоохранению и социальной поддержке администрации города Мурманска. Можно воспользоваться помощью иностранных специалистов. Полезным представляется использование смешанных групп. Зарубежные консультанты привносят международный опыт, методологию и инструменты, профессиональные стандарты. Местные специалисты - собственный опыт и культурный контекст. В таких смешанных коллективах происходит повышение квалификации местных кадров. Политическое значение социальных программ приводит к тому, что отчеты по оценке становятся в определенном смысле политическими документами. Это повышает требования, как к качеству самих отчетов, так и к квалификации людей, проводящих оценку. "Политизированность" программ зачастую создает большие проблемы с вынесением независимых объективных суждений. Необходимо учитывать наметившиеся в последние годы в Российской Федерации следующие тенденции в развитии оценки программ: оценке уделяется все возрастающее внимание во всем мире, в том числе ведущими международными организациями и агентствами (особенно в последние 5-6 лет); увеличение количества специалистов, занимающихся оценкой; активный процесс создания национальных и региональных профессиональных объединений (более 30 за последние 5 лет), в СНГ в 2000 году создана Международная Сеть "Оценка Программ"; развитие международного сотрудничества, создание международных организаций в сфере оценки; разработка и использование стандартов и принципов проведения оценки (в том числе, с учетом национальных и культурных особенностей); встраивание систем мониторинга и оценки в программы и проекты на стадии разработки; дифференциация различных подходов к оценке ("школ") и разработка соответствующих методов и инструментов; активное развитие методологии "оценки с участием" и ее широкое использование, в частности, при оценке программ в сельской местности и программ по развитию местных сообществ; ориентация оценки на практическое использование. |