Архив метки: реферативный обзор

Опубликован Реферативный обзор материалов «Фандрайзинг и оценка социальных программ. Международный опыт.»

Опубликован Реферативный обзор материалов «Фандрайзинг и оценка социальных программ. Международный опыт». Обзор можно прочитать по ссылке.

Читать статьи на сайте.

Формируем успешное партнёрство: когда доноры, оценщики и посредники работают вместе

При работе с изменением сложных систем доноры часто обращаются за помощью к посредникам и оценщикам, и в данной публикации рассматривается, каким образом можно наладить такое партнерство.

Для начала необходимо определить наиболее распространенные точки преткновения, возникающие в процессе сотрудничества между донорами, посредниками и оценщиками, а затем найти способ их преодолеть. Проблема №1 – кто главный? Конкретного ответа – нет. Чтобы выстроить грамотное сотрудничество, все партнеры должны заранее обсудить, кто выступает в качестве руководителя и определяет поток ресурсов. Проблема №2 – определение ролей. Очень важно чётко распределять рабочие обязанности и постоянно их корректировать по мере продвижения работы. Проблема №3 – доверие. Тут помогут дискуссии на ранних этапах взаимодействия, в ходе которых партнёры могут обсудить свой опыт и ожидания. Таким образом база для совместной работы будет заложена сразу, что поможет избежать дальнейших трудностей. Проблема №4 – способы взаимодействия. В общении тоже нужно планирование и посредничество, и назначение сотрудника, ответственного за организацию и проведение встреч, в значительной степени поспособствует успеху проекта. Проблема №5 – ожидание изменений. В подобной деятельности необходимо ставить реалистичные цели и ожидать реалистичных результатов. Если партнёры будут избегать завышенных ожиданий, они смогут создать более доверительные отношения, скорректировать целевые показатели для большей результативности, эффективно использовать стратегические преимущества возникающий возможностей и в итоге добиться желаемого результата работы.

Для наглядности авторы приводят три случая трехстороннего партнёрства, на примере которых анализируют применение вышеупомянутых стратегий для разрешения распространённых противоречий в контексте разных конфигураций среди партнеров.

Источник: [Weaving Successful Partnerships: When Funders, Evaluators, and Intermediaries Work Together]. Engage R+D, Equal Measure, and Harder+Company Community Research.

Принципы и методы оценки: руководство для оценки в фонде Уильяма и Флоры Хьюлетт

Фонд  Уильяма и Флоры Хьюлетт активно применяет оценку во всех своих программах, и авторы данной публикации описывают основные принципы и методы ее применения в рамках фонда.

Статья состоит из трех частей: а) Принципы, б) Роли и Обязанности, и в) Практическое руководство.

В своей работе, культуре и практике предоставления грантов фонд стремится к продвижению идей многообразия, справедливости и инклюзивности. Фонд привержен таким практикам, как открытость, транспарентность и обучение. На этих установках базируются 7 принципов, которыми фонд руководствуется при проведении оценки:

  1. Оценка предпринимается с определенной целью, учитывая будущие потребности;
  2. Оценка неразрывно связана с обучением;
  3. Оценка – неотъемлемая часть стратегического планирования деятельности фонда;
  4. Так как оценить абсолютно все аспекты не получится, необходим грамотный выбор объектов оценки;
  5. Метод измерения не должен ограничивать полезность оценки, поэтому предпочтение отдается нескольким методам и источникам данных;
  6. Фонд делится результатами оценки как с заинтересованными лицами, так и с широкой общественностью;
  7. Фонд регулярно использует результаты оценки для совершенствования своей деятельности.

Во втором разделе материала  авторы подробно описывают обязанности всех участников оценки: программных менеджеров, грантополучателей,  внутренних консультантов, сотрудников других депаратментов и др.

Третий раздел представляет собой практическое руководство, состоящее из трех частей: а) планирование, б) реализация и в) практическое применение результатов оценки.

В целом, статья будет полезна оценщикам  и представителям фондов для совершенствования своих собственных практик.

Источник: Фэй Тверски, Эми Арбретон, Прити Трайв. [Evaluation Principles and Practices: A Guide to Evaluation at the William and Flora Hewlett Foundation. Fay Twersky, Amy Arbreton, Prithi Trive]. William and Flora Hewlett Foundation. Март 2019.

Практика Мониторинга, оценки и обучения (MEL) в Фонде Дэвида и Люсиль Паккард: оценка для содействия переходу от хорошего к отличному

По заказу Фонда Дэвида и Люсиль Паккард ORS Impact подготовила отчет, в котором содержится анализ результатов применения принципов и практик MEL – мониторинга, оценки и обучения – в этой отдельно взятой организации, чтобы раскрыть

сильные и слабые стороны и заложить основу для будущих преобразований. Публикация будет полезна тем, кто хочет понять, как наиболее эффективно поддерживать MEL в благотворительных организациях.

Анализ MEL проводится на базе таких показателей, как отношение и опыт сотрудников, применение  этих трех процессов  и организационные факторы, напрямую влияющие на MEL. Для наглядности  мониторинг, оценка и обучение рассматриваются с трех позиций:

  1. Что ожидается от применения данной практики?
  2. Что получается у Фонда лучше всего, то есть каковы сильные стороны?
  3. Что можно предложить для усовершенствования?

В результате работы были сделаны выводы, что, в целом, практика MEL в Фонде Дэвида и Люсиль Паккард находится на хорошем уровне: 1) Сотрудники дают высокую оценку принципам и структуре MEL и качеству поддержки, получаемой от команды E&L; 2) Получатели грантов отмечают гибкий подход Фонда; 3) Сотрудники сообщили, что практики MEL оказывают значительное влияние на их стратегии; 4) Партнеры MEL считают, что Фонд превосходит своих коллег по уровню проработанности и организации практик MEL; 5) Предложения по усовершенствованию рассматриваются лишь как финальный штрих. Однако Фонду есть куда расти. В целях усовершенствования MEL предлагается развивать компетенции сотрудников и получателей грантов, совершенствовать возможности для систематического обучения и механизм связи между различными компонентами MEL. 

Источник: [MEL Practice at the David and Lucile Packard Foundation: Evaluation in Support of Moving from Good to Great] David and Lucile Packard Foundation (США), ORS Impact (США). 2017.

Оценка изменений нарратива общественного дискурса

Нарратив (Повествование, общественный дискурс)  – важнейший инструмент работы по обеспечению социальной справедливости.

Меняя коммуникационную повестку, организации могут менять общественное мнение и привлекать внимание к разным насущным проблемам, тем самым придавая импульс социальным изменениям. Данное руководство предназначено помочь исследователям в определении основных результатов и показателей, касающихся разных аспектов изменения коммуникационной повестки, и оценить уже существующие инструменты, рамки и ресурсы измерения этих результатов. 

Статья базируется на разработанном Narrative Initiative «подходе четырех корзин», который выделяет ключевые возможности, необходимые для изменения коммуникативной повестки.

  1. Сотворение – создание новой коммуникационной повестки.
  2. Трансляция – распространение повестки среди широкой аудитории.
  3. Внедрение – продвижение повестки в массы через различные мероприятия.
  4. Наблюдение – анализ степени принятия повестки и на этой основе совершенствование стратегий внедрения. 

Руководство состоит из 3 частей: вопросы для размышления, продвижение повестки и наблюдение за повесткой. Последние две категории особенно важны для оценки, так как содержат анализ результатов продвижения и наблюдения. В первой части приводится ряд стратегических и методологических вопросов, необходимых для любой оценки. Вторая категория затрагивает результаты внедрения повестки, в том числе организационные возможности, партнерство и сотрудничество и охват. В третьем отделе рассматриваются показатели последующего наблюдения за повесткой, включая отношение СМИ, воздействие на отдельные сегменты общества и системные изменения в долгосрочной перспективе.

Цель данного руководства – создать основу для определения потенциальных результатов изменения коммуникационной повестки, а также предоставить ресурсы, которые могли бы быть помочь тем, кто занимается коммуникационной повесткой, выбрать показатели и подходы, наиболее подходящие для их работы.

Источник: [Measuring Narrative Change]. ORS Impact. Июль 2019.

Краткое руководство для измерения одиночества

В октябре 2018 правительство Великобритании обнародовало стратегию борьбы с одиночеством, выделив целевое финансирование для программ по укреплению социальных связей и облегчению одиночества в местных сообществах.

В рамках этой стратегии ОНС (Национальный центр статистики) разработал ряд рекомендаций, которые будут полезны для измерения одиночества. Данное руководство должно помочь заинтересованным организациям правильно использовать в оценке результаты исследования УНС.

Для облегчения одиночества, в первую очередь, необходимо разобраться, почему люди начинают чувствовать себя одиноко. Понимание причины возникновения этого чувства поможет направить усилия так, чтобы они имели наибольшее воздействие. Чтобы измерить одиночество, авторы данного руководства предлагают задать 4 вопроса, выявленных УНС в процессе исследований, – 3 косвенных вопроса и 1 прямой.

  1. Как часто вы чувствуете, что вам не хватает дружеского общения?
  2. Как часто вы чувствуете себя покинутым?
  3. Как часто вы чувствуете себя изолированным от общества?
  4. Как часто вы чувствуете себя одиноким?

Эти вопросы можно использовать не только при измерении одиночества, но и для оценки других аспектов жизни, в том числе для определения субъективного чувства благополучия или чувства принадлежности и доверия. Нельзя забывать, что для некоторых людей одиночество – неприятная тема для обсуждения, поэтому исследователи должны быть хорошо подготовлены к проведению подобных дискуссий.

Источник: [A Brief Guide to Measuring Loneliness.] Community Fund, WhatWorksWB (Великобритания). Февраль 2019.

Теория изменений в 10 шагах

Теория изменений применима ко всем сферам нашей жизни, в особенности, когда речь заходит о достижении каких-либо целей; побуждает нас задуматься о наших планах и задачах и претворить их в жизнь.

В NPC верят, что теория изменений – это основа благотворительности, взаимодействия и оценки. 10 шагов, изложенных в данной статье, должны послужить практическим руководством, которое поможет фондам качественно продумывать свою работу и предоставлять наилучшие услуги.

Теория изменений представляет собой структурированный и систематизированный подход к работе, которому необходимо четко следовать.

  1. проанализировать ситуацию. Анализ должен включать три этапа: определение «проблемы», обсуждение «проблемы» и поиск возможных решений;
  2. определить целевые группы;
  3. подумать о социальном воздействии. Вам следует обдумать, каких именно изменений ждете в долгосрочной перспективе;
  4. продумать промежуточные результаты и какой вклад они могут внести в достижение конечой цели;
  5. наметить план деятельности;
  6. определить механизмы воздействия практики. Вам необходимо настроить механизмы работы таким образом, чтобы они соответствовали ожидаемым результатом;
  7. определить последовательность достижения разных результатов;
  8. нарисовать диаграмму теории изменений;
  9. определить факторы успеха и круг заинтересованных лиц;
  10. сформулировать предположения.

Теория изменений – это именно то, что необходимо фондам для более эффективной реализации своих проектов.

Источник: Джеймс Нобл. [Theory of change in ten steps. James Noble]. Октябрь 2019.

Измеряем социальный эффект качественно

Данная публикация будет полезна специалистам, практикующим проведение оценки эффективности и социального эффекта.

В статье предлагаются конкретные стратегии и рекомендации по вышеобозначенным темам. Исследование предполагало выполнение 2х основных задач:

1)  Изучить, как в оценке применяются качественные методы исследований и как используется соответствующая терминология в отчетности оценщиков.

2)  Подготовить рекомендации для оценщиков, которые могут быть использованы для совершенствования качественных методов в оценке эффективности и социального эффекта.

Исследование базируется на анализе 32 оценочных докладов по ВИЧ/СПИДу, которые были профинансированы за счет USAID. Основные сделанные выводы касались:

1.1. Смешанные методы оценки – это отдельный самостоятельный подход.

1.2. Дизайн оценки как часть методологии заслуживает отдельного внимания; дизайн оценки не следует путать с набором активностей

1.3. Следует гармонизировать и очень четко обозначать, как предлагаемый подход к оценке учитывает все внешние и внутренние контексты.

Материал содержит ключевые рекомендации:

1)  Обеспечить, чтобы использование качественных методов было более продуманным, и уделять больше внимания деталям, пояснительному тексту и транспарентности.

2)  Обеспечить, чтобы оценка учитывала гендерные аспекты надлежащим образом. 

Источник: Сьюзан Петрзайк [Measuring Impact Qualitatively. Susan Pietrzyk] USAID, PEPFAR, MEASURE Evaluation (США).

Оценка больших изменений: преодолевая препятствия, стоящие перед обучением и оценкой, для продвижения системных изменений в местных сообществах

Фонды, инвестирующие в системные изменения в местных сообществах, часто оказываются неспособны расставить приоритеты между вопросами оценки на местном и кросс-секторальном уровнях при разработке своих инициатив,

в результате чего большинству оценок подобных инвестиций не хватает четких выводов, которые могли бы оказаться полезными. Публикация исследует, как коллективное обучение может помочь в решении этой проблемы и с какими трудностями сталкиваются фонды при оценивании системных изменений в местных сообществах. Выделяются три категории сложностей и к каждой приводятся причины и способы борьбы:

1)  Извлечение уроков из прошедших инициатив системного изменения в сообществе  

2)  Планирование и реализация оценки для формирования и использования знаний в дальнейшем

3)  Формирование базы знаний для всего сообщества

В основе данной статьи лежит непрекращающийся обмен знаниями между несколькими фондами, которые составили рекомендации для доноров и оценщиков по вопросам системных изменений в сообществах. Кроме этого, в данной статье делается акцент на вовлечение сообществ в процесс создания и использования местных знаний. Авторы отмечают, с каким трудом они смогли обеспечить, чтобы их оценки были способны предоставить полезные для будущей работы знания, именно поэтому данная статья сфокусирована на стратегиях, с помощью которых можно фиксировать, анализировать, распространять и использовать важные уроки. Качественное увеличение внимания и поддержки к этим урокам и связывание их с существующими знаниями для создания и продвижения между участниками системных изменений в местных сообществах – это главное решение всех трудностей.

Источник: Томас Келли, Пруденс Браун, Хан Цао Ю, Мари Коломбо. [Evaluating for the Bigger Picture: Breaking Through the Learning and Evaluation Barriers to Advancing Community Systems-Change Field Knowledge. Thomas Kelly, Prudence Brown, Hanh Cao Yu, Marie Colombo.]. The Foundation Review. Июнь 2019.

Размышления по поводу применения принципов справедливой оценки

В данной публикации основное внимание уделяется понятию справедливой оценки, ее принципам и их реализации.

С одной стороны, статья будет полезна исследователям, которые изучают способы согласования будущих проектов с интересом доноров к продвижению равенства. С другой стороны, статья поможет и донорам, и исследователям углубить свои познания в применении принципов справедливой оценки и оценить возможное влияние ориентированного на обеспечение равенства подхода к исследованию и оценке.

Под справедливой оценкой авторы статьи подразумевают подход, затрагивающий условия и практики, которые в исторической перспективе обесценивали голоса, знания, мнения, потенциал и опыт всех участников оценки и заинтересованных лиц, в особенности цветного населения и других маргинализированных групп. В публикации выделяется ряд потенциальных возможностей интеграции основных принципов справедливой оценки:

1)  Выбор команды специалистов, проводящих оценку. Эффективная команда должна быть не только мультинациональной и составлена с учетом культурных особенностей, но и в идеале включать индивидов, чьи навыки и жизненный опыт существенно различаются.

2)  Разработка оценочных вопросов. Эти вопросы направляют оценку в процессе анализа системных и институциональных особенностей неравенства.  

3)  Разработка дизайна исследования  и способы сбора информации. Чем больше заинтересованных лиц вовлечено в оценку, тем больше возможностей улучшить процесс исследования и тем точнее будет финальный результат.

4)  Разработка протокола, инструмента  исследований,  а также отбор участников в соответствие с принципами равенства и справедливости значительно повысит качество и авторитет результатов работы.

5)  Сбор информации и кодирование. Оценка – это возможность нарастить потенциал участников местных сообществ, чья помочь могла бы пригодиться в совместной оценке.

6)  Разработка, совершенствование и использование результатов. Удачный конечный продукт должен быть актуальным, прозрачным и доступным для всех заинтересованных лиц, а также полезным как для спонсора, так и для местных партнеров.

Источник: Алексис Стэрн, Сара Гукенберг, Ханна Персон, Энтони Петросино. [Reflections on Applying Principles of Equitable Evaluation. Alexis Stern, Sarah Guckenburg, Hannah Persson, Anthony Petrosino.] WestEd Justice & Prevention Research Center. Май 2019.