Все записи автора Редакция

Призыв к действию. Совершенствование практики оценки для решения глобальных проблем: призыв к действиям и размышлениям

Данная работа входит в сборник рекомендаций под названием «Призыв к действию», подготовленный FEAN и касающийся тех сфер, которые больше всего нуждаются в изменениях.

Глобализация – неизбежный феномен сегодняшнего дня, оказывающий существенное влияние на все сферы нашей жизни, в том числе и на социальный сектор, и мы должны воспользоваться присущими ей, уникальными возможностями и научиться бороться с вызовами, которые она несет.

      Авторы данной работы считают, что совместная работа фондов и оценщиков будет способствовать глобальным преобразованиям, необходимым для решения наиболее насущных мировых проблем. Рекомендации, изложенные в этом документе, представляют собой «отправную точку» для дальнейших размышлений и действий. Статья исследует, как фонды и оценщики могут развивать устойчивую, инклюзивную экосистему оценки для глобальной трансформации ОГТ (англ. EGT), необходимую для создания путей, с помощью которых фонды и оценщики могут стимулировать новаторское мышление и предпринимать скоординированные действия с другими стейкхолдерами в целях поддержки глобальных преобразований. Авторы анализируют текущее состояние ОГТ и ресурсы, которые потребуются для продвижения глобальных преобразований,  начиная с определения понятия глобальной трансформации и ее значимости и затем излагая тенденции глобального развития и усиливающейся роли, которую филантропия играет в этой сфере.

     Благотворительный сектор обладает широкими возможностями для развития инноваций и партнерства, необходимого для ускорения глобальных преобразований. Однако авторы статьи считают, что экосистема ОГТ находится на ранней стадии развития, и для эффективного воздействия ей не хватает инфраструктуры. Работая сообща, фонды и оценщики могут изменить сложившуюся ситуацию. В статье изложено несколько потенциальных преимуществ ОГТ, их текущее состояние и рекомендации по развитию, которые фонды и специалисты по оценке могут использовать в своей деятельности.

  • Чувство общности
  • Трансформационное лидерство и взаимодействие участников
  • Финансирование и поддержка
  • База знаний
  • Практические кейсы

Хизер Бритт, Клэр Нола. [FEAN Call to Action Series. Advancing Evaluation Practice to Meet Global Challenges: A Call to Action and Reflection. Heather Britt, Clare Nola] FEAN (Funder & Evaluator Affinity Network). 2020.

Возможности управлять доказательствами для практикующих специалистов: создание нового поколения доказательств

Авторы данной статьи предполагают, что спрос на эффективные социальные программы, нацеленные на решение насущных проблем, значительно превышает предложение,

и этот факт обусловлен тем, что пользователи и фонды не располагают достаточно достоверными и надежными доказательствами результативности программ. Именно по этой причине необходимо разработать новое поколение доказательств, которые будут способствовать более широкому и эффективному внедрению социальных практик.

Оценка является инструментом для разработки всеобъемлющих доказательств, и лидеры НКО должны использовать результаты оценки в качестве компонента своего стратегического планирования. Чтобы раскрыть потенциал оценки в полной мере, руководителям НКО следует использовать полученные данные для принятия решений и улучшения своих программ.

Согласно концепции новых доказательств, оценщики и исследователи должны не только выступать в качестве аудиторов программы, но и играть ключевую роль в реализации и адаптации социальных практик. Кроме этого, статья указывает на необходимость повышения тщательности исследования и выявления доказательств эффективности программы.

В заключение авторы отмечают, что постепенно современная социально ориентированная практика переходит к новому поколению доказательств, и основополагающую роль в этом процессе играет именно повышение роли оценщиков.

Дженнифер Брукс, Бет Боулай, Ребекка Мейнард. [Empowering Practitioners to Drive the Evidence Train: Building the Next Generation of Evidence. Jennifer Brooks, Beth Boulay, Rebecca Maynard.] Project Evident. 27, март, 2019.

Четыре принципа, позволяющих использовать продвинутую аналитику для работы с детьми и семьями

Достижения в области компьютерной обработки данных расширяют спектр доступных возможностей и оказывают значительное влияние практически на все сферы нашей жизни.

В данной работе представлена практика использования фондом Annie E. Casey продвинутой аналитики для реализации социальных программ. Помимо этого, документ содержит набор принципов, которые помогают понять различие между полезным, приемлемым и нежелательным применением новых инструментов. Среди этих принципов можно отметить:

  • Расширение возможностей. Продвинутая аналитика должна применяться в целях обеспечения больших возможностей для детей и семей, а не просто постепенно улучшать статус-кво.
  • Обеспечение транспарентности. Компании, которые оказываювают услуги, имеющие фундаментально важное значение для благосостояния семей и сообществ, обязаны предоставлять публичные доказательства касательно использования и последствий их аналитики в процессе принятия решений.
  • Расширение полномочий сообществ. Инструменты обработки данных должны дать сообществам возможность привлекать общественные системы к ответственности за их деятельность.
  • Содействие справедливым результатам. Новые инструменты должны использоваться для активного продвижения более справедливых результатов для исторически неблагополучных групп.

Все вышеуказанные принципы были разработаны при участии научных работников, правозащитных групп, общественных лидеров и семейных адвокатов. Пандемия COVID-19 выявила неравенство во многих публичных системах, и теперь организации, работающие с семьями и затронутыми сообществами, должны найти более эффективные подходы к конструктивному использованию новых технологий для повышения благосостояния общества.

[Four principles to make advanced data analytics work for children and families.] The Annie E. Casey Foundation. Baltimore, Maryland. 2020.

Призыв к действию. Вместе лучше: Как сотрудничество между оценщиками может укрепить благотворительность и повысить уровень коллективных знаний

Данная работа входит в сборник рекомендаций под названием «Призыв к действию», подготовленный FEAN и касающийся тех сфер, которые больше всего нуждаются в изменениях.

Авторы этой статьи считают, что партнерские отношения между оценочными фирмами имеют много преимуществ для фондов и оценщиков, включая повышение качества оценки, большую справедливость для всех заинтересованных сторон и усиление потенциала для обучения.

В данной работе вы можете найти ключевые причины для установления таких партнерских отношений, а также новые передовые методы создания и поддержания успешных партнерских отношений; прочитать о, препятствиях меша ющих налаживать партнерские отношения, и некоторые практические стратегии по борьбе с этим препятствиями.

К причинам создания партнерств авторы относят такие выгоды для оценщиков, как усиление конкурентных преимуществ, эффективность человеческого капитала профессиональное развитие для команды и другие, и преимущества для фондов, в частности, более широкий доступ к разнообразным техникам и знаниям и диверсификация команд.

Однако существуют и определенные барьеры на пути создания партнёрств. Фонды зачастую не располагают достаточным количеством времени и объемом знаний для грамотного выбора партнёра, а оценщики сталкиваются с противодействием фондов и некоторыми трудностями в поиске партнёров.

Для преодоления всех вышеуказанных барьеров необходимо создать благоприятный климат для развития партнёрств, основой которого могут стать неформальные встречи или конференции с заинтересованными сторонами, а также обновленные рабочие политики и процедуры, способствующие продвижению партнёрств.

Кендалл Гатри, Рэйчел Мошер-Уильямс, Ивонн Беланжер. [FEAN Call to Action Series. Better Together: How Evaluator Collaborations Can Strengthen Philanthropy and Increase Collective Knowledge. Kendall Guthrie, Yvonne Belanger, Rachel Mosher-Williams.] FEAN (Funder & Evaluator Affinity Network). 2020.

Фреймворк для эффективной оценки собрания/конференции

Собрания и другие профессиональные встречи считаются важным элементом в филантропическом секторе,

и в связи с этим авторы статьи поднимают вопрос соответствия издержек, понесенных на организацию, и полезности и эффективности самого мероприятия как инструмента развития сотрудничества, повышения осведомлённ ости и содействия социальным изменениям.

Под собранием подразумевается некоторое «пространство» для различных групп заинтересованных сторон, которые стремятся повлиять на будущий коллектив и индивидуальные действия, ориентированные на конкретные действия в какой-либо сфере. Данный документ представляет собой базу для более продуманного, стратегического и систематического планирования оценки собраний. Фреймворк состоит из трех частей:

  1. Условия, предшествующие собранию. В этот раздел авторы включают причины проведения собрания и ресурсы, доступные для будущего мероприятия.
  2. Непосредственно проведение собрания, то есть используемые ресурсы и материалы и показатели качества мероприятия. К последней категории относятся такие индикаторы, как уровень вовлеченности, уровень удовлетворенности, субъективное соответствие ожиданиям и приверженность правильным практикам.
  3. Результаты собрания, в частности, установка и налаживание контактов, актуальность и значимость мероприятия, а также наличие практических достижений.

      Для проведения грамотной и эффективной оценки собрания каждый раздел фреймворка необходимо поэтапно и всесторонне прорабатывать.

Джаред Рейнор, Иджеома Эцеофор. [A Framework for the Effective Evaluation of Convening. Jared Raynor, Ijeoma Ezeofor.] TCC Group. США.

Измерение стоимости и ценности результатов

Некоммерческие организации в большинстве своем пока не научились доказывать то, что они добиваются изменений, большинство из них отчитываются о том, чем занимаются.

Компания Oracle Netsuite изучила опыт и мнения руководителей 353 некоммерческих организаций и выяснила, в частности, следующие препятствия:

  • Дефицит определений. Основные проблемы, на решение которых направлена деятельность, реальные программы вмешательства, ожидаемые результаты и искомые изменения недостаточно четко определены, чтобы измеряться. 
  • Недостаточная четкая формулировка программных результатов, связанных с вкладываемыми ресурсами. Расходование ресурсов, таких как время, люди и деньги, не привязаны к результатам. 

Программные и финансовые сотрудники существуют в двух «параллельных мирах». НКО подчиняются требования регулятора и должны относить любое пожертвование на указанную жертвователем цель (ограничение), либо на административный, фандрайзинговый или программный расход. Эти два принципа финансового учета имеют фундаментальные и далеко идущие последствия для сектора, вызывающие цепную реакцию. Все расходы, которые несет НКО, она несет для того, чтобы успешно реализовать программу (за исключением очевидных случаев мошенничества). Но точно подсчитать стоимость единицы социального результата при таком подходе невозможно.

Чтобы найти решение создавшимся проблемам, все больше грантодателей, руководителей НКО, контролирующих агентств и технологических организаций объединяют усилия по поиску и созданию новых инфраструктурных решений: технологий, моделей финансирования, инструментов измерения, IT-сервисов и так далее. 

Следующие тренды станут важной вехой в развитии будущих поколений технологий:

  1. Проследить расходы до результатов. Потенциальные доноры получат данные по финансовым, программным и фандрайзинговым функциям организаций, позволяющие оценить риски и преимущества, связанные с финансированием той или иной организации. Измерение выполнения миссии возможно благодаря интеграции этих трех функциональных данных. Будут созданы унифицированные базы данных и разработаны модели данных, позволяющие связывать доллары и программные результаты.
  2. Содействие полной прозрачности расходов НКО и доноров. Организации, специализирующиеся также на организационном развитии НКО, объединяются с донорами, создают системы  и стандарты прозрачности, позволяющие получать полную информацию о полной стоимости социальных программ. НКО должны будут обновить метод оценки инфраструктурных расходов,  доноры будут располагать полным учетом расходов, НКО будут обеспечены полной операционной поддержкой, необходимой для реализации миссии. Будет разработана новая, более дифференцированная метрика для измерения эффективности и расширения программ.
  3. Экосистема  технологий, доноров, НКО и благополучателей. Цифровые реалии (смартфоны, облачные платформы, онлайн платежи, социальные медиа и видео-стриминг) изменили мир, в котором доноры, благополучатели программ, НКО и технологические компании образуют единую экосистему и добиваются беспрецедентных, позитивных социальных изменений.  Мир движется в сторону социального сотрудничества, риторика меняется с критики очевидных недостатков НКО на изменение их деятельности для достижения результатов.

Однако НКО должны не просто ждать этого прекрасного будущего, но и активно развивать оценочные компетенции и культуру у себя.  Продвижение идей измерения результатов в организации зависит от занимаемой должности.

Менеджер программ: продвижение принципов оценки в организации.

Сотрудники финансовых подразделении с большой вероятностью не знакомы с логическими моделями программ – графическом выражении связей между программной деятельностью и ожидаемыми изменениями, они сфокусированы на цифрах. Логические модели или «теории изменений» помогают стейкхолдерам (донорам, правлениям, сотрудникам программ и исполнительным директорам) убедиться в том, есть ли какая-то логика в программной деятельности НКО. Модели вносят ясность в понимание миссии и деятельности организации. Необходимо использовать этот инструмент для продвижения оценки.

Финансовый менеджер: пересмотр структуры данных по финансовым транзакциям

Для установления связей между программной деятельностью и транзакциями по доходам и расходам необходима соответствующая структура данных – система, которая маркирует необходимые измерения по каждой статье: вид дохода (пожертвование, заявка, оплата за оказанные услуги), наличие ограничения цели со стороны жертвователя (есть/нет) и фонд/программа.

Показатели эффективности (KPI) результатов некоммерческой деятельности основаны на агрегированных транзакциях с использованием источника (тип дохода, ограничение) и распределение фондов (фонд/программа). Эти измерения (или сегменты, или тэги) лежат в основе современной структуры учета.  Для измерения результатов это очень важно, так как агрегация измерений транзакций по доходам и расходам позволяет визуализировать устойчивость программ и финансовую прозрачность отчетов.

Руководитель организации: дальний горизонт

После того, как НКО разовьет навык формулирования программных и финансовых результатов, на следующем этапе она учится соотносить реализацию программной деятельности и финансовых данных. Для этого НКО нужна инфраструктура. Понять, какая именно архитектура данных на нужна НКО для будущего программного и финансового технологического обеспечения, могут программисты/IT-технологи.

Источник: Solutionscenter

Данные для описания социального воздействия

Институт социальных исследований и действий графства Канаваха (Kanawaha Institute for Social Research & Action, KISRA), НКО, располагается в штате Западная Вирджиния, США.

Предоставляет возможности трудоустройства, обучения и другие услуги детям и семьям.

Сначала организация собирала данные, особо не задумываясь, зачем она это делает, просто копируя методы других НКО. Но как-то журналистка задала неожиданный вопрос о том, как организация описывает ценность своих программ; что будет, если вычеркнуть KISRA из жизни местного сообщества?

Carl Chadband, руководитель организации, мог рассуждать на тот момент только в терминах индикаторов для трудоустройства, о почасовой оплате, присутствии и т.д., но не задумывался о том, как рассказать о той ценности, которую создает организация. С этого момента организация начала анализировать информацию и фиксировать показатели.

Развитие подхода началось с изучения данных переписи населения. В сравнительных целях и для более точной демонстрации ценности услуг организации использовались различные консервативные цифры по здоровым детям из отчета по штату Западная Вирджиния.

На следующем этапе предстояло понять, какие из данных нужны для разных аудиторий – доноров, жертвователей, других стейкхолдеров, потому что невозможно и бессмысленно сообщать всем аудиториям все имеющиеся данные. Организация отказалась от идеи одного отчета для всех с типичным описанием создаваемой ценности. Было понимание, что нужно адаптировать набор данных для каждой аудитории разных сообщений.

НКО, как правило, вынуждены много о себе рассказывать. Но для того, чтобы собрать эффективные данные, НКО научилась слушать клиентов, которым она оказывает услуги; сообщества, с которыми она работает; доноров – для того, чтобы понять, что они все хотят. С пониманием их мотиваций приходит понимание, хотят ли услышать они точные цифры или эмоциональную историю. Или они хотят поддерживать отношения, или знать о детях, чью жизнь изменила программа; или о семьях, которые НКО хочет укрепить.

Во всех случая это должна быть история, но каждый раз наполненная разными данными. Например, вы хотите раскрыть всю сложность проблемы, связанной с темой осужденных. На протяжении времени вы собираете сведения о переполненности тюрем, об исправительных учреждениях, повторных судимостях, проблеме воспитания детей осужденных, стоимости содержания и прочих сопутствующих расходах и представляется эти данные в одном документе – целый клубок проблем, которые имеют денежное выражение и серьезно обременяют государственный бюджет. Такая подача будет понятна чиновнику, а простого слушателя вдохновят реальные истории, которые  сами становятся аргументами для поддержки.  

Когда организация располагает разными данными о своей деятельности, это придает ей большей уверенности во взаимоотношениях с новыми партнерами, которых можно убедить фактами о результатах деятельности.

Источник: Рhilanthropy

Реальная стоимость

Международный комитет спасения (The International Rescue Committee) oснован группой интеллектуалов под предводительством Альберта Эйнштейна в 1933г. для оказания помощи евреям, спасавшимся из нацистской Германии.

Штаб-квартира – Нью-Йорк, США. Бюджет организации в прошлом году составил $744 млн. В IRC работают 13 тыс человек. В 2013 году, когда David Miliband возглавил организацию, ее доход составлял $456 млн. В 2018 году — $744 млн. Основной источник дохода – государственные контракты, доля вложений от компаний, фондов и частных лиц уверенно растет. В прошлом году Комитет занял 67-ое место в рейтинге Chronicles 100 благотворительных организаций,  привлекших наибольшие частные пожертвования.

David Miliband, сын беженцев во время Второй мировой войны, известный марксистский социолог, получил образование в Оксфорде и MIT, в молодости был многообещающим политиком, членом Лейбористской партии, служил одним из первых советников Премьер-Министра Тони Блэра в качеств министра экологии и министра иностранных дел.

Комитет оказывает помощь десяткам миллионов беженцев во всем мире. Доставляет воду и пропитание в Йемен, переживающий худший гуманитарный кризис во всем мире. Содержит больницы в Сирии, школы для детей народа Рохинджа в Бангладеш, раздает наличность без дальнейших обязательств беженцам из Венесуэлы в Колумбии. Предоставляет психологические консультации и юридическую поддержку жертвам, пережившим сексуальное насилие в Демократической республике Конго, где царят военный конфликт, экономический коллапс и эбола. Тем счастливчикам, которым удалось добраться до США, IRC оказывает услуги по адаптации, включая временное жилище, уроки английского, подготовка к трудоустройству и займы для малого бизнеса.

Но насколько в действительности значима эта масштабная и разносторонняя работа, которую выполняет Комитет? Каким образом организация, работающая зачастую в условиях чрезвычайной обстановки, может реально оценить, ведет ли ее деятельность к каким-либо изменениям? В мире порядка 68 млн человек, которым требуется срочная помощь – гуманитарным организациям крайне необходимо становиться результативными и эффективными. Однако гуманитарные организации разрозненны и редко оперируют доказанными практиками.

David Miliband, исполнительный директор IRC, считает, что эффективной системы оказания помощи беженцам и перемещенным лицам в данный момент не существует. Систему гуманитарной помощи следует реформировать, она должна стать более результативной и экономически оправданной.

В разделе «влияние» или «результаты» на сайтах большинства гуманитарных организаций можно найти либо истории людей, которым помогли, либо цифры, которые особенно ничего не сообщают (даже если это «миллионы детей в нашей программе оздоровления»). НКО редко сообщают о реальном изменениях. Детей лечили, но стали ли они здоровее? Школы построены, но учатся ли дети? И, немаловажно, во сколько обошлись эти программы? Ответов чаще всего нет.

Очень мало гуманитарных программ прошли строгую оценку – их цифра теряется на фоне тысяч оценок глобального здравоохранения и программ по борьбе с бедностью, которые проводят в стабильных странах. За отсутствием надежных данных, мир гуманитарной помощи оперирует допущениями, опытом и интуицией вместо результатами исследований, фактами и свидетельствами. Начать менять существующее положение дел означает, отказаться от подсчета непосредственных результатов и перейти к отслеживанию согласованных результатов – от количества распределенных учебников к как изменилось благополучие или обучение? И далее – нужно понять, как добиться этих результатов наиболее экономичным образом.

Типичная картина для лагеря беженцев: караван грузовиков с мешками еды, одеялами, одеждой, палатками, водой. Многие исследование говорят о том, что есть способ помощи лучше: раздать беженцам наличные деньги. Если это сделать правильно, помощь доходит до беженцев быстрее, и она эффективнее, чем натуральная помощь. Эти деньги еще и вклад в местную экономику, это делает беженцев более привлекательными для принимающей стороны.

Первое исследование, сравнившее положение беженцев, которым были вручены наличные деньги, с теми, кто их не получил, IRC провел в Ливане в 2014 году- результаты были удивительными. Тех, кто получил наличность, отказались от детского труда, их дети стали посещать школу, доллары простимулировали местную экономику.

Как часть пятилетней стратегии, Miliband обещал, что к 2020 году программы IRC либо начнут оперировать доказательствами, либо уже будут привычно собирать данные о работающих практиках. Комитет близок к намеченной цели.

Первым в мире Комитет провел рандомизированное контролируемое исследование программ родительства и социально-эмоционального обучения в пост-конфликтных зонах и с беженцами. Список примеров можно продолжить, но основное – наличие массы данных и свидетельств привлекает больше доноров.

Комитет также пообещал улучшить учет расходов, но на деле оказалось сложной задачей. Организация разработала инструмент, позволяющий подсчитать стоимость программы для клиента, он используется сегодня в 12 странах присутствия. Предполагается, что в случае, если эта стоимость превысит $100 на одного клиента, в предложении будет обоснование высокой стоимости (текущая медиана — $46, 30% текущих проектов превышает порог $100 на одного клиента).  Ведется работа по разработке более осмысленного метода подсчета стоимости услуги, оказываемой одному клиенту. Все данные будут публиковаться и предоставляться донорам, это в русле существующей общей практики глобальных НКО.

Под руководством David Milliband Комитет продолжает аналитическую и исследовательскую работу, накапливая лучшие, доказанные практики в сфере образования, здоровья и безопасности, которые можно будет адаптировать; находится в поиске снижения стоимости программ, чтобы помочь большему числу людей. Эти знания Комитет использует для убеждения доноров и бюрократов, привлечения средств и создания институциональных синергии. 

Исследования, которые проводит Комитет импонируют многим — правительству США, европейских агентствам, ООН. Правительственная гуманитарная помощь редко оперирует свидетельствами доказанного влияния: доноры много говорят о необходимости оценки на основе доказательств, но они редко их требуют на самом деле. 

Бизнес и фонды увеличили размеры своей поддержки Комитета. Доля поддержки со стороны частного сектора увеличилась с 15% в 2014 до 32%.

Источник: Рhilanthropy

Калькулятор эффекта для доноров

GiveWell – НКО, верифицирующая некоммерческие организации на основе проведенного анализа

и публикующая о них результаты этого анализа в помощь потенциальным донорам, которые ищут организации для поддержки.

Основная цель оценки НКО для GiveWell – определить пользу, которую приносит ее деятельность (спасенные жизни, улучшенные жизни и т. д.) относительно вложенных пожертвований. Организация работает с небольшим числом проверенных благотворительных организаций, которые были отобраны по критериям GiveWell и которых можно рекомендовать как высокоэффективные.

Ежегодно GiveWell публикует краткий список организаций, рекомендованных для поддержки. GiveWell также рекомендует  инкубационные гранты для поддержки новых сильных организаций;  для создания базы доказательной практики для новых организаций и улучшения мониторинга и оценки существующих организаций.

НКО должны соответствовать жестким требованиям, если хотят попасть в список топ НКО платформы GiveWell, которая постоянно ведет серьезную аналитическую работу, чтобы доноры получали надежную информацию и могли выбрать достойную НКО для пожертвования. Этот анализ, исследовательская работа продолжается и после включения НКО в список топовых НКО. Данные все время обновляются, как и оценка эффективности расходования средств. Обновление необходимо, так как жертвователи могут поддержать проекты в любое время на протяжении года, и финансирование направляется НКО на протяжении всего времени.

Очень интересен калькулятор эффекта для доноров, который основан на  строгой оценке стоимости единицы социального результата для 9-ти программ.

Доноры также могут внести пожертвование в  Maximum Impact Fund, средства которого распределяются по усмотрению GiveWell среди отобранных НКО раз в квартал. Во внимание принимаются планы расходов НКО и оценка их социально-экономической эффективности.

Источник: Givewell