Архив метки: оценка

Переводы по теме Доказательные практики

Доказательная практика. Новые переводы на сайте

Без названияСталкивались ли вы с Доказательными практиками?  Для российского рынка социальных проектов и наших НКО – это новый вызов и новая область развития. В публикуемых материалах рассматриваются различные подходы, методологии и инструменты, применяемые разными операторами в различных странах мира. Мы подготовили эти материалы совместно с Фондом Елены и Геннадия Тимченко.  Изучение опыта накопленного в мире – это возможность создавать собственные практики и развивать культуру оценки.

Читайте материалы по доказательным практикам на нашем сайте социальных результатов и показателей по ссылке.

GuideStar platinum- Каталог результатов общего характера

Платиновый знак отличия информационно-аналитического агентства GuideStar (США). Каталог результатов общего характера (Common Results Catalog, Guidestar platinum), April 2016).  Выбранные показатели, которыми ваша организация поделится с окружающими, должны показывать, какую информацию вы уже собираете и используете в своей работе. Чтобы направить ваши размышления в конструктивное русло, мы подготовили Каталог результатов общего характера (Common Results Catalog). Он включает все показатели, представленные на сегодняшний день в нашей базе данных (по тематическим направлениям), которые были разработаны в сотрудничестве с экспертными командами.

 

 

 

Новая концепция для измерения социальной эффективности сетей

images (2)Укрепление сотрудничества между филантропическими организациями становится хорошим стимулом для развития сетевой активности. В своем новом документе «Влияние на общество посредством сетей» (Driving Impact Through Networks) профессиональные оценщики британского агентства Aleron и консультанты голландской компании Sinzer, разрабатывающей программное обеспечение для измерения социального эффекта, рассказывают о том, как современные формы взаимодействия между единомышленниками и партнерами помогают создавать для причастных субъектов более значительные ценности и блага. Читать далее

Сбор данных и оценка должны служить интересам фондов и НКО

Без названияВ «Сравнительном анализе оценочной практики фондов» (Benchmarking Foundation Evaluation Practices) эксперты американского Центра эффективной филантропии (CEP — The Center for Effective Philanthropy) говорят о том, что многие грантмейкеры зависят от информации исполнителей проектов – от количественных и качественных сведений, позволяющих формировать представление об услугах, клиентах, численности и потребностях целевых аудиторий, а также от идей и предложений для законодателей и разработчиков социально-экономических программ. Эти данные необходимы для определения целей грантовых программ и корректировки стратегий. Читать далее

Доноры и добровольцы ждут от НКО содержательной коммуникации и прозрачности

Социально ориентированная компания Salesforce.org опубликовала результаты опроса 1 500 взрослых американцев, которые в течение года оказали некоммерческим организациям добровольческую или финансовую помощь. Анализ данных показал, что 90% респондентов желают знать о полезной отдаче от своих вложений. Но при этом более половины доноров (52%) таких сведений не получают. Читать далее

Вдохновляющие истории по оценке. Новый выпуск!

Без названия (1)В рамках реализации программы на средства субсидии КОС г.Москвы, мы подготовили Специальный обзор «Оценка: вдохновляющие истории», февраль, 2017. Читайте истории на сайте или скачайте материал в  PDF.

Поставка актуальных данных «в ритме жизни»: уникальная услуга для работы в динамичном контексте

Без названия (1)Государственные агентства, фонды и другие доноры ежегодно направляют на борьбу с бедностью в развивающихся странах более 135 млрд долларов бюджетных средств и 15 млрд благотворительных ресурсов. Однако профессиональная оценка поддержанных инициатив, соответствующая требованиям научной точности, проводится (как ни странно) очень редко. А если и проводится, то исполнители и заказчики ждут результатов годами. Американское подразделение консалтинговой организации IDinsight (со штаб-квартирой в г. Нью-Дели, Индия) пытается решить эту проблему, предлагая некоммерческому сектору ускоренные и недорогие исследования, которые опираются на достоверные данные и помогают организациям корректировать стратегии и программы в оперативном режиме. «Все наши действия направлены на то, чтобы игроки социального сектора могли принимать решения, будучи осведомленными о том, какие модели или программы работают эффективно, какие оказались неэффективными, и каким образом их можно улучшить», — поясняет Эстер Су Ванг (Esther Hsu Wang), одна из четырех партнеров-учредителей подразделения IDinsight в г. Сан-Франциско (США), созданного в 2011 году на средства анонимного донора (100 000 долларов).

В целом можно сказать, что IDinsight предлагает некоммерческому миру два вида исследований:

  • Оперативный ответ на актуальный вопрос. IDinsight называет данную услугу «оценкой для принятия решения» (DFE — decision-focused evaluation). Она существенно отличается от традиционной практики мониторинга и оценки, решающей задачу подотчетности и демонстрации результатов, а также от научных исследований, которые обычно изучают новые направления и тенденции общего характера. «В отличие от привычных подходов, IDinsight оказывает содействие ‘принятию решений в режиме реального времени’, — так характеризует DFE Рут Левин (Ruth Levine), руководитель глобальной программы развития Фонда Уильяма и Флоры Хьюлетт (The William and Flora Hewlett Foundation). – Поэтому никто не ждет, что такое исследование увенчается публикацией вAmerican Economic Review».
  • Тестирование рынков. Одним из наглядных примеров данной работы является проект в Замбии. Государственные службы сферы здравоохранения решили выяснить, в какой мере «наборы для будущих мам» (распространяемые при условии, что женщины будут рожать детей в больницах и медицинских центрах) помогают увеличивать «показатель родов на базе медицинских учреждений», задержавшийся на отметке 43%. Также, заказчики хотели определить оптимальную цену набора, который женщины сочли бы достаточно привлекательным для выполнения поставленного условия. Команда IDinsight протестировала продукцию стоимостью от 4 до 50 долларов, и выяснила, что в аграрных (самых проблемных) районах страны недорогой набор, включающий всего три наименования — пеленку, подгузник и одеяло, способен улучшить показатель на 44%. По итогам данной работы, Министерство здравоохранения Замбии (The Zambian Ministry of Health) включило данный набор в список жизненно важных продуктов для здоровья.

Следует отметить, что многие НКО сомневаются в том, что актуальная информация и накопление знаний помогают улучшать законодательство и практику. И эти сомнения, к сожалению, не всегда беспочвенны. Более того, в ходе семинара, посвященного применению данных в социальной сфере (г. Лондон), глава британского аналитического агентства «Справочник социальных изменений» (The Directory of Social Change) Дебра Олкок Тайлер (Debra Allcock Tyler) отметила, что НКО затрачивают на подготовку отчетов много времени и сил, но полезной эту информацию не считают. При этом люди порой слишком сильно полагаются на собственный опыт, и не слишком верят в возможности систематического анализа данных. Тем не менее, специалисты IDinsight в содружестве с другими авторитетными экспертами сферы социальных преобразований стремятся переломить ситуацию и постепенно добиваются успеха: спрос на услуги IDinsight возрастает с каждым годом. С момента создания команда организации (объединяющая специалистов в сфере экономики, бизнеса, медицины, государственного / муниципального управления и т.д.) выполнила более 40 оценочных проектов  по заказу таких солидных клиентов как Всемирный банк (World Bank), Детский фонд ООН (Unicef), Фонд Билла и Мелинды Гейтс (The Bill & Melinda Gates Foundation), венчурный фонд (Acumen), Министерство здравоохранения Замбии и т.д. В ходе этих проектов исследователи изучили коррупцию в Индии, состояние онлайн образования в Руанде, особенности малого аграрного бизнеса в Западной Африке, и многие другие актуальные темы.

 Источник: The Chronicle of Philanthropy

Отчетливое представление о социальном результате – ключ к успеху

Без названия (1)Представители государства, инвесторы, филантропы, лидеры некоммерческих организаций и социальных предприятий – все хотят знать, каким образом меняется жизнь людей благодаря реализации общественно значимых инициатив, и настаивают на профессиональной оценке социальных результатов (outcomes). Повышенный интерес к развитию оценочной деятельности объясняется тем, что  НКО зачастую подсчитывают, сколько бездомных людей воспользовались услугами приюта, но не сообщают о том, какой процент клиентов в итоге покинул улицы; фиксируют количество детей, прошедших курс подготовки к школе, но не имеют информации о том, как улучшились навыки воспитанников; трудоустраивают молодежь, но не знают о том, насколько это обстоятельство повлияло на доходы и экономическую безопасность получателей помощи.

Распознать и определить масштабы и параметры изменений бывает непросто, но удачные примеры из практики уже есть. Консультанты американской организации «Капитал Третьего сектора» (The Third Sector Capital Partners) предлагают ознакомиться с опытом инициативы «Партнерство во имя успешной семьи» (PFS — Partnering for Family Success Program; штат Огайо, г. Кливленд), которая стремится к тому, чтобы дети из бездомных семей находились в фостерной системе как можно меньше. Программа, разработанная графством Кайахога и рассчитанная на пять лет, будет обслуживать 135 семей, нуждающихся в жилье и иных видах поддержки. Работу в рамках PFS вызвались финансировать несколько филантропических организаций, которые смогут вернуть вложенные ресурсы (в виде возмещения из бюджета графства) только при одном условии – если программа продемонстрирует четко обозначенные положительные социальные результаты. Для мониторинга, описания, измерения и анализа изменений была разработана специальная методика, основанная на «классических» вопросах, которыми обычно пользуются журналисты в процессе подготовки новостных репортажей:

  • К чему мы стремимся? Постановка цели – важнейшее дело: если формулировка будет туманной, то прийти к согласию относительно успеха (или провала) программы будет сложно. Первый вариант цели для программы PFS звучал как «снижение уровня бездомности среди семей, взаимодействующих с системой защиты детства». Но в ходе совместной работы заинтересованных сторон, которая включала изучение официальных данных и результатов обратной связи с представителями сообщества, цель обрела более четкие очертания и стала звучать более конкретно: «сокращение времени пребывания детей в системе патронатного воспитания».
  • Кому мы пытаемся помочь?Очертив для себя круг благополучателей, НКО могут более точно определять достижимые и адекватные социальные результаты. В качестве целевой аудитории программа PFS выбрала бездомные семьи с детьми, изъятыми органами опеки, и благодаря этому установила взаимосвязь между отсутствием жилья у родителей и продолжительностью пребывания детей в государственных учреждениях или фостерных семьях. Данный вывод помог сформулировать цель программы  и привлечь партнеров из разных секторов.
  • Чем объясняется выбор в пользу какого-либо конкретного подхода? Официальные данные графства Кайахога свидетельствуют о том, что семьи, нуждающиеся в жилье, в большинстве случаев также являются клиентами Службы помощи семье и детям. Поэтому программа PFS сочетает в себе сразу два вида услуг: обеспечение жильем и семейный консалтинг.
  • Когда мы узнаем о том, что добились успеха? После старта программы некоторые социальные результаты наблюдаются почти сразу, а другие виды изменений — только через несколько лет. Раньше графство использовало такие показатели, как «количество людей, получивших жилье», или «количество воссоединившихся семей». Но теперь появился показатель, отражающий ориентацию инициатив на долгосрочные горизонты – «сокращение количества дней, проведенных детьми в системе опеки и попечительства за последние пять лет».
  • Как мы узнаем о том, что добились успеха? Дебаты о лучших методах оценки социальных результатов продолжаются не первый год. Но графство Кайахога отдает предпочтение рандомизированным контролируемым исследованиям (РКИ), обосновывая свой выбор двумя ожиданиями: (1) желанием видеть связь между мероприятиями программы и изменениями в жизни людей / сообществ, и (2) потребностью в создании базы данных, необходимой для обучения и применения передового опыта в рамках других похожих инициатив.
  • В какой момент мы приступаем к созданию результатов? Очевидно, что социальное вмешательство лучше начинать в тот момент, когда возникает проблема с жильем — когда семья входит в кризис и утрачивает стабильность. Однако аналитическая база графства Кайахога пока не настолько сильна, чтобы распознавать трудности на раннем этапе. Поэтому программа PFS построена таким образом, чтобы в зависимости от наличия необходимой информации, оказание помощи происходило в тот период, когда существует возможность для повышения качества жизни и сохранения семьи.

Поиск ответов на эти вопросы помогает разрабатывать программы, отвечающие реальным потребностям людей и объективно оценивать полученные результаты. Но представители власти вполне могут задать еще один вопрос: Каким образом работа по определению, измерению и созданию социальных благ может посодействовать развитию законодательства и системным изменениям? Это, пожалуй, самая важная информация для тех, кто действительно стремится улучшить условия жизни малоимущих категорий населения.

Партнерские организации графства Кайахога приложили достаточные усилия и посвятили много времени созданию программы, которая в полной мере заслуживает поддержки со стороны налогоплательщиков. О том, какое наследие создаст данная инициатива, мы узнаем только через пять лет — когда все намеченные планы будут выполнены. Но уже сейчас понятно, что если поставленные цели будут достигнуты, но правительство графства впоследствии вернется к традиционной практике (модели, в которой государство платит провайдеру на основе информации о количестве людей, получивших услуги), то о победе не может быть и речи. Потому что смысл работы по усилению ориентации на социальные результаты заключается именно в том, чтобы государство и социальный сектор начали взаимодействовать и вести дела по-новому. В случае благоприятного сценария (если пребывание детей в патронатных семьях или государственных учреждениях сократится), то PFS станет модельной практикой, которую можно будет применять в других социальных службах и в разных сегментах деятельности. А будет ли программа успешной, поможет выяснить продуманная система оценки, которая (а) предназначается для решения актуальных проблем с опорой на достоверные данные, (b) предлагает определять эффективность исходя из полученных результатов, и (с) формирует устойчивую обратную связь со всеми заинтересованными субъектами и тем самым создает условия для постоянного обучения и совершенствования важных социальных услуг.

 

Источник: The Stanford Social Innovation Review, https://ssir.org/articles/entry/a_question_of_outcomes