Загадки генерализуемости

Загадки генерализуемости. Мэри Энн Бейтс, Рэйчел Гленестер [The Generalizability Puzzle. Mary Ann Bates, Rachel Glennerster] The Stanford Social Innovation Review (США). Лето 2017

Эта большая статья, подготовленная авторитетными специалистами Лаборатории Абдула Латифа Джамиля по поддержке инициатив в сфере предотвращения бедности (The Abdul Latif Jameel Poverty Action Lab; США), посвящена проблемам и возможностям «оценки социальной эффективности с научным подходом» (rigorous impact evaluations), которая очень привлекает представителей глобальных инициатив, но, в то же самое время, вызывает у них большие сомнения. В частности, многие игроки сферы развития полагают, что результаты исследований применимы только к тем территориям, где проводилась оценка, и не знают, сколько раз следует тестировать программы в разных контекстах, прежде чем переходить к их широкому внедрению. По мнению авторов статьи, достойным ответом на эти вопросы является Концепция генерализуемости (The Generalizability Framework), позволяющая интегрировать различные виды доказательств (полученных разными исследователями), и применять эти сведения для принятия решений о целесообразности распространения той или иной программы или услуги. Чтобы воспользоваться концепцией и принять правильное решение, необходимо выполнить несколько заданий – ответить на четыре ключевых вопроса: (1) На какую теорию опирается программа? (2) Благоприятен ли местный контекст для применения данной теории? (3) Имеются ли убедительные данные, свидетельствующие об изменениях в поведении целевых аудиторий? и (4) Имеются ли доказательства, указывающие на возможность реализации модели/услуги в новых условиях? Смысл этих «упражнений» заключается в том, что они помогают сформировать представление о механизмах воздействия на потенциальных участников программы, понять природу изменений, и своевременно адаптировать опыт к новым обстоятельствам. Приведенные в статье примеры из оценочной практики говорят о том, что сведения о местном контексте, безусловно, имеют большое значение, но их ценность существенно возрастет, если их анализировать в совокупности с другой информацией, позволяющей выйти за рамки привычного уклада и узнать немного больше о достижениях международного сообщества.

Материал из Реферативный обзор материалов по теме «Измерение и оценка» за 2017 год.

Добавить комментарий