Утвержден аналитический отчет по проекту «Больше историй», который АНО «Эволюция и Филантропия» реализовала при поддержке Фонда президентских грантов в период с 1 июля 2023 по 30 июня 2024.

Целью проекта было способствовать тому, чтобы НКО сферы детства активнее вовлекали своих благополучателей (детей/подростков/молодых взрослых от 10 до 23 лет, а также их родителей или законных представителей) в свою деятельность, проводили оценку с участием благополучателей, научились на системной основе слушать и слышать их голос (сторителлинг), совместно обсуждать результаты оценки и идеи по улучшению социальных программ.

Задачи проекта:

1. Повысить мотивацию и компетенции НКО по вопросам вовлечения благополучателей в свою деятельность, использования практик сторителлинга как оценки с участием благополучателей
2. Обеспечить реальные кейсы по вовлечению благополучателей в оценку, использования сторителлинга в оценке через оказание комплексной индивидуальной методической поддержки НКО (конкурсный отбор)
3. Обеспечить для НКО доступность инструментов (кейсы, инструментарий, пошаговые руководства) и подходов по вовлечению благополучателей в оценку, использование сторителлинга в оценке
4. Популяризовать в профессиональном сообществе (НКО, органы власти, доноры, СМИ и пр.) тему вовлечения благополучателей в свою деятельность, в т.ч. в оценку.

Целевые группы:

1. НКО сферы детства
2. Благополучатели НКО сферы детства (дети/подростки/молодые взрослые 10-23 лет, а также их родители или законные представители опосредованно через НКО)

Фактические количественные результаты проекта.

Для определения качественных результатов была проведена внутренняя и внешняя оценка (подробнее по ссылке).

1. Повысилась информированность, мотивация и компетенции специалистов НКО использовать сторителлинг в оценке своих программ и проектов, вовлекать благополучателей в принятие решений. Эти социальные результаты достигались во всех форматах проекта (курс МГППУ, курс вебинаров, индивидуальное сопровождение НКО).
2. Рост мотивации, уверенности в своих силах, лидерского потенциала у благополучателей НКО, вовлеченнных а активности проекта.
   Способ измерения — внешняя оценка проекта, обратная связь от участников проекта. 48% детей считают, что точно научились чему-то в проекте, 39% детей точно хотели бы участвовать в похожих проектах, 35% родителей видят свое влияние на работу НКО в значительной степени.
3. Рост зрелости процессов МиО в части сбора обратной связи от благополучателей. Источники данных: интервью с командами НКО на индивидуальном сопровождении (10 организаций), анализ внутренней документации по проекту.
   • Рост информированности специалистов: 78,2% респондентов считают, что в их организациях уже приняты или в ближайшее время будут приняты меры, чтобы сохранить эти знания в их организации.
   • Рост компетенций специалистов: 91,3% респондентов считают, что в следующий раз команда из их организации сможет собрать истории детей / подростков / молодых взрослых самостоятельно.
   • Рост мотивации специалистов: 73,9% респондентов считают, что процесс сбора и обработки историй указал нам на сильные стороны и/или “зоны роста” в их организациях, на которые они раньше не обращали внимания.

Подробнее по ссылке.

Незапланированными позитивными результатами проекта стали: развитие проектного и оценочного потенциала команд НКО, укрепление взаимодействия между НКО, а также возможность решать конкретные задачи по укреплению отношений с благополучателями. В некоторых организациях выраженность запланированного результата (интенсивность участия благополучателей) оказалась выше ожидаемой. Негативных незапланированных результатов не обнаружено.

Недостатки выявленные в ходе реализации проекта.

Помимо интенсивной нагрузки, участники проекта, получавшие индивидуальное сопровождение, встретились со следующими трудностями:
1) Не хватило «бесшовности»:
• С точки зрения встраивания проекта (и всей деятельности по оценке) в текущую деятельность и процессы организаций
• С точки зрения включения разных экспертов в проект: терялось время на повторение
Пока не ясно, можно ли было найти одним коллектив, чьи компетенции, позволили бы решить все задачи проекта, или нужно было заложить больше времени на проработку «бесшовного» опыта в текущем дизайне проекта.
2) Заранее не учли некоторые аспекты:
• Получить у благополучателей согласие не только на участие в проект, но и на использование цитат в отчете и на заполнение анкет обратной связи
• Определиться с атрибуцией авторства на отчет с учетом того, что над них работали в больше или меньшей степени совместно аналитик и команда НКО
Разработаны типовые решения для этих вопросов, на которые можно опираться в следующих итерациях проекта.
3) Распределение времени:
• Выделить больше времени на взаимодействие с аналитиком в начале и в середине проекте, договориться о важных вещах в понимании практики.
• С аналитиком надо было больше работать на этапе постановке ТЗ и проверке промежуточных результатов
• На фасилитируемые встречи с благополучателями было крайне мало времени
• Некоторые участники считают, что весь проект надо было продлить до 1,5 лет
Следующие итерации проекта можно будет сделать менее трудозатратным за счет накопленного опыта, в т.ч. более предсказуемым по временным затратам (за счет сбора информации о тайминге).

К ключевым факторам успешной реализации проекта можно отнести следующее факторы.

Факторы внешнего характера, способствующие успешной реализации проекта:
1) Выбор мотивированных и ресурсных НКО
2) Актуальность решаемой проблематики , востребованность
Факторы внутреннего характера:
1) Наличие уникальной экспертной команды и опыт реализации инновационных проектов
2) Детальное планирование и тщательный мониторинг, управление сроками и рисками
3) Наличие устойчивых партнерств для популяризации темы
Проект позволил нарастить собственные компетенции, опыт, связи, интеллектуальный и информационный капитал для развития и устойчивости нашей организации.
Для дальнейшего развития проекта рассматриваются следующие варианты:
• В качестве направлений для развития в дизайне курса можно рассматривать создание онлайн-курса (MOOC) с семинарскими занятиями в zoom на основе Рабочей тетради (по аналогии с курсом «Оценка в сфере детства»).
• Еще одно возможное направление развития – «встраивание» блока про сторителлинг в более широкий курс (свой собственный или партнеров) по качественным (или, более сфокусировано, по творческим) методам в оценке. Это позволит четче прояснить методологические вопросы, которые релевантны для всех качественных методов / находятся «на стыке» с другими качественными методами.
В частности, в работу группы САД ( Статистический анализ данных) включить анализ качественных и количественных данных
• Найти партнеров среди социологического сообщества и среди IT-компаний по применению ИИ для сбора и анализа качественных данных
Продумать создание технологии совместного анализа и интерпретации данных с благополучателями.

С полным текстом аналитического отчета можно ознакомиться по ссылке.

16 октября 2024 на X конференции АСОПП «Развитие оценки в социальной сфере в России: достижения и точки роста» состоялась сессия «Оценка социокультурного воздействия творческих проектов: извлеченные уроки». Ведущие сессии: Ольга Евдокимова, АНО «Эволюция и Филантропия», Наталья Сергиевская, Фонд «Будущее время».

Наталья Сергиевская представила процесс и результаты оценки проекта «Чеховский книжный фестиваль», осветила особенности, с которыми столкнулись оценщики и заказчики оценки этого и других творческих инициатив, которые были выбраны при реализации проекта «Яркие краски креативных индустрий» (ЯККИ). Ссылка на видео-кейс и презентация.

Ольга Евдокимова презентовала созданную в процессе реализации проекта ЯККИ методическую базу, которая включает: деревья результатов и логические модели, инструменты сбора данных, видео-ролики и презентации отчетов по оценке, планы оценки и резюме оценки (презентация).

Сессию завершило выступление И.С Соболева, первого заместителя генерального директора Президентского фонда культурных инициатив, на тему «Как нам развивать оценку творческих проектов и культурных инициатив».

Видеозапись сессии.

Новости, кейсы и материалы проекта ЯККИ, сайт проекта.

15 октября на X конференции АСОПП «Развитие оценки в социальной сфере в России: достижения и точки роста» прошла сессия «Оценка как социальная технология: анализ проекта «Больше историй»». Ведущие — Т. Арчакова ( АНО «Дирижабль») и О.Евдокимова (АНО «Эволюция и Филантропия»).

На сессии Т. Арчакова и И.Шелпакова, директор АНО Центр сопровождения детей и семей «Содействие», в интерактивном формате разобрали пример, как составить дизайн оценки проекта организации, опираясь на онлайн-руководство по применению сторителлига для оценки. Также Т. Арчакова представила методическую базу, составленную в ходе проекта: Сборник кейсов, конкретные инструменты по применению методологии сторителлинга, уникальное онлайн-руководство про применению сторителлинга для оценки.

О.Евдокимова представила представила методологические особенности и выводы по результатам оценки 10 проектов (презентация).

В частности, были выявлены следующие методологические точки роста:

• Формулирование оценочных вопросов
• Анализ данных: Результаты — интерпретация — суждения — рекомендации
• Анализ качественных и количественных данных вместе, этап суждения 
• Анализ истории как целостной единицы, анализ нарратива
• Качественный отчет об оценке
• Социальные или социологические исследования
• Усложняющиеся  компетенции оценщиков

Проект «Больше историй» реализовывался АНО «Эволюция и Филантропия» в 2023-20024 годах, его целью было способствовать тому, чтобы НКО сферы детства активнее вовлекали своих благополучателей (детей/подростков/молодых взрослых и их родителей) в свою деятельность, проводили оценку с участием благополучателей, научились на системной основе слушать и слышать их голос, совместно обсуждать результаты оценки и идеи по улучшению социальных программ.

Сейчас идет набор пилотной группы для работы с онлайн-Руководством (формат онлайн-курса) с возможностью работы с куратором для практического внедрения оценки с использованием сторителлинга в работу организации. Если вы заинтересованы в прохождении курса, заполните короткую форму.

Ссылка на видео.

16 октября с 12:00 до 13:30 на X конференции АСОПП «Развитие оценки в социальной сфере в России: достижения и точки роста» пройдет сессия «Оценка социокультурного воздействия творческих проектов: извлеченные уроки». Ведущие сессии: Ольга Евдокимова, АНО «Эволюция и Филантропия», Наталья Сергиевская, Фонд «Будущее время».

В качестве приглашенного спикера ожидается участие — И.С Соболева, первого заместителя генерального директора Президентского фонда культурных инициатив.

На сессии предполагается:

1) подробно представить процесс и результаты оценки проекта «Чеховский книжный фестиваль», осветить особенности, с которыми столкнулись оценщики и заказчики оценки этого и других творческих инициатив, которые были выбраны при реализации проекта «Яркие краски креативных индустрий» (ЯККИ).

2) презентовать созданную в процессе реализации проекта ЯККИ методическую базу;

3) обсудить направления развития оценки социокультурных проектов.

Участие в конференции бесплатное. Для участия в конференции вам нужно зарегистрироваться по ссылке. Подробная программа конференции представлена на лэндинге.

11 июня в театре «Геликон-опера» прошел форум «Яркие краски креативных индустрий». В нем приняли участие около 90 человек: грантополучатели и грантозаявители ПФКИ, представители  и эксперты ПФКИ, вовлеченные в экспертизу заявок и оценку грантов, эксперты – представители профессионального сообщества оценщиков, представители творческих проектов — участников  «Яркие краски креативных индустрий».

Основные задачи форума:

• Обсудить подходы к оценке социокультурного влияния творческих проектов (международный и российский опыт, результаты пилотной апробации отобранных проектов). 
• Сформировать  предложения для ПФКИ о применении различных оценочных подходов и инструментов (их преимущества и ограничения) для мониторинга и оценки поддерживаемых Фондом проектов.
• Собрать рекомендации по развитию культуры и практик мониторинга и оценки творческих проектов грантополучателей/заявителей ПФКИ.

И.С.Соболев, первый заместитель генерального директора ПФКИ, рассказал о задачах фонда в развитии оценки творческих проектов и ответил на вопросы слушателей.

Ведущей форума выступила О.А.Евдокимова, исполнительный директор АНО «Эволюция и Филантропия».

О. Понкратова, руководитель социокультурных проектов театра «Геликон-опера», С. Пархоменко, ООО «Идеи&Решения», и О.А.Евдокимова представили проект «Яркие краски креативных индустрий».

Н.И.Сергиевская, Фонд «Будущее время», и О.А. Евдокимова рассказали о результатах анализа международного и российского опыта в контексте задач в области оценки поддержанных творческих проектов и возможностях практического применения.

Далее в программе форума были представлены результаты оценки следующих творческих проектов:

• Проект «Молодежная программа оперных артистов  АНО «Центр поддержки творческих и социально-культурных инициатив «Арт-Гелиос» и ГБУК г. Москвы «Московский музыкальный театр «Геликон-опера» (Москва). Проект представили: руководитель проекта О. Понкратова, руководитель социокультурных проектов театра «Геликон-опера»; куратор И.Пагава, независимый исследователь, эксперт АНО «Эволюция и Филантропия»; социолог Е.Богомолова, руководитель проектов отдела по аналитике, исследованиям и работе с экспертным сообществом Центра коммуникаций «Росатом», эксперт в бюро партнёрств и коммуникаций для достижений целей устойчивого развития «Теперь так», эксперт АНО «Эволюция и Филантропия», а также А.Боровых, эксперт в области развития НКО, член Правления АСОПП в 2014-2016 гг.
• Проект «Музыкальная школа Ларисы Долиной» (Москва) представили: руководитель проекта В. Муравьева, директор по развитию MUSCULT и Музыкальной академии Ларисы Долиной, и куратор О.В. Заводилкина, эксперт АНО «Эволюция и Филантропия», президент АСОПП.
• Проект «Мобильная опера-прогулка «Дмитрий Хворостовский. Начало» (Красноярск) представили: руководитель проекта Н.В.Агаханова, директор Красноярского фонда развития искусства имени Дмитрия Хворостовского; куратор О.В. Заводилкина и приглашенный эксперт И.В. Ширшова, руководитель направления БФ Сбербанка «Вклад в будущее», президент АСОПП 2021г.
• Проект «Чеховский книжный фестиваль» (Таганрог) представили: руководитель проекта — Л.И. Скрынникова, доцент Донского государственного технического университета, руководитель проекта; куратор проекта А. А. Богомолова, социолог, эксперт по разработке и оценке социальных проектов, член Правления АСОПП 2021-2024, а также Ю.Ходорова, директор БФ Культура благотворительности.
• Проект «Молодежный фестиваль «Стихия металла»» (Первоуральск, Свердловская обл.) представили: руководитель проекта — К.А. Костина, исполнительный директор Благотворительного фонда «Первоуральск 21 век»; куратор Т.О.Арчакова, директор АНО Центр развития социальных практик «Дирижабль», эксперт АНО «Эволюция и Филантропия»; социолог — Е. Богомолова, и Е. Коновалова, руководитель программы «Культура» Фонда Тимченко.
• Проект «Уральский паблик-арт фестиваль ЧО» (Екатеринбург) представили: руководитель проекта: Н.Харисов, креативный и бренд-директор холдинга «Атомстройкомплекс», руководитель паблик-арт программы «ЧО»; куратор: Н.И.Сергиевская, Фонд «Будущее время»; социолог — И.Смекалин, аспирант-социолог ВШЭ, исследователь социального воздействия НКО.
• Проект «Из России с Любовью» представили: руководитель проекта В. Денисов и С. Пархоменко, ООО «Идеи&Решения».

Завершил форум концерт-исследование, на котором зрители заполняли анонимную анкету и высказывались о наиболее понравившихся номерах.

По итогам форума была собрана обратная связь от участников, свидетельствующая, что в основном Форум был полезен участникам.

Форум способствовал продвижению оценки результатов и влияния проектов в области культуры. Предположу, что прежде всего форум был полезен тем, кто эти проекты реализует. Практикоориентированный подход представления проектов и результатов оценки позволил участникам лучше понять влияние их деятельности и повысил их компетенции в анализе результатов.

Однако были и критические замечания, которые касались, в основном, тайминга.

Желательно в программе выделить больше времени на возможность задавать слушателями вопросы выступающим спикерам

Также участники выразили пожелания продолжить обсуждение темы:

В регионах много социологов, которые занимаются заявленной проблематикой. Не все живут в Москве. Новосибирск, Ростов—-на-Дону, Екатеринбург, Нижний Новгород и тд. Нас много и нас легко найти по научным публикациям , публичным страницам , через НКО, с которыми мы все работаем

Спасибо за мероприятие. Это было неожиданно приятно.

Благодарю за приглашение! Буду с нетерпением ждать новых офлайн встреч.

Форум проводился в рамках проекта «Яркие краски креативных индустрий» (АНО «Арт-Гелиос», при поддержке Президентского фонда культурных инициатив).

Публикуем сборник кейсов проекта «Больше историй».

Проект реализовался АНО «Эволюция и Филантропия» с июля 2023 г. по июнь 2024 г. при поддержке Фонда президентских грантов. Цель проекта  — расширить применение практик вовлечения благополучателей в деятельность НКО сферы детства.

В сборник вошли кейсы:

по практикам поддержки замещающих семей

• БФ «Арифметика добра»
• БФ «Волонтеры в помощь детям-сиротам»

по практикам наставничества и развития социальных навыков у подростков

• БФ «Дорога к дому»
• МОО «Наставники детям»
• АНО «Наука и образование»

по практикам поддержки и реабилитации детей и молодых взрослых с ОВЗ

• АНО «Вера. Надежда. Любовь»
• БФ «Все получится!»
• РОО «Контакт»
• АНО «Одухотворение»
• АНО «Физическая реабилитация»

21 июня НКО сферы защиты детства представили свои кейсы использования на практике сторителлинга для оценки программ, вовлечения благополучателей, доноров и партнёров

Обсуждение результатов, сложностей, направлений для развития и потенциала сторителлинга с организациями – участниками проекта «Больше историй» организовала АНО «Эволюция и Филантропия» при информационной поддержке сектора Точка кипения МГППУ. Проект реализуется при поддержке Фонда президентских грантов.

Сторителлинг широко известен как способ маркетинговой коммуникации, но меньше его знают как инструмент обратной связи, получения качественных данных или активизации взаимодействия между некоммерческими организациями и их благополучателями. Во время обсуждения результатов проекта «Больше историй» многие организации признались, что для них сторителлинг был терра инкогнита, но приложенные усилия принесли больше результатов, часто – неожиданных, открывающих новые возможности в создании доверительных отношений со стейкхолдерами. Конечно, для применения метода сторителлинга в оценке программ и проектов или для повышения уровня доказательности практик предстоит методическая работа. Но НКО точно получили ещё один апробированный инструмент участия детей и молодых взрослых в принятии важных для их благополучия решений.

В этом качестве метод сторителлинга был рекомендован участниками V Всероссийского онлайн-форума «Вместе с детьми», результаты которого представила Эльвира Гарифулина, программный директор Благотворительного фонда «Абсолют – Помощь» и один из инициаторов Форума. С точки зрения продвижения темы участия детей и молодых взрослых, и Форум, и участники проекта «Больше историй» обратили внимание на необходимость повышения доверия детям со стороны взрослых, развитие диалога между детьми, родителями и специалистами, а также более активное вовлечение родителей в поддержку деятельности НКО. Общей платформой для решения этих задач могут стать рабочие группы, которые планируется собирать между форумами и куда могут войти организации и учреждения сферы защиты детства со своими инициативами, практиками и инструментами (презентация).

Применения сторителлинга в фандрайзинге коснулась Екатерина Кузнецова, эксперт по фандрайзингу, консультант Charity Solutions Consulting. Она подробно рассказала о том, где и как можно использовать истории благополучателей, какие юридические и этические нормы важно соблюдать и как лучше строить истории (презентация).

В представленных кейсах организации – участники проекта «Больше историй» дали возможность увидеть весь процесс работы с методом сторителлинга, поделились своими находками и трудностями, в том числе – разобрали свой опыт в трёх группах. В Благотворительном фонде «Арифметика добра», как отметила методист Фонда Анна Барыбина,  с помощью сторителлинга смогли увидеть социальные результаты проектов глазами благополучателей, апробировали включение детей в оценку, получили предложения. Сложным этапом здесь стала верификация текстов записанных историй родителями – многие стремились «причесать» свои слова. Сейчас в фонде думают о том, как включить сторителлинг в систему МиО и реализовать идеи детей и взрослых (презентация).

В Благотворительном фонде «Дорога к дому» использовали обсуждение собранных историй как форму поиска компромисса между детьми, родителями и наставником от фонда. Среди сложностей Ирина Ромашова, руководитель проекта «Молодежная парковка», отметила слабый отклик на приглашение к диалогу родителей, а в результатах анализа собранных историй она обратила внимание на заметную дистанцию между родителями и их детьми. Поэтому вовлечение в работу организации, помогающей детям, значимых взрослых может стать одним из способов сокращения этой дистанции (презентация).

Два представленных кейса касались применения сторителлинга в работе с детьми с ментальными нарушениями. В АНО «Ресурсный Центр «Вера. Надежда. Любовь» собирали истории подопечных для оценки и фандрайзинга. Основная сложность, по словам Елизаветы Романовой, руководителя АНО, кроме необходимости использовать значительные временные, человеческие и организационные ресурсы, заключалась в том, что подопечные охотно рассказывают о том, что им интересно, и менее охотно – о том, что интересно узнать исследователям (презентация).

Нестандартное решение в такой же ситуации нашли специалисты РОО помощи детям с расстройствами аутистического спектра «Контакт» — они передали бразды правления самим детям. Гайд, подготовленный взрослыми, ребята переработали на более простой и понятный им язык, сами выступали интервьюерами. Сбор историй проходил в мини-группе: взрослые помогали следовать сценарию интервью, часть детей смотрела и училась собирать истории, часть – смотрела, как устроена беседа, чтобы не волноваться, когда придёт их очередь рассказывать свою историю. Такая форма работы дала несколько неожиданных, но вдохновляющих результатов. Во-первых, эффект «снежного кома» при вовлечении родителей – ценность участия в сторителлинге для них повышалась по мере погружения в обсуждение историй и знакомства с аналитическим отчётом. Во-вторых, и родители, и дети перенесли в повседневную жизнь ценность общения друг с другом и окружающими: многие родители иначе увидели своих детей, дети – стали интересоваться, как прошёл день у взрослых, потому что им понравилась роль «журналиста».

Подводя итоги работы группы, посвящённой теме использования сторителлинга с особыми детьми, где и представляли свой кейс РООИ «Контакт», модератор Ольга Заводилкина, президент АСОПП, эксперт АНО «Эволюция и Филантропия», отметила: важнее оказался не сам факт получения истории, а процессы, которые запустила работа по подготовке и использованию сторителлинга.

Группа по теме вовлечения подростков и молодых взрослых в обсуждение результатов оценки обратила внимание на необходимость создания среды, поддерживающей активность ребят, что особенно важно для привлечения неактивных подростков. Кроме того, в группе отметили эффективность совместного участия в оценке детей вместе со своими наставниками и правильного использования нематериальной мотивации детей. А группа, обсуждавшая совместный анализ количественных и качественных результатов исследований с участием детей, наметила темы и направления дальнейшей дискуссии, чтобы найти способ повышения доказательности практик (видео).

Что касается результатов всего проекта «Больше историй». Татьяна Арчакова, эксперт АНО «Эволюция и Филантропия», представила данные обратной связи организаций, где НКО отметили развитие процесса обратной связи, повышение качества системы МиО, усиление подотчётности перед своими благополучателями. Опрос участников показал, что 91% организаций убедились в важности обсуждения своей работы с благополучателями, 77% отметили рост готовности включать анализ историй в процесс оценки, 74% увидели сильные стороны и зоны роста, а 64% улучшили постановку задач по анализу данных (презентация).

Среди направлений развития Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия», назвала снижение трудо- и ресурсоёмкости сторителлинга для организаций, а также поиск вариантов использования для этого метода технологий на основе искусственного интеллекта.

Подводя итоги дискуссии, Инна Ширшова, руководитель программы «Инклюзивная среда» Благотворительного фонда Сбербанка «Вклад в будущее», и Эльвира Гарифулина, программный директор Благотворительного фонда «Абсолют – Помощь» отметили заинтересованность крупных доноров в развитии разных форм участия детей в оценке. Инна Ширшова обратила внимание, что сторителлинг – сложный, но сильный инструмент, а обмен историями детей, родителей и специалистов помогает развивать доверие. Доверие, которое лежит в основе деятельности любой помогающей организации.

Полную запись дискуссии можно увидеть по ссылке.