Встреча участников проекта «Больше историй: продолжение» 2 апреля
Встреча участников проекта 2 апреля была посвящена обсуждению методологических аспектов использования сторителлинга для оценки программ. Основной целью было углубление понимания методологических подходов и их практического применения в проекте. Контекст проекта предполагает использование сторителлинга как инструмента для оценки эффективности программ, что позволяет преобразовать сырые данные в осмысленные выводы и вовлечь заинтересованные стороны.
Методологические и организационные моменты
Ведущая Ольга Евдокимова начала встречу с обзора текущего состояния проекта. Она отметила, что это уже четвёртая встреча, и напомнила, что первая встреча состоялась 6 марта, когда были представлены планы проекта. С 12 марта участники начали регулярные встречи каждую среду. Основные темы предыдущих встреч включали определение мотивации и целей участия в проекте, конкретизацию оценочных вопросов и обсуждение ключевых элементов оценочного дизайна.
Ольга еще раз подчеркнула, что сторителлинг не является самостоятельной методологией для оценки. Она отметила, что важно собрать все уже имеющиеся количественные и качественные данные за последний период и проанализировать их, задав вопрос «Что мы уже знаем о программе и что хотим еще узнать?» и принять это во внимание при формулировании ключевых оценочных вопросов. Ольга отметила, что сторителлинг относится только к сбору данных, а оценка включает в себя вынесение суждений о программе на основе этих данных и других источников информации.
Ольга подчеркнула, что проект делится на три этапа:
1. Изучение методических материалов и формирование оценочного дизайна с помощью рабочей тетради. Этот этап должен завершиться к 23 апреля.
2. Сбор данных, запланированный на май.
3. Транскрибация, верификация и анализ данных, запланированные на июнь.
Сбор данных
Ольга подчеркнула, что в мае участники будут заниматься сбором данных. Она отметила, что важно, чтобы каждый участник имел индивидуальный график, особенно если сбор данных переносится на июнь. Также она упомянула, что желательно, чтобы данные собирал один и тот же человек, но признала, что на практике это может быть сложно реализовать. Если сбором данных будут заниматься несколько участников, важно, чтобы они также принимали участие в проекте и необходимо будет заранее составить общую кодировочную таблицу.
Организация процесса анализа
Ольга упомянула, что организаторы не будут заниматься анализом данных, но могут оказать поддержку в организации процесса, например, в транскрибации. В прошлом цикле проекта предполагалось, что участники смогут самостоятельно освоить платформы для транскрибации и анализа, но это оказалось сложным. Поэтому в этом цикле транскрибация будет централизованной, а анализ будет зависеть от возможностей команд. Ольга отметила, что есть вариант самостоятельного анализа во время прохождения серии вебинаров по анализу, запланированному на июль. Есть вариант привлечения внешнего консультанта или студентов. Организаторы проекта «Больше историй» помогут в составлении ТЗ для внешних консультантов. Тип анализа будет зависеть, в том числе, с кем будут обсуждаться результаты анализа. Для этого важно заранее спланировать, каким образом будут представлены результаты анализа, чтобы они были полезны для принятия управленческих решений.
Обсуждение результатов групповой работы
Три модератора групп поделились результатами обсуждений в своих группах. Они обсудили критерии сравнения интервьюеров, такие как простота, скорость и качество установления контакта, риски искажений и предвзятости, доступность по времени и формату, а также компетенции. Также обсуждался вопрос о том, должен ли интервьюер хорошо знать содержание деятельности по проекту. С одной стороны, глубокое знание позволяет задавать уточняющие вопросы вне гайда, но с другой стороны, может привести к предвзятости и формированию истории в нужном направлении. Сторителлинговые интервью обычно занимают от 30 минут до часа. Выборка, скорее всего, будет неслучайной, что может привести к смещениям, о которых необходимо написать в отчёте. Для сравнения разных групп можно использовать квотную или парную выборку, если подростки участвовали в слегка разных версиях проекта.
Заключение и дальнейшие шаги
Встреча участников проекта 2 апреля стала важным этапом в обсуждении методологических аспектов использования сторителлинга для оценки программ. Участники углубили понимание ключевых этапов проекта, включая сбор данных и анализ. Было подчеркнуто, что сторителлинг не является самостоятельной методологией, а должен быть дополнен другими данными для вынесения обоснованных суждений о программе.
Дальнейшие шаги:
— Сбор данных. Участники должны подготовиться к сбору данных в мае, учитывая индивидуальные графики и доступность респондентов.
— Следующая встреча. Запланирована на 9 апреля, где будут представлены референсные кейсы и проведен разбор историй. Участники должны подготовиться к презентации своих кейсов и изучить теорию анализа историй.