Score Ukraine Methodology

    SCORE Украина — общенациональное исследование (на подконтрольных правительству Украины территориях)

    SCORE Украина 2016
    В 2015 году Центр устойчивого мира и демократического развития (SeeD) был приглашен внедрить Индекс SCORE в Украине при поддержке проекта международной технической помощи «Украинская инициатива по повышению уверенности» (UCBI), который финансируется Агентством США по международному развитию (USAID) и Бюро USAID по инициативам переходного периода (OTI). Чтобы оценить уровень напряженности в обществе и найти решения для повышения уровня сплоченности в стране, SeeD совместно с UCBI провели первую волну исследования SCORE в Украине с августа 2015 по декабрь 2016 года, опросив 7700 респондентов по общенациональной выборке и проведя более 300 интервью в каждой области и в городе Киеве, а также создав дополнительную выборку из 1600 внутренне перемещенных лиц (ВПЛ). В первой волне «SCORE Украина» (общенациональном исследовании 2016 года) в центре внимания было изучение взглядов граждан на реформы государственной политики и мирный процесс, их представлений о своей идентичности, их доступа к услугам и гражданской активности, а также вызовов, с которыми сталкиваются ВПЛ. Во время первой волны были разработаны аналитические материалы, содержащие основанные на фактических данных и принципах участия рекомендации по разработке политик и коммуникаций. Эти материалы вызвали большой интерес среди заинтересованных сторон (в частности, чиновников, журналистов, представителей гражданского общества).

     

    SCORE Украина 2018
    USAID и SeeD признали, что необходимо также провести лонгитюдное и сравнительное исследование, в котором можно будет отследить ключевые показатели во времени, а также лучше понять социально-политическую динамику и тенденции в обществе. Вторая волна «SCORE Украина» калибровалась летом 2017 посредством консультаций с заинтересованными сторонами и 8 региональных фокус-групп в Херсоне, Харькове, Краматорске, Киеве, Ивано-Франковске, Львове, Северодонецке и Одессе. После этих уточнений был разработан опросник для второй волны, а сами опросы начались в январе 2018 года. Их проводила компания Growth from Knowledge (GfK). Всего с помощью стратифицированной случайной выборки было проведено 9018 личных интервью с семьями в 24 областях и городе Киеве. 6102 респондента из первой волны также приняли участие во второй волне как панельная часть выборки, что позволило провести более надежный анализ и отследить причинно-следственные связи. Общенациональное исследование «SCORE Украина 2018» было сосредоточено на следующих задачах:

    • Отследить преобладающую общественную и межгрупповую динамику и исследовать ресурсы гражданского общества, установки и ориентации в отношении развития конструктивного гражданства;
    • Понять уровень безопасности человека, удовлетворенности услугами и доступа к ним, а также социально-экономические трудности, которые могут негативно повлиять на социальную сплоченность и развитие; определить угрозы для безопасности человека, с которыми сталкиваются различные группы населения;
    • Исследовать, как альтернативная политика может усилить или ослабить социальную сплоченность, участие граждан и чувство безопасности в Украине; и определить движущие силы поддержки реформ и реинтеграции, чтобы лучше понять тревоги и страхи граждан;
    • Организовать более глубокое изучение кризисных зон, уязвимых групп, приоритетных вопросов и конкретных сфер социальной напряженности, выявленных во время первой волны.
       

    SCORE для восточной Украины (компонент общенационального исследования SCORE 2021)

    «SCORE для восточной Украины» в 2021 году финансировался Агентством США по международному развитию (USAID), ПРООН и ЕС и внедрялся Центром устойчивого мира и демократического развития (SeeD). Данные для исследования были собраны в январе – мае 2021 года и составили 7280 личных интервью: 4325 интервью с респондентами из Луганской и Донецкой областей (на подконтрольных правительству Украины территориях, включая линию столкновения); 3600 интервью с респондентами из 18 разных городов и поселков городского типа, проведенных в рамках городского компонента исследования; 519 интервью с ветеранами АТО/ООС из 5 областей; 1000 интервью с молодежью и детьми из 5 областей; 325 интервью с людьми с инвалидностью из 3 областей. Еще 1500 интервью были проведены в Азовском и Черноморском регионах. Выборка для неподконтрольных правительству Украины территорий составила 638 респондентов и была опрошена методом CATI.

     

    SCORE Украина — изучение взглядов подростков в школах

    «SCORE Украина — изучение взглядов подростков в школах» проводилось в тесном сотрудничестве с ЮНИСЕФ и Министерством образования и науки Украины. Исследовательская группа тщательно рассмотрела все этические соображения, чтобы обеспечить защиту прав детей во время исследования, а также меры, соответствующие этическим стандартам ЮНИСЕФ и национальным этическим стандартам. Опросы одобрила Комиссия по психологии и педагогике Научно-методического совета Министерства образования и науки Украины.

    Показатели были выбраны и разработаны на основе тщательного изучения литературы и консультаций с экспертами по подростковой психологии. Они охватывали положительный опыт подростков в семейном и школьном контексте (например, связи в семье, вовлеченность родителей, поддержка со стороны учителя и сверстников), отрицательный опыт (например, физическое насилие, травля, подверженность домашнему насилию и конфликтам, склонность бросать обучение) и различные последствия для развития подростков (например, агрессия, тревога и депрессия). Исследование также включало оценку жизненных навыков и гражданских ресурсов подростков (к ним относятся, в частности, творчество, способность к решению проблем, активное гражданство).

    Прежде чем проводить опросы, региональные руководители на местах из Национальной сети Украинского института социальных исследований им. Александра Яременко (УИСИ) прошли однодневный тренинг. Затем учеников и учениц проинформировали о целях исследования, о том, как будут использоваться данные, и о том, что участие добровольное. Каждый ученик и ученица получили опросник и индивидуальный конверт, в который они могли положить заполненную анкету и заклеить его.

    SCORE Украина для школ 2017
    Первая волна «SCORE Украина — изучение взглядов подростков в школах» проводилась в рамках проекта SCORE для восточной Украины, также известного как «SCORE ООН для восточной Украины 2017» (USE 2017), который был реализован в партнерстве с SeeD, ПРООН, ЮНИСЕФ и МОМ. В первой волне было опрошено 3300 подростков в возрасте 13–17 лет из 48 учебных заведений Донецкой и Луганской областей (с подконтрольных правительству Украины территорий). Результаты и отчеты первой волны доступны на странице «Восточная Украина».
     

    SCORE Украина для школ 2018 
    В 2018 году во второй волне «SCORE Украина для школ», проведенной по заказу ЮНИСЕФ, был расширен как масштаб, так и охват исследования. Данные собирались в течение первого семестра 2018–2019 учебного года. Выборка состояла из 7846 подростков в возрасте от 12 до 19 лет. Респондентами были ученики из 200 учебных заведений Украины, проживающие на подконтрольных правительству Украины территориях Донецкой и Луганской областей, а также в Днепропетровской, Запорожской, Харьковской, Николаевской, Львовской и Киевской областях.


    SCORE Украина для школ 2019 
    В 2019 году методология исследования была уточнена в сотрудничестве с ЮНИСЕФ, и началось проведение третьей волны. Данные собирались в течение первого семестра 2019–2020 учебного года. Выборку составили 8643 подростка в возрасте от 13 до 19 лет, поскольку было решено, что данные, полученные от 12-летних подростков, не вполне надежны. Респондентами были ученики из 215 учебных заведений Украины, которые проживали на подконтрольных правительству Украины территориях Донецкой и Луганской областей, в Днепропетровской, Запорожской, Харьковской, Николаевской, Львовской и Киевской областях и городе Киеве.


    Что такое SCORE?

    Финансовые и человеческие ресурсы, которые можно инвестировать в процесс миростроительства сильно ограничены по сравнению с теми ресурсами, которые вкладываются в войны и конфликты. Для того, чтобы эффективно и стратегически обоснованно использовать имеющиеся ресурсы для достижения позитивных изменений в процессах преодоления конфликтов и поддержания мира и, в частности, разрабатывать целевые программные интервенции, необходимо точно понимать движущие силы конфликта в каждом конкретном контексте. Часто программы миростроительства и развития основываются на ограниченных данных, собранных исключительно посредством консультаций с небольшим количеством национальных экспертов и / или специалистов по конфликтам, причем лишь небольшая часть их выводов делается на основе фактических данных. Чтобы улучшить процесс миростроительства и трансформации конфликтов, а также укрепить социальную гармонию, как в вертикальном измерении (между правительственными учреждениями и гражданами), так и в горизонтальном (между различными группами в обществе), крайне необходимо основываться на фактических данных в принятии решений и разработке политики. Имеющиеся подходы часто не позволяют эмпирически установить связь между потенциальными движущими силами конфликта и желаемыми результатами мирного процесса таким образом, чтобы это помогло решить проблемы с разработкой политик и программ. Именно поэтому даже искренние усилия и инвестиции часто не достигают желаемых целей и общественных преобразований.

    Цель SCORE — повысить эффективность усилий по построению мира на основе фактических данных. Этот инструмент был разработан для устранения указанных выше недостатков в организации устойчивых процессов трансформации конфликтов. Как адаптивный, гибкий и доказательный инструмент диагностической и прогностической оценки SCORE можно использовать, чтобы определять точки входа программной деятельности, которые с наибольшей вероятностью смогут достичь положительных результатов мирного процесса. С этой точки зрения, SCORE учитывает озабоченность миротворческого сообщества, где часто представлены национальные и международные участники, все еще не уверенные в реальной эффективности своих инвестиций. Благодаря SCORE правительства, доноры и миростроительные организации получают возможность систематически разрабатывать и тестировать теории трансформации конфликтов, прежде чем спонсировать и воплощать новые программы построения мира.

    SCORE основывается на совокупности научных дисциплин, таких как социология, психология, исследования международных отношений и проблем безопасности,) а гибкость Индекса позволяет учитывать в нем результаты новейших исследований, тенденции глобальной политики и реалии каждого местного и регионального контекста. Индекс был разработан в 2012 году на Кипре Центром устойчивого мира и демократического развития (SeeD) и Программой развития ООН при финансовой поддержке Агентства США по международному развитию (USAID). SCORE основывается на исследованиях участия, с применением сочетания разных методов. Для уточнения опросника SCORE, который составляется на основе обширной библиотеки измерительных инструментов и показателей SCORE, проводятся консультации с заинтересованными сторонами различных уровней, фокус-группы и интервью. Приведенный ниже рисунок 1 иллюстрирует цикл процесса применения SCORE.

    Рис. 1. Цикл процесса применения SCORE

     

    Индекс SCORE не предполагает универсализации формата, часто характерной для других кросс-национальных индексов. Чтобы гарантировать, что каждый Индекс SCORE надежно отражает общественную динамику конкретной страны, где проводится исследование, процесс обычно начинается с совместных консультаций с широким кругом национальных заинтересованных сторон, включая гражданское общество, научные круги, правительство, руководителей бизнеса и сообщества на низовом уровне. Такие консультации способствуют глубокому пониманию общественной динамики в контексте желаемых результатов, а техника картирования системы (создания подробных и интегрированных концептуальных моделей) используется, чтобы фиксировать и проверять сложные взаимосвязи между различными социальными, экономическими, политическими и индивидуального уровня динамиками и компонентами. На такой концептуальной основе выбираются, адаптируются и разрабатываются соответствующие средства измерения (либо из имеющейся библиотеки инструментов SCORE, либо специально предназначенные для конкретной страны).

    Индекс SCORE в зависимости от потребностей позволяет органично сочетать различные способы сбора данных, в том числе опросы, дискурс-анализ, экспертные оценки. В нем также используется передовой аналитический и статистический инструментарий. Большая выборка опросов SCORE позволяет обеспечить высокий уровень точности измеряемых показателей для различных регионов страны и различных общественных групп (например, отдельных этнических общин или социально-демографических групп, таких как ВПЛ). Полевой этап обычно проводится в сотрудничестве с авторитетными национальными исследователями или социологическими агентствами, которые имеют подтвержденный уровень культурной и контекстуальной компетенции и чувствительности, необходимый для надежного сбора данных. Полученные данные обрабатываются при помощи таких методов, как факторный анализ, дисперсионный анализ, регрессионное моделирование и моделирование структурных уравнений. Для многочисленных индикаторов разрабатываются надежные метрики, которые затем трансформируются в сетевой анализ и прогностические модели, посредством которых можно выявить сложные взаимосвязи между различными показателями и группами. Такой процесс моделирования позволяет предложить эффективные точки входа для разработки проектов и политик на основе фактических данных.

    Исходя из принципов совместной исследовательской работы предварительные результаты SCORE толкуются посредством консультаций с различными заинтересованными сторонами и групповых обсуждений, которые влияют на дальнейший анализ данных и разработку аналитических материалов . Такое тесное сотрудничество и общение с ключевыми заинтересованными сторонами, а также населением на низовом уровне не только обогащают результаты исследования SCORE, делают их более глубокими и весомыми, но и формируют чувство ответственности и стимулируют конструктивные публичные обсуждения, гарантируя, что конечные продукты SCORE будут максимально контекстуальными и максимально эффективными. 

    Более подробное объяснение методологии SCORE доступно в кратком методологическом документе. Информацию об использовании платформы можно найти в коротком видео на нашей Фейсбук-странице или в пособии «Как читать SCORE?». 
     

    Словарь SCORE

    • Желаемые результаты: Обозначенные желаемые и приоритетные нормативные цели, касающиеся оценки и укрепления социальной сплоченности в определенном контексте (то есть гармония между группами, смягчение тенденций насилия, соблюдение прав человека). Эти результаты перечислены в разделе измерений на платформе SCORE, но их не следует путать с категориальными / тематическими классификациями. Другие измерения, перечисленные на платформе SCORE — это категории, в которых тематически сгруппированы различные показатели.
    • Показатели: Компоненты концептуальной модели переводятся в метрики и показатели, которые можно измерить через опрос общественного мнения. Каждый показатель, измеряющий определенное явление (такое, как экономическая безопасность, дискриминация в отношении аутгрупп, приверженность правам человека), поддержка определенных аспектов политики, посттравматическое стрессовое расстройство и т.п.), обычно оценивается на основе как минимум 3 пунктов опросника, масштабируемых в соответствии с тестами на достоверность, чтобы убедиться, что SCORE может надежно зафиксировать различные аспекты динамики, лежащие в основе этого показателя.
    • Движущие силы / Прогностические показатели: Показатели, имеющие сильное положительное или отрицательное влияние на желаемый результат, называются движущими силами, или прогностическими показателями. Они указывают на стратегические точки входа, где есть наибольшая вероятность влияния на желаемый результат. Их можно увидеть в разделе «Анализ взаимосвязей».
    • Тепловые карты: Для каждого показателя рассчитывается определенное количество баллов. Значения варьируются от 0 до 10, где 0 означает, что явление, измеряемое данным показателем, вообще не наблюдается в исследуемом контексте, а 10 — что оно наблюдается четко и повсеместно. Тепловые карты показывают региональные различия для значений показателей и дают возможность выявить проблемные территории и, соответственно, более точно спланировать интервенции. Например, показатель личной безопасности измеряется с помощью таких вопросов:
      • Насколько вы чувствуете себя в безопасности от насилия в повседневной жизни?
      • Насколько вы уверены в том, что полиция или другие институции могут защитить вас от насилия?
      • Насколько вы чувствовали бы себя в безопасности, гуляя ночью по улице?

    Оценка 0 для личной безопасности означает, что никто в определенном регионе не чувствует себя в безопасности на индивидуальном уровне, а 10 означает, что каждый человек чувствует себя абсолютно безопасно. Таким образом, тепловая карта личной безопасности для Украины отражает значение показателя для каждой области, благодаря чему можно понять разницу уровней личной безопасности в различных регионах Украины.

    • Анализ взаимосвязей (прогностические модели): Прогностические модели базируются на сложном статистическом анализе, в том числе регрессионном моделировании, сетевом анализе и моделировании структурных уравнений, и изучают взаимосвязи между различными показателями и желаемыми результатами. Прогностические модели определяют показатели, которые могут иметь эффект усиления или ослабления тех или иных показателей или результатов. Если первую волну SCORE можно использовать для выявления прямых взаимосвязей и стартовых значений показателей, то вторая и третья волны SCORE позволяют проводить сравнение во времени и могут помочь выявить тенденции и причинно-следственные связи. Цвет линий, соединяющих показатели и результаты, отражает характер связи: голубой обозначает положительную корреляцию, а красный — отрицательную. Толщина линий обозначает t (интенсивность) корреляции — чем толще линия, тем сильнее взаимосвязь. Этот раздел содержит краткий обзор методологии SCORE. Чтобы подробнее изучить методологию SCORE, вы можете скачать руководство по SCORE или просмотреть другие публикации SCORE.