Как данные WLCE Index собираются

Открытый опрос для охвата и отдельная случайная выборка для показателя страны

Для организаций-партнёров Принять участие

Два способа сбора, две задачи

В Women’s Life-Cycle Economy Index (WLCE Index) запланированы два способа сбора ответов.

Открытый опрос: женщина отвечает онлайн или лично через организацию-партнёра, на одном из языков, доступных в её стране, и её ответ помогает показать всё разнообразие женского опыта. Отдельная случайная выборка в каждой стране исследования (ориентир: около 2 000 женщин): только её ответы войдут в опросную составляющую показателя страны. Пилот проверит эту схему.

ОхватОценки
Что этоАнкеты открытого опроса, онлайн и офлайн, прошедшие проверки качестваСтраны, где сформирована отдельная случайная выборка с заранее установленным минимальным размером (считается после взвешивания)
Что это даётРедкие ситуации, подгруппы, проблемы, которые женщины описывают своими словами, и женщины, согласные ответить снова в следующие годы (панель повторных участников)Показатель страны, его интервал неопределённости и диапазон возможных позиций
Чего это не может показатьМесто страны в сравнении и то, насколько ситуация распространена среди всех женщин страныРедкие ситуации: в выборке примерно из 2 000 женщин их слишком мало

Открытый опрос даёт охват: анкеты, прошедшие проверки качества, показывают широкий спектр жизненных ситуаций. Случайная выборка даёт опросную составляющую показателя страны. Затем эта составляющая сопоставляется с анализом правил и с международными нормами, которые закрепит методология (например, отпуск по беременности и родам не менее 14 недель по Конвенции МОТ № 183).

Оценка будет публиковаться вместе с мерами её неопределённости и ограничениями данных, а отдельная проверка покажет, насколько изменилось бы место страны при других допустимых способах расчёта индекса.

Страна войдёт в сравнение, когда проверки по заранее опубликованным критериям подтвердят, что её данные хорошего качества, их достаточно и их можно сравнивать с данными других стран; до этого она получит профиль страны и карту неучтённых точек. Неучтённая точка (Unconsidered Point): точка женского жизненного цикла, в которой система не увидела женщину, когда проектировала правило.

Зачем большому открытому опросу случайная выборка

Если одним женщинам попасть в опрос легче, чем другим, результат смещается в сторону их опыта, и само по себе большее число ответов это смещение не устраняет.

В открытом опросе никто не знает, кто увидел приглашение, а кто нет.

Статистик Xiao-Li Meng оценил смещение отбора в опросах перед выборами 2016 года в США и показал расчётом, что при таком смещении даже 2,3 миллиона ответов, около 1 процента избирателей с правом голоса, дали бы ту же ошибку, что простая случайная выборка примерно из 400 человек. Взвешивание (корректировка того, какой вес каждая группа женщин имеет в общем результате) сокращает этот разрыв, но не устраняет его.

Для WLCE Index это ещё важнее: причина, по которой женщина отвечает или остаётся в стороне (уход за родственниками, пережитая дискриминация, доступ к интернету), и есть то, что измеряет индекс. Поэтому показатель страны учитывает только ответы случайной выборки.

У каждой страны своя случайная выборка

В каждой стране исследования будет своя случайная выборка (страновая вероятностная выборка). Для каждой страны методология определит, каких женщин охватывает исследование и как проводится отбор; у каждой женщины из этой группы будет известная вероятность попасть в выборку, как в лотерее. Ориентир для выборки страны: около 2 000 участников; точный размер будет зависеть от схемы отбора, ожидаемой доли ответивших и требуемой точности. Ограничения охвата и достигнутый размер выборки будут опубликованы вместе с результатами.

Схема отбора зависит от страны

Телефонные интервью там, где телефон есть у достаточного числа людей; личные интервью по случайно отобранным адресам или домохозяйствам во всех остальных случаях; онлайн-панели только там, где участники панели сами были отобраны случайно.

Отбор по схеме, а не по приглашению

Участники выборки отбираются по заранее установленной схеме. Открытые приглашения через Womafreesm и организации-партнёры относятся к открытому опросу; организация-партнёр, которая проводит интервью для выборки, следует протоколу выборки.

Те же вопросы

Случайная выборка отвечает на те же основные вопросы, что и открытый опрос, поэтому в каждой стране исследования результаты покажут, насколько ответы открытого опроса расходятся с ответами случайной выборки, как до взвешивания, так и после него.

Три числа для каждой страны

Скольким ответам на деле соответствует выборка после взвешивания, как схема отбора и взвешивание повлияли на точность и какая доля приглашённых женщин действительно ответила: всё это публикуется до того, как страна войдёт в сравнение.

Модель взята из программ с опытом в несколько десятилетий: European Social Survey, World Values Survey, Gallup World Poll и Demographic and Health Surveys работают со случайными выборками, размер которых определяется исследовательской задачей и требуемой точностью.

Как участвуют женщины
без надёжного интернета

Данные будут поступать по двум каналам: онлайн через платформу программы и офлайн через организации-партнёры, женские объединения, медицинские центры и местные площадки.

Офлайн-сбор планируется так, чтобы возможность участвовать меньше зависела от доступа к интернету. Такие ответы войдут в опросную составляющую показателя страны, только если женщины были отобраны по схеме случайной выборки; ответы женщин, которых партнёр пригласил сам, пополнят базу женского опыта.

Меры безопасности будут установлены и для онлайн-, и для офлайн-сбора с учётом условий участия; для вопросов о насилии правила безопасности будут опираться на рекомендации Всемирной организации здравоохранения по исследованиям домашнего насилия в отношении женщин (2001). Для личных интервью отдельный протокол офлайн-сбора определит, как выбираются места проведения, как интервьюеров готовят и допускают к работе, как обеспечивается конфиденциальность разговора, как шифруются данные и получается согласие, и когда интервью прекращается, если безопасное участие невозможно.

Как выбираются языки опроса

Язык выбирают, исходя из того, кто без него остался бы в стороне.

Как минимум включается каждый язык, родной хотя бы для 5 процентов населения страны (такой порог применяет European Social Survey); язык меньшей группы тоже включается, если без него была бы упущена значительная доля женщин в определённой жизненной ситуации. Каждую национальную версию переведёт команда, её проверят, утвердят и протестируют с женщинами этой страны; решения по ключевым терминам будут зафиксированы. Проверка должна установить, одинаково ли женщины понимают смысл вопросов и вариантов ответа на разных языках. Перед началом опроса каждая женщина увидит языки, доступные в её стране.

Какие анкеты засчитываются

Анкета засчитывается в общий итог программы, когда одновременно выполнены все условия: женщине 18 лет или больше, она дала согласие, дошла до конца основной анкеты, и анкета прошла проверки качества, включая проверки на дубликаты, ботов и мошенничество.

Программа рассчитана на 2 000 000 анкет, и в этот итог засчитываются анкеты всех путей сбора: открытого опроса, случайных выборок и повторных волн.

Анкета участника в следующей волне не является дубликатом, поэтому рядом с числом анкет публикуется число ответивших женщин. Пропущенные вопросы не мешают засчитать анкету: отказ отвечать на чувствительные вопросы записывается как решение женщины, а правила, которые будут опубликованы, определят, как обрабатываются пропуски в каждом анализе. Незавершённые анкеты не засчитываются; в рамках согласия участника они помогают понять, где анкету нужно улучшить. Правила проверки и исключения будут опубликованы; как защищены ответы, описано на странице об этике.

Что проверит пилот

В каждой пилотной стране параллельно с открытым опросом будет проводиться случайная выборка, чтобы два способа сбора можно было сравнить.

Пилот также покажет, выполним ли план сбора: темп набора участников, стоимость, долю завершённых анкет, охват разных групп женщин и безопасность участия. По его результатам план масштабирования будет уточнён. Пилот проверяет инструмент и не является первым выпуском индекса.

Статус WLCE Index и пилота

FAQ

1. Сделают ли два миллиона анкет результаты репрезентативными?

Нет, и Women’s Life-Cycle Economy Index (WLCE Index) этого не утверждает. Программа рассчитана на 2 000 000 анкет, прошедших проверку качества, по всем путям сбора: они сделают видимыми редкие ситуации и разные жизненные пути. Опросная составляющая показателя страны рассчитывается по отдельной случайной выборке, потому что в открытом опросе никто не знает, кто увидел приглашение.