Как в WLCE Index устроено измерение

Как правила учитывают женскую жизнь и что женщины получают на практике

Исследователям Глоссарий

Парное измерение:
одно решение, измеренное дважды

Правило предусматривает для женщины отпуск, пенсию, приём у врача или кредит. Индекс сопоставляет его с эталоном и с тем, что она получила на деле.

Women's Life-Cycle Economy Index (WLCE Index), который разрабатывает Womafreesm, будет оценивать содержание правил и результаты их применения на всех этапах женской жизни. Для каждого решения исследователи сопоставят правило с внешним эталоном, а затем сравнят предусмотренное с опытом женщин, которых оно касается. Отсутствие механизма и пробелы в данных отмечаются отдельно.

Эти два сравнения одного решения составляют парное измерение (paired measurement), единицу Индекса. Неучтённая точка (Unconsidered Point) это точка женского жизненного цикла, в которой система не увидела женщину, когда проектировала правило. Она возникает в трёх случаях, которые могут совпадать: правило уступает эталону, правило есть, а женщина его не получила, или правила нет вообще. Индекс показывает это двумя расстояниями: Недоучтение (Consideration Deficit), от эталона до правила, и Тихий отказ (Silent Denial), от правила до того, что получила женщина.

Возьмём оплачиваемый отпуск по беременности и родам в одной стране. Закон это одна сторона пары, эталон здесь не менее 14 недель по Конвенции МОТ 183. Что получили женщины этой страны, у которых родился ребёнок, это другая сторона. Если в стране нет такого правила, его отсутствие проверяется по источникам и по другим способам обеспечения того же права, и значение записывается по правилу кодирования, которое будет опубликовано до пилота.

Институциональная сторона фиксирует, что предусмотрено правилом, кем, на какой срок, при каких условиях и каким документом это подтверждено, с указанием источника и даты. Отсутствие правила записывается так же подробно: что искали, в каких источниках и на какую дату, чтобы ноль был проверяемым фактом.

Сторона опыта фиксирует, что произошло с женщиной, которая через это решение прошла: знала ли она о своём праве, смогла ли им воспользоваться и чего ей это стоило. Там, где правила нет, эта сторона фиксирует, что происходило с ней без него и чем она закрывала его отсутствие.

Опрос сам по себе показывает, что сообщают женщины. Закон сам по себе показывает, что написано в тексте. Институциональный учёт это сопоставление двух сторон, и именно его измеряет Индекс. Сопоставление может показать и то, что правило соответствует эталону и выполняется. Отклонение от эталона и разрыв при применении могут встретиться в одном решении, и оба записываются отдельно.

Каждое парное измерение (paired measurement) описывается тремя координатами.

Этап жизненного цикла

Когда в её жизни возникло решение: беременность и роды, восстановление после родов, забота о детях и старших родственниках, карьерная пауза, возвращение на работу, менопауза, возраст, миграция за рубеж.

Система решений

Где действует правило: рынок труда, здравоохранение, социальная защита и пенсии, право, финансы и страхование, AI и цифровые системы, рынок. Эта координата говорит, к кому обращаться за исправлением.

Функция решения

Действие системы в отношении женщины здесь: предоставляет доступ, распределяет, компенсирует, защищает или признаёт. Пособие могут одобрить (доступ), а выплата по нему окажется нулевой (компенсация).

Условный пример:
отпуск и эталон 14 недель

Предусмотрено правиломПолучено на практикеЧто показывает сравнение
14 недель14 недельПо этому показателю правило соответствует эталону и выполняется
14 недель8 недельВозникает разрыв при применении правила
8 недель8 недельПравило выполняется, но его содержание уступает эталону
8 недель6 недельЕсть отклонение от эталона и дополнительный разрыв при применении

Один показатель, продолжительность отпуска по беременности и родам, при эталоне 14 недель. Что показывает сравнение двух сторон.

Первое расстояние, между эталоном и правилом, показывает Недоучтение (Consideration Deficit). Второе, между правилом и полученным, показывает Тихий отказ (Silent Denial). Одно вычитание спрятало бы третью строку: правило и практика совпадают, а женщина получает меньше эталона.

Почему Индекс показывает два расстояния

Одно вычитание, правило минус практика, прячет худший случай.

Там, где закон слабый и практика такая же слабая, разность равна нулю, а ноль читается как «разрыва нет».

Поэтому Индекс показывает два расстояния. Первое измеряется на самом правиле. Второе измеряется на пути от правила к женщине.

Между правом и результатом есть цепочка из четырёх звеньев, и потеря приписывается одному из них.

Названное звено превращает вывод исследования в то, что министерство или работодатель могут исправить. Разность между предусмотренным и полученным сама по себе не объясняет причину: чтобы отнести случай к звену, нужны дополнительные сведения. Правила для случаев, когда затронуты несколько звеньев или данных для определения причины недостаточно, войдут в методологию.

Признание

система видит, что эта женщина подходит под правило.

Назначение права

право формально закреплено за ней.

Операционная способность

система в состоянии его выдать.

Фактическое пользование

она им воспользовалась.

Недоучтение (Consideration Deficit)

Насколько институциональное правило не дотягивает до эталона ещё до того, как кто-то попытался им воспользоваться. Само правило спроектировано не на всю жизнь. Это расстояние измеряется на самом правиле, по эталону из карточки измерения, до всякого опроса женщин.

Пример: эталон охраны материнства это не менее 14 недель отпуска по беременности и родам по Конвенции МОТ 183. Закон, который предусматривает меньше, содержит Недоучтение ещё до того, как хоть одна женщина подала заявление на отпуск.

Тихий отказ (Silent Denial)

Право есть, женщина его не получила, и отказа ей никто не произносил. Измеряется как знаковое расстояние между тем, что правило предусматривает, и тем, что получено, с приписыванием звену, на котором произошла потеря: признание, назначение права, операционная способность, фактическое пользование.

Знак важен. Положительное значение: женщина получила меньше, чем предусматривает правило. Отрицательное: практика опережает закон, например работодатель даёт больше отпуска, чем требует закон. Такое бывает, и это должно быть видно.

В исследованиях социальных выплат используется понятие non-take-up: ситуация, когда люди, имеющие право на выплату, остаются без неё. Его причины могут относиться к информированию, процедурам, работе организаций и обстоятельствам человека. Методология WLCE Index отдельно опишет, как показатель Тихого отказа (Silent Denial) соотносится с этим понятием и в каких областях применяется.

Ноль может значить две разные вещи: правило работает, или правило и практика проваливаются вместе.

Отсутствие правила, пробел в данных и отсутствие эталона

Правило, которого нет, тоже решает её жизнь.

Отсутствие механизма учитывается после проверки соответствующих источников и альтернативных способов обеспечения того же права или возможности. Значение показателя будет определяться заранее опубликованным правилом кодирования. Пробелы в данных и отсутствие утверждённого эталона отмечаются отдельно.

В методологии различаются четыре состояния:

Подтверждено отсутствие предусмотренного методологией механизма

Результат проверки по установленному правилу кодирования.

Сведения о механизме найти или подтвердить удалось лишь частично

Пробел в данных.

Для показателя отсутствует утверждённый эталон в методологии WLCE Index

Открытый методологический вопрос; такое парное измерение (paired measurement) публикуется как пробел с пометкой.

Показатель выходит за область применения конкретного решения

Неприменимость с объяснением.

Правила кодирования для всех четырёх состояний будут опубликованы вместе с предварительной формулой до пилота. Карта неучтённых точек (Unconsidered Points) показывает и подтверждённое отсутствие механизма, и пробелы.

Для каждого показателя заранее определяется, кого включают в расчёт и почему.

Исследование отдельно рассматривает охват правилом, доступ к обращению и получение результата: так видно, на каком этапе женщины выпадают из предусмотренного процесса. Отпуск после родов измеряется среди тех, у кого родился ребёнок. Пенсионный зачёт лет заботы среди тех, кто ухаживал за близким. Скрининг среди женщин того возраста, которому он адресован. Кредит среди женщин, которым он был нужен, включая тех, кому барьеры помешали обратиться.

Если группу взять шире или уже, цифра опишет других женщин, и ошибка останется незаметной.

Четыре уровня,
каждый оценивается отдельно

Закон существует на уровне страны. HR-политика на уровне организации. AI-система на уровне продукта. Ответ женщины на уровне человека. Поэтому сначала оценивается каждое парное измерение (paired measurement) по стране со своей погрешностью, и только потом оно входит в итоговый балл, объединяющий отдельные показатели.

Индивидуальные ответы могут связываться с характеристиками страны, организации или продукта. При анализе учитывается, какие сведения относятся к каждому уровню и какие наблюдения связаны между собой: одно страновое значение, повторённое в тысячах анкет, остаётся одним наблюдением уровня страны. Среднее по ответам женщин описывает женщин, а не текст закона, и страновое среднее ничего не говорит об отдельной женщине.

Поэтому связь правила с тем, что произошло с женщинами, изучается на псевдонимизированных данных уровня женщины внутри защищённой исследовательской среды, с моделью, которая держит уровни раздельно.

Откуда берётся институциональная сторона

Институциональная сторона кодируется из опубликованных источников: каждое правило переносится в поля карточки из названного документа.

Данные внешних баз используются после проверки их соответствия определению показателя, исследуемой группе и периоду наблюдения. Для каждой записи сохраняется ссылка на источник и описание необходимых преобразований. Программа сама кодирует правила, которые в этих базах отсутствуют.

Поэтому собственный аудит AI-систем Индекса и карта законов и правил входят в сам расчёт: они дают институциональную сторону каждой пары.

Область охвата Индекса по странам определяет его методология.

Как WLCE Index соотносится с другими индексами

Девять субиндексов считаются из одной матрицы

Базовый слой это матрица: таблица, где по строкам этапы жизни, по столбцам системы решений, а на пересечении парное измерение (paired measurement).

Девять субиндексов это тематические показатели, рассчитанные из этой общей системы измерений. Каждый собирает парные измерения одной темы, например нагрузки заботы, по всем этапам и системам, поэтому каждый субиндекс прослеживается до тех же измерений. Рабочие имена приведены в глоссарии; окончательные имена и определения выйдут с методологической запиской пилота.

Будут публиковаться оба представления, матрица и девять субиндексов, чтобы читатель мог спросить либо «Где именно в её жизни она выпадает из расчёта?», либо «Как страна выглядит по нагрузке заботы?». У каждого индикатора есть метка этапа и метка системы, поэтому оба представления получаются из одних данных, закодированных один раз.

Пять решений о формуле, закреплённых до глобальной волны

Предварительная формула и план её проверки будут опубликованы до пилота; версия 1 по итогам пилота фиксируется до первой глобальной волны опроса, чтобы её можно было критиковать до появления первого результата. После этого любое изменение становится новой пронумерованной версией с публичным объяснением причин.

Ещё разрабатывается и войдёт в предварительную формулу с числовым примером: как Недоучтение (Consideration Deficit) и Тихий отказ (Silent Denial) переводятся в шкалу от 0 до 100 и объединяются внутри одного парного измерения (paired measurement), как учитывается отрицательное значение Тихого отказа, как обрабатываются отсутствие эталона и пробелы в данных и как исключается повторный учёт одного показателя в нескольких субиндексах.

Балл, который можно разобрать, можно и защитить.

Каждый балл раскладывается на части. Балл страны прослеживается обратно до отдельных показателей, из которых он сложен, а сам Индекс сверяется с существующими внешними индикаторами через корреляции и регрессии: где он с ними согласуется, а где расходится.

Что будет опубликовано по каждой стране

  1. Балл с двумя интервалами неопределённости

    Интервал, учитывающий способ отбора участниц, объём выборки и применённые веса, и диапазон результатов при проверенных вариантах расчёта.

  2. Диапазон возможных мест

    Вместо одного точного места.

  3. Вероятность попадания в группу стран

    Доля проверенных расчётных сценариев, в которых страна оказалась в каждой из групп (tier) сравнения.

  4. Карта неучтённых точек (Unconsidered Points)

    По этапам жизненного цикла: где обстоятельства женщин выпадают из расчёта.

  5. Звено, на котором произошла потеря

    По каждому выводу звено цепочки: признание, назначение права, операционная способность или фактическое пользование.

Там, где через решение прошло слишком мало женщин, чтобы оценка была надёжной, результат будет опубликован с пометкой «данных недостаточно для надёжной оценки».

Страна входит в сравнение при четырёх условиях: случайная выборка (отдельная выборка женщин этой страны, отобранных случайно и отдельно от открытого опроса), достаточность данных, их качество и сопоставимость.

Открытый опрос даёт широту, подгруппы и редкие ситуации, случайная выборка даёт страновую оценку. Страна, не прошедшая проверку, получит профиль и карту неучтённых точек (Unconsidered Points), а её место в сравнении ждёт выполнения условий.

Что именно говорит каждая цифра

Индекс говорит ровно то, что измерил, и каждая цифра идёт с указанием, на каком материале она получена.

Одна волна опроса показывает состояние на момент опроса: что предусмотрено правилом и что получили женщины, которых оно касается. Повторные опросы позволят изучать изменения во времени. Возможность оценивать причинное влияние конкретного решения будет определяться дизайном исследования и допущениями анализа.

Бумаги и поведение AI-системы считаются отдельно: есть ли у системы нужные процедуры, это один балл, а что она реально делает с женщинами, другой. Соответствие требованиям регулятора идёт в первый балл, и второй балл показывает, совпало ли одно с другим.

Пилот первого года проверяет сам инструмент, в том числе измеряют ли вопросы то, что заявлено, одинаково ли они работают в разных странах и языках и насколько устойчиво положение стран.

По каждой стране Индекс будет публиковать балл с интервалами неопределённости, диапазон возможных мест и вероятность попадания в группу стран, а не одно точное место в таблице: так цифра остаётся честной. Веса это ценностный выбор, объявленный заранее в методологической записке, и его можно будет оспорить там же и через отчёт внешнего статистического аудитора, который будет опубликован рядом с Индексом.

FAQ

1. Что является единицей измерения в WLCE Index?

Парное измерение (paired measurement): одно институциональное решение, измеренное дважды, как оно записано в правиле и как его прошла женщина. Там, где правило уступает эталону, не доходит до женщины или его нет вообще, парное измерение фиксирует неучтённую точку (Unconsidered Point), единицу наблюдения WLCE Index: точку женского жизненного цикла, в которой система не увидела женщину, когда проектировала правило.

2. Что такое функция решения (Decision Function) в WLCE Index?

Ответ скоро будет опубликован здесь.

3. Почему WLCE Index показывает два расстояния вместо одного разрыва?

Ответ скоро будет опубликован здесь.

4. Что такое Тихий отказ (Silent Denial) в WLCE Index?

Ответ скоро будет опубликован здесь.

5. Откуда WLCE Index берёт институциональные данные?

Ответ скоро будет опубликован здесь.

6. Как страновые баллы отделены от индивидуальных ответов?

Ответ скоро будет опубликован здесь.

7. Когда будет зафиксирована формула WLCE Index?

Ответ скоро будет опубликован здесь.