Як WLCE Index вимірює

Як правила враховують життя жінок і що жінки отримують насправді

Для дослідників Глосарій

Парне вимірювання (paired measurement):
одне рішення, виміряне двічі

Правило надає жінці відпустку, пенсію, прийом у лікаря чи кредит. Індекс порівнює його з еталоном і з тим, що вона отримала насправді.

Women's Life-Cycle Economy Index (WLCE Index), який розробляє Womafreesm, оцінюватиме зміст правил і результати їх застосування впродовж життя жінок. Для кожного рішення дослідники порівняють правило із зовнішнім еталоном, а потім порівняють те, що воно надає, із досвідом жінок. Відсутність механізму та прогалини в даних позначаються окремо.

Ці два порівняння одного рішення складають парне вимірювання, одиницю Індексу. Неврахована точка (Unconsidered Point) це точка жіночого життєвого циклу, у якій система не побачила жінку, коли проєктувала правило. Вона виникає у трьох випадках, які можуть збігатися: правило не дотягує до еталона, правило існує, але жінка його не отримала, або правила немає взагалі. Індекс показує це як дві відстані: Недоурахування (Consideration Deficit), від еталона до правила, і Тиха відмова (Silent Denial), від правила до того, що жінка отримала.

Візьмімо оплачувану відпустку у зв'язку з вагітністю та пологами в одній країні. Закон є однією стороною пари, а еталон тут становить щонайменше 14 тижнів за Конвенцією МОП № 183. Те, що насправді отримали жінки цієї країни, які народили, є іншою стороною. Якщо такого правила в країні немає, його відсутність перевіряють за джерелами та за іншими способами забезпечити те саме право, а значення фіксують за правилом кодування, яке буде опубліковано до пілота.

Інституційна сторона фіксує, що надає правило, хто це надає, на який строк, за яких умов і в якому документі, із джерелом і датою. Відсутність правила фіксують так само докладно: що шукали, у яких джерелах і станом на яку дату, щоб нуль був фактом, який можна перевірити.

Сторона досвіду фіксує, що сталося з жінкою, яка пройшла через це рішення: чи знала вона про своє право, чи змогла ним скористатися і чого це їй коштувало. Якщо правила немає, ця сторона фіксує, що сталося з нею без нього і чим вона заповнила його відсутність.

Опитування саме по собі показує, що повідомляють жінки. Закон сам по собі показує, що написано в тексті. Інституційне врахування це порівняння двох сторін, і саме його вимірює Індекс. Порівняння може показати й те, що правило відповідає еталону і виконується. Відставання від еталона і розрив у застосуванні можуть траплятися в одному рішенні, і обидва фіксуються окремо.

Кожне парне вимірювання (paired measurement) описують три координати.

Етап життєвого циклу

Коли рішення постало в її житті: вагітність і пологи, відновлення після пологів, догляд за дітьми й старшими родичами, пауза в кар'єрі, повернення на роботу, менопауза, літній вік і міграція за кордон.

Система рішень

Де діє правило: ринок праці, охорона здоров'я, соціальний захист і пенсії, право, фінанси та страхування, ШІ та цифрові системи, ринок. Ця координата показує, до кого звертатися за виправленням.

Функція рішення

Дія, яку система тут виконує щодо жінки: надає доступ, розподіляє, компенсує, захищає або визнає. Виплату можуть схвалити (доступ), а платіж за нею дорівнюватиме нулю (компенсація).

Гіпотетичний приклад:
відпустка й еталон 14 тижнів

Передбачено правиломОтримано на практиціЩо показує порівняння
14 тижнів14 тижнівЗа цим показником правило відповідає еталону і виконується
14 тижнів8 тижнівВиникає розрив у застосуванні правила
8 тижнів8 тижнівПравило виконується, але його зміст не дотягує до еталона
8 тижнів6 тижнівЄ відставання від еталона і додатковий розрив у застосуванні

Один показник, тривалість відпустки у зв'язку з вагітністю та пологами, порівняно з еталоном 14 тижнів. Що показує порівняння двох сторін.

Перша відстань, між еталоном і правилом, показує Недоурахування (Consideration Deficit). Друга, між правилом і отриманим, показує Тиху відмову (Silent Denial). Одне-єдине віднімання приховало б третій рядок: правило й практика збігаються, але жінка отримує менше за еталон.

Чому Індекс показує дві відстані

Одне віднімання, правило мінус практика, приховує найгірший випадок.

Де закон слабкий і практика така сама слабка, різниця дорівнює нулю, а нуль читався б як «розриву немає».

Тому Індекс показує дві відстані. Першу вимірюють на самому правилі. Другу вимірюють на шляху від правила до жінки.

Між правом і результатом є ланцюг із чотирьох ланок, і втрату приписують одній із них.

Саме назва ланки перетворює висновок на те, що може виправити міністерство чи роботодавець. Різниця між наданим і отриманим сама по собі не пояснює причину: щоб віднести випадок до певної ланки, потрібна додаткова інформація. Правила для випадків, коли зачеплено кілька ланок або даних недостатньо для встановлення причини, стануть частиною методології.

Визнання

система бачить, що ця жінка відповідає умовам.

Право

право формально надано їй.

Операційна спроможність

система здатна його забезпечити.

Використання

вона справді ним користується.

Недоурахування (Consideration Deficit)

Наскільки інституційне правило не дотягує до еталона ще до того, як хтось спробував ним скористатися. Саме правило розроблено для чогось меншого, ніж ціле життя. Цю відстань вимірюють лише на правилі, порівняно з еталоном у картці вимірювання, ще до опитування будь-якої жінки.

Приклад: еталон для захисту материнства становить щонайменше 14 тижнів відпустки у зв'язку з вагітністю та пологами за Конвенцією МОП № 183. Закон, який надає менше тижнів, містить Недоурахування ще до того, як хоч одна жінка подасть заяву на відпустку.

Тиха відмова (Silent Denial)

Право є, жінка його не отримала, і відмови їй ніхто не оголошував. Вимірюється як відстань зі знаком між тим, що надає правило, і тим, що отримано, та приписується ланці, де сталася втрата: визнання, право, операційна спроможність або використання.

Знак має значення. Додатний: жінка отримала менше, ніж передбачає правило. Від'ємний: практика випереджає закон, наприклад коли роботодавець надає більше відпустки, ніж вимагає закон. Таке буває, і це має залишатися видимим.

У дослідженнях соціальних виплат використовують поняття невикористання (non-take-up): ситуації, коли люди, які мають право на виплату, залишаються без неї. Причини можуть бути в інформації, процедурах, роботі організацій та обставинах людини. Методологія WLCE Index окремо опише, як показник Тихої відмови (Silent Denial) співвідноситься з цим поняттям і в яких сферах він застосовується.

Нуль може означати дві різні речі: правило, яке працює, або правило й практику, які разом не спрацьовують.

Відсутнє правило, прогалина в даних і відсутній еталон

Правило, якого не існує, теж вирішує її життя.

Відсутність механізму фіксують після перевірки відповідних джерел і альтернативних способів забезпечити те саме право чи можливість. Значення показника визначить правило кодування, опубліковане заздалегідь. Прогалини в даних і відсутність затвердженого еталона позначають окремо.

Методологія розрізняє чотири стани:

Підтверджено відсутність механізму, передбаченого методологією

Результат перевірки за встановленим правилом кодування.

Інформацію про механізм вдалося знайти або підтвердити лише частково

Прогалина в даних.

Для показника немає затвердженого еталона в методології WLCE Index

Відкрите методологічне питання; таке парне вимірювання (paired measurement) публікують як прогалину з приміткою.

Показник виходить за межі конкретного рішення

Не застосовується, з поясненням.

Правила кодування для всіх чотирьох станів буде опубліковано разом із попередньою формулою до пілота. Мапа Неврахованих точок (Unconsidered Point) показує і підтверджену відсутність механізму, і прогалини.

Для кожного показника заздалегідь вирішують, хто входить до розрахунку і чому.

Дослідження окремо розглядає охоплення правилом, доступ до подання заяви й отримання результату: це показує, на якому етапі жінки випадають із процесу, передбаченого правилом. Відпустку після пологів вимірюють серед тих, хто народив. Пенсійний стаж за роки догляду серед тих, хто доглядав за родичем. Скринінг серед жінок того віку, для якого він призначений. Кредит серед жінок, яким він був потрібен, зокрема тих, кому бар'єри завадили подати заяву.

Візьміть групу ширшу чи вужчу, і цифра описуватиме інших жінок, а помилка залишиться непоміченою.

Чотири рівні,
кожен оцінюється окремо

Закон існує на рівні країни. HR-політика існує на рівні організації. Система ШІ існує на рівні продукту. Відповідь жінки існує на рівні людини. Тому кожне парне вимірювання (paired measurement) на рівні країни спершу оцінюють окремо, з власною похибкою, і лише потім воно входить до загальної оцінки, яка поєднує окремі показники.

Індивідуальні відповіді можна пов'язати з характеристиками країни, організації чи продукту. Аналіз ураховує, яка інформація належить до кожного рівня і які спостереження пов'язані між собою: одне значення країни, повторене в тисячах анкет, залишається одним спостереженням на рівні країни. Середнє за відповідями жінок описує жінок, а не текст закону, а середнє по країні нічого не говорить про окрему жінку.

Саме тому зв'язок між правилом і тим, що сталося з жінками, вивчають на псевдонімізованих даних на рівні жінки всередині захищеного дослідницького середовища, за допомогою моделі, яка розділяє рівні.

Звідки береться інституційна сторона

Інституційну сторону кодують за опублікованими джерелами: кожне правило переносять у поля картки з названого документа.

Дані із зовнішніх баз використовують після перевірки їх відповідності визначенню показника, досліджуваній групі та періоду спостереження. Для кожного запису зберігають посилання на джерело та опис необхідних перетворень. Правила, яких ці бази не охоплюють, програма кодує сама.

Тому власний аудит систем ШІ, який проводить Індекс, і мапа законів та правил є частиною самого розрахунку: вони дають інституційну сторону кожної пари.

Власна методологія Індексу визначає його охоплення за країнами.

Як WLCE Index порівнюється з іншими індексами

Дев'ять субіндексів виходять з однієї матриці

Базовий шар це матриця: таблиця, де збоку етапи життєвого циклу, зверху системи рішень, а на кожному перетині парне вимірювання (paired measurement).

Дев'ять субіндексів це тематичні показники, розраховані на основі цієї спільної системи вимірювань. Кожен збирає парні вимірювання однієї теми, наприклад навантаження доглядом, на всіх етапах і в усіх системах, тому кожен субіндекс зводиться до тих самих вимірювань. Їхні робочі назви наведено в глосарії; остаточні назви та визначення буде опубліковано разом із методологічною запискою пілота.

Буде опубліковано обидва подання, матрицю й дев'ять субіндексів, щоб читач міг запитати або «Де в її житті вона випадає з розрахунку?», або «Яку оцінку має ця країна за навантаженням доглядом?». Кожен індикатор має тег етапу й тег системи, тому обидва подання виходять з тих самих даних, закодованих один раз.

П'ять рішень, зафіксованих у формулі до глобальної хвилі

Попередню формулу та план її перевірки буде опубліковано до пілота; версію 1, підготовлену після пілота, фіксують до першої глобальної хвилі опитування, щоб її можна було критикувати ще до появи першого результату. Після цього будь-яка зміна стає новою нумерованою версією з публічним поясненням причин.

Ще розробляється і має увійти до попередньої формули з розрахунковим числовим прикладом: як Недоурахування (Consideration Deficit) і Тиху відмову (Silent Denial) переводять у шкалу від 0 до 100 та поєднують в одному парному вимірюванні (paired measurement), як обробляють від'ємне значення показника Тихої відмови, як обробляють відсутній еталон і прогалини в даних і як запобігають подвійному врахуванню одного показника в кількох субіндексах.

Оцінку, яку можна розібрати, можна й захистити.

Кожну оцінку можна розібрати. Оцінку країни можна простежити до окремих індикаторів, з яких вона склалася, а Індекс перевіряють за наявними зовнішніми індикаторами через кореляцію та регресію: де він із ними збігається, а де розходиться.

Що буде опубліковано щодо кожної країни

  1. Оцінка з двома інтервалами невизначеності

    Інтервал, який ураховує спосіб відбору учасників, розмір вибірки та застосовані ваги, і діапазон результатів за перевіреними варіантами розрахунку.

  2. Діапазон можливих позицій

    Замість однієї точної позиції.

  3. Імовірність потрапити до групи країн

    Частка перевірених сценаріїв розрахунку, у яких країна потрапляє до кожної групи (рівня) порівняння.

  4. Мапа Неврахованих точок (Unconsidered Point)

    За етапами життєвого циклу: де обставини жінок випадають із розрахунку.

  5. Ланка, де сталася втрата

    Для кожного висновку ланка ланцюга: визнання, право, операційна спроможність або використання.

Якщо надто мало жінок пройшли через рішення і оцінка не може бути надійною, результат буде опубліковано з приміткою «недостатньо даних для надійної оцінки».

Країна входить до порівняння за чотирьох умов: імовірнісна вибірка (окрема вибірка жінок цієї країни, відібрана випадково й окремо від відкритого опитування), достатність даних, їхня якість і порівнянність.

Відкрите опитування дає широту, підгрупи та рідкісні ситуації; імовірнісна вибірка дає оцінку країни. Країна, яка не пройшла перевірку, отримає профіль і мапу Неврахованих точок (Unconsidered Point), а її місце в порівнянні чекатиме, доки умови не буде виконано.

Що насправді говорить кожне число

Індекс говорить саме те, що виміряв, і кожне число супроводжується приміткою про матеріал, на якому воно ґрунтується.

Одна хвиля опитування показує стан на момент опитування: що надає правило і що отримали жінки, яких воно стосується. Повторні опитування дадуть змогу вивчати зміни в часі. Чи можна оцінити причинний вплив конкретного рішення, залежатиме від дизайну дослідження та припущень аналізу.

Документи системи ШІ та її поведінку оцінюють окремо: наявність у системи потрібних процедур це одна оцінка, а те, що вона насправді робить із жінками, інша. Виконання вимог регулятора враховується в першій оцінці, а друга показує, чи збігаються вони.

Пілот 1-го року випробовує сам інструмент, зокрема чи вимірюють запитання те, що заявляють, чи працюють вони однаково в різних країнах і мовах і наскільки стабільні позиції країн.

Для кожної країни Індекс опублікує оцінку з її інтервалами невизначеності, діапазон можливих позицій та ймовірність потрапити до групи країн, а не одне точне місце в таблиці: саме це зберігає чесність числа. Ваги це ціннісний вибір, заздалегідь оголошений у методологічній записці й відкритий для оскарження там і через звіт зовнішнього статистичного аудитора, який буде опубліковано разом з Індексом.

FAQ

1. Що є одиницею вимірювання у WLCE Index?

Парне вимірювання (paired measurement): одне інституційне рішення, виміряне двічі, як правило написане і як його пережила жінка, яка через нього пройшла. Якщо правило нижче еталона, не доходить до неї або відсутнє, парне вимірювання фіксує Невраховану точку (Unconsidered Point), одиницю спостереження Індексу: точку жіночого життєвого циклу, у якій система не побачила жінку, коли проєктувала правило.

2. Що таке функція рішення у WLCE Index?

Відповідь незабаром буде опубліковано тут.

3. Чому WLCE Index показує дві відстані, а не один розрив?

Відповідь незабаром буде опубліковано тут.

4. Що таке Тиха відмова (Silent Denial) у WLCE Index?

Відповідь незабаром буде опубліковано тут.

5. Звідки WLCE Index бере інституційні дані?

Відповідь незабаром буде опубліковано тут.

6. Як оцінки країн відокремлюються від індивідуальних відповідей?

Відповідь незабаром буде опубліковано тут.

7. Коли формулу WLCE Index буде зафіксовано?

Відповідь незабаром буде опубліковано тут.