ПМ-09. Встроенный дизайн оценки (evaluation-by-design)

--- id: ПМ-09 type: metric status: dev cluster: методология created: 2026-07-19 checked: 2026-07-21 perishable: [статусы фронтир-программ с де-факто дизайном (UK cap, congé de naissance, Rx Kids, сингапурское РКИ), даты отсечки]

Содержание

§1. Что это [понятие]

Встроенный дизайн оценки — мера, спроектированная так, что её причинный эффект на рождаемость (или промежуточный исход) можно измерить: раскатка сама создаёт группу сравнения. Инструменты:

• РКИ / лотерея очереди — доступ к мере распределяется случайно (жребий при избытке заявок на ограниченные места/деньги); получившие и не получившие сравнимы по построению.
• Поэтапная раскатка по регионам (staggered rollout) — мера вводится волнами в разное время в разных территориях; ещё-не-охваченные служат контролем для уже-охваченных (= квазиэксперимент, staggered DiD).
• Регионы-контроли — часть сопоставимых территорий намеренно не включается (или включается позже), давая контрфакт «что было бы без меры».
• Разрыв по дате отсечки (RDD во времени / interrupted time series) — право зависит от даты рождения/подачи; дети, рождённые за день до и за день после порога, почти идентичны, а обращение с ними разное.
• Разрыв по порогу дохода (RDD по признаку) — право обрывается на пороге (ISEE, прожиточный минимум); семьи чуть выше и чуть ниже порога сравнимы.
• Предрегистрация плана оценки — гипотезы, исходы и метод фиксируются публично ДО раскатки, что исключает подгонку выводов задним числом.

§2. Как получены лучшие оценки базы [факт, из наших узлов]

Ключевой факт: сильнейшие каузальные оценки корпуса добыты из контрастов, которые раскатка создала непреднамеренно.

• Немецкие ясли — региональная вариация (DiD) [из узла МП-04 Детская инфраструктура]: экспансия детсадов по 325 округам Зап. Германии, 2005–2008; +10 п.п. охвата → +2,8% рождений, реформа ≈ +0,12 ребёнка/женщину, quantum (проверки тайминга исключили сдвиг календаря). Bauernschuster, Hener & Rainer 2016, JEEA · https://onlinelibrary.wiley.com/doi/abs/10.1111/jeea.12158
• Российский маткапитал — регионы×время [из узла МП-01 Денежные трансферты]: эффект сильнее там, где сертификат весом относительно региональных цен, в Москве ≈0; LR +0,15 ребёнка/женщину (структурная модель + квазиэксперимент). Sorvachev & Yakovlev 2020, IZA DP 13019 · https://docs.iza.org/dp13019.pdf
• Австралийский Baby Bonus — дата отсечки [из узла МП-01 Денежные трансферты]: A$3 000→5 000 единовременно, 2004–2014; +~7% рождений (+1 275/мес), ~A$39 тыс./индуцированное рождение — оценено на резком вводе по дате. Sinclair, Boymal & de Silva 2012 · https://onlinelibrary.wiley.com/doi/10.1111/j.1475-4932.2012.00805.x
• Корейские местные бонусы — поэтапная раскатка (staggered DiD) [из узла МП-01 Денежные трансферты]: разрозненные baby bonus по 222 округам, 2001–2015; +1,6…+5,0% рождений, СКР-2015 на 4,7% выше контрфакта, quantum. W. Kim 2023 · https://ftp1.economics.smu.edu/wpaper/2023/KIM/KIM-2023-08.pdf
• Испанское пособие €2 500 — разрыв по дате ввода/отмены [из узла МП-01 Денежные трансферты]: универсальная выплата 2007–2010; введение +2,6%, анонс отмены −5,5% рождений (асимметрия), квазиэксперимент. González & Trommlerová, JHR · https://jhr.uwpress.org/content/58/3/783

Итог: 5 из 5 — контраст «регион/дата/порог», не спроектированный ради оценки, но её позволивший. Это и есть аргумент §4: то же можно закладывать намеренно.

§3. Живые примеры фронтира [не проверено — данных об эффектах ещё нет, из МП-12 Фронтир мер реестр]

• Rx Kids (Флинт, Мичиган) — единственная запись фронтира со ВСТРОЕННЫМ исследовательским компонентом: $1 500 в течение беременности + $500/мес первые 12 месяцев (в МП-12: 12 мес; на rxkids.org встречается вариант 6–12 мес по волнам — принята версия МП-12), «universal and unconditional» для жительниц участвующей общины; ведёт Michigan State University, администрирует GiveDirectly, есть отдельный research-раздел; программа расширяется на другие города (по МП-12; «Огайо» открытой страницей не подтверждён) — географически поэтапная раскатка де-факто даёт контраст «город-волна». rxkids.org [O, открыт 2026-07-19]; Bridge Michigan [В] — из МП-12 Фронтир мер реестр §1.
• Сингапурское РКИ FHS/FAT — настоящая рандомизация: РКИ, 3 группы (скрининг фертильности AMH/спермограмма; онлайн-инструменты информирования; контроль), hybrid effectiveness-implementation type I; implementation-статья опубл. 30.12.2025, статья об эффективности 2026 (fulltext не открыт, 403). link.springer.com/…s12913-025-13956-3 [O] — из МП-12 Фронтир мер реестр §2 A-1.
• UK — отмена two-child benefit cap (апр. 2026) — де-факто разрыв: child element (~£3 650/год) распространён на всех детей, ~570 тыс. домохозяйств; резкий ввод по дате = «натурный эксперимент в полёте», потенциал для DiD/RDD (дизайн НЕ заявлен). commonslibrary CBP-10474 [O] — из МП-12 Фронтир мер реестр §1.
• Франция — congé de naissance (01.01.2027) — де-факто разрыв по дате: +2 мес отпуска на родителя; право у детей с 01.01.2027 → потенциал разрывного дизайна по дате рождения (дизайн НЕ заявлен). connexionfrance.com [O] — из МП-12 Фронтир мер реестр §1.

Итог: 4 примера. Из них ровно 1 (Rx Kids) с явно встроенным исследовательским компонентом и 1 (Сингапур) с рандомизацией; ещё 2 (UK, Франция) — «бесплатный разрыв» существует объективно, но команда оценки/план публично не заявлены.

§4. Советы для ЛПР [практика]

1. Стейджинг вместо сплошной раскатки: вводить мany волнами по регионам — операционно раскатка и так почти всегда поэтапна, значит контраст возникает сам, надо лишь его сохранить.
2. Случайный (или предобъявленный) порядок регионов: если очередь волн определяется жребием, ранние и поздние территории сравнимы → почти-РКИ на уровне регионов.
3. Жёсткая дата отсечки = бесплатный RDD: чёткое «право у детей, рождённых с ДД.ММ.ГГГГ» превращает границу во встроенный разрывный дизайн; размытые/ретроактивные правила эту возможность убивают.
4. Предрегистрация плана и независимая команда оценки: гипотезы, исходы, метод фиксируются публично ДО старта; оценку ведёт команда, не отвечающая за «успех» программы.
5. Данные открыты с рождения программы: собирать исходы (заявки, охват, промежуточные исходы) с дня 1, а не задним числом — ретроспективно контраст не восстановить.
6. Пилот ДО национальной раскатки: обкатать на подмножестве территорий с контролем прежде, чем идти на всю страну; национальный запуск без пилота стирает контроль навсегда.
7. «Оценка не задерживает политику»: поэтапность операционно неизбежна (бюджет, кадры, ИТ раскатываются волнами) — намеренный дизайн лишь не выбрасывает информацию, которую волны и так порождают.

§5. Почему поле этого не делает [гипотеза]

[гипотеза — политэкономия] Сплошная одномоментная нацраскатка — сама по себе политический сигнал («государство серьёзно, всем сразу»); поэтапность и контрольные регионы читаются как «одним дали, другим нет» и политически неудобны. Встроенная оценка вдобавок несёт риск: она может показать ноль или tempo-сдвиг вместо quantum, что дороже политически, чем отсутствие оценки вовсе. Отсюда рациональный для ЛПР, но вредный для знания выбор — раскатывать сплошь и не мерить.

Паттерн С-4 [факт об отсутствии]: в реестре фронтира МП-12 Фронтир мер реестр из ~29 действующих/запущенных программ §1 подавляющее большинство помечены «нет — сплошная нац. раскатка, без контрольных регионов»; встроенный дизайн есть у единиц (Rx Kids — исследовательский компонент; сингапурское РКИ — рандомизация), ещё у нескольких разрыв возникает де-факто по дате (UK cap, congé de naissance, US Trump Accounts, австралийская PPL), но командой/планом не подхвачен. То есть возможность «бесплатной» оценки массово есть — и массово не используется.

§6. РФ-кейс (Д4) [факт об отсутствии, из СТ-17 Россия]

Реестр 13 российских мер поддержки рождаемости (маткапитал, единое пособие, семейная ипотека, 450 тыс., региональные капиталы, «демографическое меню», нацпроект «Семья», семейная налоговая выплата и др.) на этом же чек-листе: намеренного дизайна оценки — 0 из 13; де-факто контраст (дата отсечки / порог дохода/СКР/числа детей / регион×время) — почти у каждой; формальной причинной оценкой подхвачен только федеральный маткапитал (§2 выше). Массово доступные «бесплатные» контрасты не используются, а закрытие помесячных данных РФ с 2025 местами не даёт реализовать их даже ретроспективно — прямое подтверждение паттерна С-4 §5 на национальном реестре. Разбор — СТ-17 Россия («Меры vs встроенный дизайн оценки (Д4)»).

Связан с

• МП-12 Фронтир мер реестр — источник §3; поле «Дизайн оценки» реестра — прямой вход этого узла.
• МП-01 Денежные трансферты — источник 4 из 5 примеров §2 (маткапитал, Австралия, Корея, Испания).
• МП-04 Детская инфраструктура — источник примера немецких яслей §2.
• ОВ-11 Жилищные меры без причинных оценок — крупнейший разрыв «важность фактора vs доказанность мер»: жилищные программы без единой каузальной оценки — ровно случай, где встроенный дизайн был бы бесценен.
• ПМ-03 Tempo-эффект Бонгаартс-Фини — что именно должна различать хорошая оценка: tempo (сдвиг календаря) vs quantum (итоговая когорта).

Источники

• Bauernschuster, Hener & Rainer 2016, JEEA — https://onlinelibrary.wiley.com/doi/abs/10.1111/jeea.12158 (немецкие ясли, DiD)
• Sorvachev & Yakovlev 2020, IZA DP 13019 — https://docs.iza.org/dp13019.pdf (маткапитал, регионы×цены)
• Sinclair, Boymal & de Silva 2012 — https://onlinelibrary.wiley.com/doi/10.1111/j.1475-4932.2012.00805.x (австралийский Baby Bonus, дата отсечки)
• W. Kim 2023 — https://ftp1.economics.smu.edu/wpaper/2023/KIM/KIM-2023-08.pdf (Корея, staggered DiD)
• González & Trommlerová, JHR — https://jhr.uwpress.org/content/58/3/783 (Испания, разрыв ввод/отмена)
• Rx Kids — https://rxkids.org (дизайн выплат, «led by MSU, administered by GiveDirectly», research-раздел) [O, 2026-07-19]
• Сингапурское РКИ FHS/FAT — https://link.springer.com/article/10.1186/s12913-025-13956-3 [O, через МП-12 Фронтир мер реестр]
• UK two-child cap — commonslibrary.parliament.uk CBP-10474; congé de naissance — connexionfrance.com [оба через МП-12 Фронтир мер реестр]

Открытые хвосты

• Проверить, публикует ли команда Rx Kids (MSU) предрегистрированный план оценки и какой у неё контраст (город-волна vs пред/пост) — уточнить при появлении первых результатов [оценка ~2026–2027].
• Отследить, подхватит ли кто-нибудь де-факто разрывы UK cap (апр. 2026) и congé de naissance (01.01.2027) формальным DiD/RDD.
• Собрать более точный знаменатель для §5: сколько ровно из строк §1 МП-12 Фронтир мер реестр имеют «нет — сплошная раскатка» против «де-факто разрыв» против «встроенный дизайн» (сейчас — качественная оценка «у единиц»).

Проверен на дату: 2026-07-19