4.8 Что доказано и что необходимо для оценки воздействия
Доступная база позволяет проверить годовой объём поездок, распределение приёма по 85 территориям, опубликованный запас классифицированных номеров и несколько условных сопоставлений с выбранной редакцией целей. Она также обнаруживает конкретные проблемы согласования версий и показывает, почему рост отраслевых объёмов недостаточен для вывода о всеобщем расширении возможностей путешествовать. Наиболее устойчивыми результатами анализа являются территориальная концентрация годового приёма и различие между физическими объёмами, зарегистрированным предложением и участием населения.
Для оценки воздействия национального проекта нужны сведения о получателях поддержки, сроках ввода и фактической эксплуатации объектов, величине помощи и сопоставимых территориях либо организациях без поддержки. Временная последовательность «мера – рост» сама по себе не определяет причинность. Программа может направлять ресурсы туда, где спрос уже рос, либо, наоборот, туда, где ожидался спад. Без учёта такого отбора простая корреляция финансирования и поездок будет неоднозначна. Наблюдение до начала поддержки и после неё, проверка предшествующих тенденций и прозрачное описание сравниваемых групп сделали бы оценку существенно убедительнее.
Приоритет ближайшего мониторинга – согласование версий факта, восстановление месячной сезонности в едином охвате и добавление измерений доступности по группам населения. Для инфраструктуры нужны работающая вместимость и использование по сезонам; для социальных результатов – участие уникальных людей и причины отказа от желаемой поездки; для территорий – различение приёма и путешествий местных жителей. Эти дополнения позволят перейти от проверки числа опубликованных результатов к объяснению того, какие государственные меры расширяют предложение, кому они помогают воспользоваться отдыхом и насколько устойчив полученный эффект.
7.5 Дизайн оценки дополнительного эффекта
Для проверки дополнительности отдельных инструментов предлагается формировать панель поддержанных объектов и сопоставимых объектов сравнения. До начала оценки необходимо определить измеряемый результат, дату воздействия и механизм отбора получателей. Для гостиниц интерес представляют ввод работающей мощности, загрузка, ночёвки и занятость. Для продвижения – дополнительный спрос на целевом рынке. Для обучения – применение навыков и дальнейшая занятость участников.
Разность изменений может использоваться как наглядная основа оценки при наличии сопоставимой динамики до воздействия. Она сравнивает изменение результата у получателей поддержки с изменением у группы сравнения. При различающихся сроках участия и неоднородных эффектах нужны оценки для соответствующих когорт и периодов. Современная методология разностей разностей позволяет сформулировать такие оценки при явно заданных предпосылках идентификации. [126]
В выражении сопоставляются средние результаты получателей поддержки и группы сравнения до воздействия и после него. Формула иллюстрирует принцип и не является выполненной оценкой эффекта национального проекта. Для её применения нужны проверяемые данные об объектах, достаточная предыстория, совместимость измерений и анализ условий отбора.
В туризме особенно важно учитывать сезонный календарь, транспортные ограничения, изменение классификации и внешние события, неодинаково затрагивающие территории. Сравнивать разные месяцы до и после открытия гостиницы без сезонной корректировки недостаточно. Если поддержка распределяется в ответ на спад спроса, исходное положение получателей может существенно отличаться от других объектов. Для обоснованного сравнения следует исследовать предшествующую динамику и условия включения в программу.
Возможны пространственные эффекты: новый комплекс способен привлекать дополнительные поездки, перераспределять посетителей между соседними объектами или увеличивать спрос на сопутствующие услуги. Поэтому оценка на уровне получателя и оценка на уровне территории должны дополнять друг друга. Суммирование индивидуальных приростов без учёта вытеснения может завысить общий дополнительный результат.
Экспериментальные и квазиэкспериментальные процедуры целесообразно начинать с мер, для которых наблюдаемы дата воздействия и сопоставимая группа: отдельные программы обучения, продвижение на выбранных рынках, очереди подключений или волны инвестиционной поддержки. Решение о распространении инструмента должно зависеть от полученного эффекта, его стоимости и ограничений переноса в другие территории.