Тематические акценты и проверка контекстов

Тематический анализ выявляет специализацию федеральных направлений и одновременно показывает пределы автоматического прочтения паспортов. В основной сопоставимой части использованы пять содержательных профилей электронных паспортов: национальный паспорт и четыре федеральных. Суммарный объём очищенных профилей составляет 2793 текстовых токена. Объёмы федеральных профилей равны 927, 824, 765 и 173 токенам для Л1–Л4 соответственно. Под профилем понимается совокупность уникальных содержательных фрагментов, выделенных из структуры документа. Количество токенов не характеризует полный объём опубликованного паспорта, поскольку повторяющиеся служебные элементы и финансовые таблицы не включены в соответствующее текстовое представление. с. 80 исходного отчёта

Для сохранения сопоставимости с другими национальными проектами применён общий словарь из 18 тематик. Частота рассчитывается как число словарных совпадений на 1000 токенов профиля. Внутри одной тематики учитывается объединение совпадений, между тематиками допускается пересечение. Поэтому сумма значений не обязана равняться 100 или 1000. Значение представляет интенсивность употребления выбранных лексических маркеров. Относить его к доле бюджета, числу получателей или общественному эффекту невозможно. Сравнение частот особенно чувствительно к объёму профиля и составу словаря, что необходимо учитывать при чтении матрицы. с. 80 исходного отчёта

Категория «Занятость и квалификация» преобладает во всех четырёх федеральных профилях. Для Л1 её частота составляет 58,3 совпадения на 1000 токенов, для Л2 – 80,1, для Л3 – 69,3, для Л4 – 150,3. Высокое последнее значение связано с концентрацией формулировок о профессиях и профессиональном мастерстве в сравнительно коротком тексте. Оно не означает, что направление «Человек труда» обеспечивает наибольшее количество трудоустройств или обладает наибольшим вкладом в квалификацию работников. Проверка исходных формулировок связывает этот профиль с конкурсным признанием, популяризацией профессий и восприятием их престижности. Результаты применения общего тематического словаря представлены на рисунке 12. [96] с. 80 исходного отчёта

Рисунок 12 – Тематические профили федеральных проектов

Примечание. Использован единый межпроектный словарь из 18 тематик. Частоты рассчитаны по содержательным профилям электронных паспортов, точкой обозначено нулевое число совпадений. Тематики пересекаются и не образуют распределения бюджета. Отсутствие совпадений не доказывает отсутствия содержания. Объём профилей Л1–Л4: 927, 824, 765 и 173 токена.

Открыть иллюстрацию исходного отчёта [96] [97] с. 82 исходного отчёта

В Л2 ожидаемо выражена категория «Образование и молодёжь»: 64,3 совпадения на 1000 токенов при 80,1 по занятости и квалификации. Содержательная связь проходит через выпускников, карьерные центры, оценку квалификаций, профессиональные стандарты и подготовку кадров для конкретных производств. Для управленческой оценки важно различать вклад этих инструментов в начало занятости и в её качество. Устройство на любую работу в течение года после выпуска может сочетаться с несоответствием квалификации выполняемой работе. Поэтому лексическая связанность образовательной и трудовой тематики поддерживает рекомендацию о совместном наблюдении перехода к занятости, но не снимает требования измерять профессиональное соответствие и устойчивость трудовой траектории. [98] с. 83 исходного отчёта

Профиль Л1 отличается заметной представленностью управления и оценки: 25,9 совпадения на 1000 токенов. В Л2 соответствующее значение равно 6,1, в Л3 – 1,3, в Л4 совпадения не выявлены. Управленческая направленность Л1 связана с прогнозом кадровой потребности, исследованиями работодателей, модернизацией службы занятости и мониторингом региональных планов. Обнаруженный акцент соответствует координирующей функции федерального проекта. Для её полноценной реализации необходимо обеспечить обратную связь: результаты прогнозирования и мониторинга должны менять выбор мер, сроки и распределение ресурсов. Количество подготовленных аналитических материалов целесообразно сопоставлять с документированными управленческими решениями, принятыми на их основе. [99] с. 83 исходного отчёта

Категория доступности и прав заметна прежде всего в Л3, где её частота составляет 10,5 на 1000 токенов. Контекстная проверка обнаруживает соответствующие маркеры в результатах, связанных с оборудованием рабочих мест для инвалидов и вовлечением отдельных категорий граждан в занятость. Паспорт уже предусматривает закрепляемость на оборудованных местах не менее 12 месяцев. Содержательная оценка должна проверять фактическое соблюдение этого условия, адаптацию рабочего процесса и доступность сопровождения, дополняя сведения о количестве оборудованных мест. Нулевые частоты аналогичных маркеров в других профилях не позволяют считать их меры недоступными. Они показывают отсутствие совпадений с конкретным словарём в извлечённом наборе формулировок. [100] с. 83 исходного отчёта

Для «Кадров» выявлен конкретный пример ограничения общего словаря. Категория «Доходы и социальная поддержка» имеет нулевую частоту в Л1, хотя паспорт содержит показатель соотношения МРОТ и медианной зарплаты и результат по принятию закона о повышении МРОТ. Словарь данной категории включает маркеры доходов, бедности, пособий, выплат и социальной поддержки, но не содержит обозначения МРОТ и основ слов «зарплата» и «оплата труда». Следовательно, автоматический ноль в данном случае является следствием настройки инструмента. Вывод об отсутствии доходной политики противоречил бы прямому чтению источника. Результат демонстрирует необходимость предметной проверки автоматических тематических заключений. [101] с. 84 исходного отчёта

Таблица 8 – Содержательная проверка автоматических тематических результатов

Автоматический результатСверка содержанияВывод для интерпретации
Нулевая частота категории «Доходы и социальная поддержка» в Л1В Л1 присутствуют показатель соотношения МРОТ и медианной зарплаты и результат о повышении МРОТСловарь не включает МРОТ и зарплату; ноль нельзя трактовать как отсутствие доходной политики
Высокая частота категории «Занятость и квалификация» в Л4: 150,3 на 1000 токеновПрофиль Л4 содержит 173 токена; много форм слова «профессия», названий конкурса и формулировок популяризацииКонцентрация лексики отражает узость содержания и краткость профиля, не величину эффекта
Ближайший проект – «Молодёжь и дети»: 0,257 без стеммингаСвязь проходит через образование, квалификацию и переход выпускников к занятостиОснование для совместного анализа переходов; координация ведомств требует отдельного подтверждения
Все 32 результата связаны с показателями через общие задачиМаршруты объединяют 67 пар результата и показателя; одно множество мероприятий может иметь широкую общую задачуПолнота структурной маршрутизации совместима с неопределённостью индивидуальных механизмов

Примечание. Тематическая классификация основана на общем межпроектном словаре из 18 категорий.

[101] [102] с. 84 исходного отчёта

Для уточнения тематической классификации целесообразен дополнительный словарь кадровой политики с самостоятельными категориями кадровой потребности, профессионального соответствия, устойчивости занятости, оплаты труда, трудовой мобильности, инклюзии и качества рабочего места. Его следует вводить отдельной версией, сохраняя результаты общего словаря для межпроектной сопоставимости. Валидация предполагает ручную разметку примеров и проверку как ложных включений, так и пропусков. Наличие слова «профессиональный» не всегда означает повышение квалификации, а употребление термина «потребность» может относиться к разным объектам. Отраслевой словарь должен учитывать такие контексты и сохранять возможность воспроизвести каждое отнесение. с. 85 исходного отчёта

Контекстный анализ имеет самостоятельную управленческую ценность. В текстах необходимо различать обещанное действие, произведённый продукт и изменение положения человека. Формулировки «опубликован рейтинг», «разработаны рекомендации», «актуализирован прогноз» описывают организационные и информационные продукты. Они могут быть необходимы для эффективной политики, но требуют проверки использования. Формулировка о трудоустройстве выпускников относится к наблюдаемому положению целевой группы, однако сама по себе не устанавливает вклад конкретного мероприятия. Переход от одного уровня к другому должен быть виден в программе мониторинга. Содержательная экспертиза тем самым дополняет словарную разметку проверкой того, какое именно изменение заявлено и каким наблюдением оно подтверждается. с. 85 исходного отчёта