Разрозненный сбор статистических данных федерального и ведомственного сегментов всеми субъектами статического учета привел к созданию и эксплуатации десятков государственных информационных систем и сотен ведомственных хранилищ данных.
По результатам опроса, проведенного Федеральной службой государственной статистики в рамках плана мероприятий, в котором приняли участие 16 из 62 федеральных органов исполнительной власти, являющихся субъектами официального статистического учета, была получена информация о том, что федеральные органы исполнительной власти, участвовавшие в опросе, являются операторами 45 государственных информационных систем, в составе которых насчитывается 617 баз данных.
При этом хранилища данных субъектов статистического учета, в свою очередь, также представлены на разных уровнях - федеральном и региональном. На федеральном уровне информация представлена в агрегированном виде, а на региональном - в виде первичных статистических данных или отсутствует, а статистические данные представлены в виде набора бумажных или электронных таблиц или форм федерального статистического наблюдения.
Таким образом, данные федерального уровня представлены в различных структурах и форматах в зависимости от субъекта официального статического учета.
При этом различие в методиках сбора и обработки (агрегирования) данных не позволяет обеспечить взаимосвязь статистических данных разных ведомств. В связи с отсутствием согласованности методик сбора и расчета статистических показателей возникают случаи, когда у разных субъектов статистического учета по идентичным показателям формируется противоречивая официальная статистическая оценка одних и тех же экономических понятий и объектов. В связи с тем, что первичные данные не хранятся на региональном уровне, их нельзя использовать повторно.
Кроме того, для эксплуатации и развития информационных систем, поддерживающих процессы хранения и агрегирования статистических данных, необходимы существенные затраты всех субъектов статистического учета и бюджета Российской Федерации.
Создание платформы направлено в том числе на обеспечение возможности повторного использования первичных статистических данных для расчета и построения аналитических отчетов, анализа "больших" данных, обеспечения доступа всех заинтересованных лиц к деперсонифицированным микроданным, создания предпосылок к переходу на потоковый сбор первичных статистических данных.
Существующая в настоящее время в федеральных органах исполнительной власти система сбора и хранения первичных статистических данных, а также организационное, методологическое и правовое обеспечение не позволяют в полной мере обеспечить достижение указанных целей и задач.
В период с 2013 по 2017 год Федеральной службой государственной статистики была создана и введена в промышленную эксплуатацию Система многомерного анализа данных на основе единого хранилища данных, которая решила задачу разрозненности хранилищ данных, функционировавших на тот момент в рамках информационно-вычислительной системы Федеральной службы государственной статистики. Были объединены, сопоставлены и сведены к единой нормативно-справочной информации все статистические данные федерального уровня, накопленные в информационно-вычислительной системе Федеральной службы государственной статистики.
С учетом положительного опыта создания и эксплуатации Системы многомерного анализа данных на основе единого хранилища данных в рамках создания платформы необходимо:
создать единое хранилище первичных статистических данных;
осуществить систематизацию и нормализацию накопленных в ведомственных системах агрегированных статистических данных;
создать инструменты аналитической работы с первичными данными, разрозненными данными и данными различных источников, в том числе с созданием для выполнения указанных работ государственно-частного партнерства;
создать в целях государственного управления инструменты доступа к ведомственным данным на базе единого хранилища первичных статистических данных платформы, обеспечить межведомственное взаимодействие;
обеспечить взаимодействие с международными организациями, в том числе с применением SDMX, XBRL;
предоставить доступ к деперсонифицированным микро- и макроданным с привлечением центра компетенций и с созданием государственно-частного партнерства;
обеспечить методологическую и нормативную правовую основы работы с деперсонифицированными микро- и макроданными, включая возможность тестового доступа к данным;
создать инструменты доступа к деперсонифицированным микро- и макроданным.
Поступившие от субъектов статистического учета через "Единое окно" для представления отчетности в электронном виде первичные статистические данные должны размещаться в едином хранилище первичных статистических данных платформы.
Доступ субъектов официального статистического учета и федеральных органов исполнительной власти к единому хранилищу первичных статистических данных платформы должен осуществляться с использованием единого унифицированного механизма, в качестве которого возможно рассматривать, например, единую систему межведомственного электронного взаимодействия.
Для реализации доступа субъектов официального статистического учета и федеральных органов исполнительной власти к единому хранилищу первичных статистических данных платформы с использованием единой системы межведомственного электронного взаимодействия необходимо:
организовать разработку и последующее рассмотрение Правительственной комиссией по цифровому развитию, использованию информационных технологий для улучшения качества жизни и условий ведения предпринимательской деятельности технологических карт межведомственного взаимодействия, определяющих перечень первичных статистических данных, подлежащих передаче из единого хранилища первичных статистических данных платформы в соответствующие государственные информационные системы;
организовать разработку электронного сервиса единой системы межведомственного электронного взаимодействия, реализующего информационный обмен по соответствующим технологическим картам межведомственного взаимодействия.
При выполнении работ по созданию единого хранилища первичных статистических данных платформы и совершенствованию распространения данных должны быть учтены мероприятия, проводимые в рамках создания и внедрения единой системы нормативной справочной информации и национальной системы управления данными.
В качестве одного из перспективных способов доступа пользователей к ресурсам платформы можно рассматривать единый портал государственных и муниципальных услуг с использованием сервиса, реализующего запрос на получение сводных (агрегированных) данных с учетом требований к конфиденциальности первичных статистических данных.
Вне зависимости от способа доступа платформа должна обеспечивать возможность предоставления статистических данных в привычном для пользователей виде (сборники, публикации, отчеты и др.). Помимо привычных представлений в платформе должен быть представлен гибкий инструментарий по формированию внутренних и внешних витрин данных, обеспечивающий доступ к статистической информации разного уровня различным группам пользователей в зависимости от ролевой модели, а также доступ к данным посредством программных интерфейсов технологического взаимодействия (API).
Целесообразным также представляется выполнение центром компетенций функций по приему запросов и формированию аналитических отчетов и витрин данных на основе деперсонифицированных микро- и макроданных.
Также необходимо отметить, что на 2020 год запланировано проведение Всероссийской переписи населения, в рамках которой предусмотрен сбор данных для формирования основы всей статистики о населении.