ПАО “РусГидро” — крупнейший российский электроэнергетический холдинг. Как любая компания подобного масштаба, ПАО “РусГидро” располагает огромным количеством данных, которые поступают ежедневно и требуют грамотного учета и обработки. В связи с этим был выделен ряд актуальных проблем и задач, требующих прешения:

• Необходимость типизации учета основных средств по группе РусГидро
• Снижение налоговых риски по судебным практикам
• Устранение дублирования записей (плановых активов)
• Снижение затрат на обработку информации по номенклатуре на всех этапах деятельности компании
• Был затруднен оперативный поиск однотипных позиций номенклатуры в свободном остатке по Группе РусГидро
• Необходимость формирования ЛОТов по централизованной закупке однотипной продукции
• Рост справочника номенклатуры
• Необходимость вводить запись контрагента в каждую локальную систему
• Затруднена идентификация записи контрагентов

Для решения поставленных задач был выбран продукт Юниверс MDМ. Это решение по управлению мастер-данными, позволяющее сформировать и развивать единую систему управления ключевыми данными компании.

• Ведение Классификатора ОФ в ЕСУ НСИ с интеграцией в системы-приемники ПАО РусГидро
• Использование Классификатора ОФ на ПО ДФО
• Актуализация связей Классификатора ОФ с ОКОФ2 на регулярной основе. Снижение налоговых рисков за счет своевременной актуализации Классификатора ОФ на основе судебной практики
• Нормализация справочников Активов
• Создание Единого Классификатора номенклатуры в Группе РусГидро. Создание Единого реестра номенклатуры
• Взаимосвязь классификатора Основных фондов и классификатора номенклатуры Создание Единого реестра номенклатуры
• Требования ЗД поставлять продукцию в утвержденной номенклатуре
• Централизованное ведение реестра контрагентов в ЕСУ НСИ и интеграция с системами-приемниками в группе РусГидро
• Нормализация записей контрагентов

Создан успешный проект ЕСУ НСИ: Домены «Активы», «ТМЦ», «Контрагенты»

Для повышения эффективности процессов взаимодействия с клиентами компании было необходимо внедрить единую комплексную систему по управлению данными в Дирекции региональных продаж. Основные ожидаемые бизнес-эффекты внедренного решения: снижение затрат на интеграцию данных, реализацию продуктивных аналитических проектов за счет централизованных инфраструктуры и сервисов, демократизация данных через общий пользовательский портал (доступ к единому бизнес-словарю всех аналитических витрин и приложений, актуальным картам происхождения, правилам и метрикам по качеству данных), повышение доступности данных и быстрое развертывание сред и предоставление датасетов для инициатив data science (с месяцев – до дней), повышение эффективности работы аналитиков (паспорта источников, объектов данных и их происхождение, инструменты профилирования и автоматической разметки всех данных в едином каталоге), обеспечение промышленных инструментов контроля и улучшения качества данных.

Для выполнения стратегических и тактических задач ПАО «Газпром нефть» было выбрано комплексное решение Smart Data Lake. Решение Smart Data Lake позволяет не только собирать большие данные и работать с ними, но также профилировать качество данных, строить карты их трансформации, формировать каталоги данных, глоссарии. «Умное озеро данных» имеет два ландшафта (тестовый и продуктивный) и три зоны («Сырой слой» для хранения копий данных из источников, «Продуктивная фабрика данных» с фокусом на оптимизацию, производительность и управление, «Исследовательская лаборатория» для задач прототипирования аналитических моделей) с различным уровнем управления данными для разных режимов работы. В каталоге данных производится паспортизация источников данных, таблиц и витрин, разметка данных по доменам с помощью настроенных шаблонов (например, для коммерческой тайны и персональных данных), а также профилирование данных (выявление типов и масок для полей данных, схожесть с полями других таблиц и т.д.). Кроме этого, в каталоге данных настраивается связь между объектами технических метаданных и бизнес-метаданных, что в дальнейшем обеспечивает бесшовную интеграцию с бизнес-глоссарием. В ходе проекта при разработке озера данных и хранилища данных апробировались и применялись подходы, которые в итоге позволили получить уникальный функционал: автоматическое построение происхождения данных (data lineage) до полей и автоматическая разметка в каталоге данных, единый управляемый каталог правил по качеству данных, интегрированный с ETL и бизнес-глоссарием, автоматический мониторинг качества данных по каждому датасету и др. Для этого пришлось значительно изменить культуру разработки и создать большое количество инструментов для автоматической передачи данных и метаданных между компонентами решения.

Итогом проекта стало создание гибкой инфраструктуры для любых задач анализа и системного улучшения качества данных. Внедрение аналитической платформы является частью стратегии цифровой трансформации дирекции региональных продаж, где около 50% всех аналитических проектов и инициатив уже реализуются в контуре «умного озера данных». Комплексное решение создает гибкую инфраструктуру для любых задач анализа и системного улучшения качества данных, что позволяют бизнесу быстро разрабатывать и внедрять клиентские решения и повышать операционную эффективность сбытового бизнеса. За счет централизации обработки и хранения данных снижаются затраты на инфраструктуру и подготовку данных для проектов компании. Сотрудники получают мгновенный доступ через единый пользовательский портал к описаниям любых объектов и наборов данных. Компания может предугадывать предпочтения клиентов и персонализировать предложения.