Известия. Эксперт указал на новые возможности после запуска нацпроекта «Экономика данных»

29 февраля 2024
Гиацинтов: нацпроект «Экономика данных» даст возможности для развития новых сервисов Единое понимание данных и их применимости для государства даст возможности по развитию новых сервисов для населения и организаций. Об этом 29 февраля «Известиям» заявил технический директор DIS Group Олег Гиацинтов. Ранее в этот день президент России Владимир Путин в ходе послания Федеральному собранию сказал, что на реализацию нового нацпроекта «Экономика данных» будет направлено не менее 700 млрд рублей в ближайшие шесть лет. «Проект затрагивает работу с данными не только на центральном уровне, но и в каждом ведомстве и в каждом регионе. Единое понимание данных и их применимости для государства даст возможности по развитию новых сервисов для населения и самих организаций. Для реализации задач проекта потребуются промышленные решения по управлению данными, качеству данных, управлению мастер-данными и их защите. Кроме того, успешная реализация проекта требует наличия высококвалифицированных специалистов в области аналитики данных и информационной безопасности», — сказал эксперт. Таким образом, должны быть выработаны подходы к эффективному управлению данными, которые будут давать реальный результат. Основной сложностью является межведомственное взаимодействие, от которого зависит возможность обмена данными между организациями, так как сервисы основываются на данных из разных источников, заключил Гиацинтов. Еще в сентябре 2023 года Путин поручил правительству утвердить национальный проект по формированию экономики данных на период до 2030 года. Он предусматривает мероприятия в разных сферах обработки данных. В них входит сбор данных, в том числе с использованием высокочувствительных датчиков на основе квантовых сенсоров, а также создание инфраструктуры вычисления и хранения данных с использованием отечественных оборудования и технологий. Источник: Известия

Рекомендуем также

Вечерняя Москва. Как развивается отечественная отрасль информационных технологий

29 февраля 2024
28 февраля свой профессиональный праздник отмечали ИТ-специалисты. Эксперты рассказали «Вечерней Москве», как развивается отечественная отрасль информационных технологий. Бизнес-консультант столичной ИТ-компании, предлагающей решения в области управления данными, Ирина Боровлева готовится к обсуждению с одним из заказчиков, который планирует приобрести их продукцию для своей организации. — Мы предлагаем, внедряем и продвигаем проекты, которые помогают настроить процесс управления данными, — рассказывает корреспонденту «ВМ» Ирина Боровлева. — У нас работает много специалистов, благодаря которым мы реализуем успешные проекты в сфере цифровой трансформации. Эксперты обеспечивают нашим клиентам максимально релевантный для их бизнеса результат. Почти за 19 лет деятельности столичной компании ее сотрудники реализовали более 250 проектов не только в России, но и в странах ближнего зарубежья. — Один из наших крупных последних проектов запустили для известной сети продовольственных магазинов, работники которой регулярно обрабатывают массив сведений, — вспоминает бизнес-консультант московской ИТ-фирмы. — Благодаря новому цифровому решению мы помогли торговой компании повысить ее эффективность при работе с данными, а также прозрачность всех информационных активностей организации. Реализуя проект интеграции данных для кредитной организаций Москвы, специалисты помогли ей в вопросе формировании отчетности. Ирина Боровлева рассказывает, что для этого сотрудники компании использовали отечественные решения управления данными. — Формирование портфеля импортозамещенных продуктов защищает наших бизнесменов от рисков, связанных с использованием зарубежного программного обеспечения, — сообщает Ирина Боровлева. Сейчас отечественная индустрия информационных технологий обладает достаточно высоким потенциалом, представители которой способны успешно конкурировать с иностранными партнерами, рассказывает корреспонденту «ВМ» основатель столичного агентства интернет-маркетинга, программист Антон Полилов. — Это видно по тому, насколько активно отечественные ИТ-специалисты занимаются вопросами цифровизации разных сфер деятельности на федеральном уровне, — говорит Полилов. — Например, цифровизация банковского сектора в России — одна из самых продвинутых в мире. По его словам, благодаря этому отечественные банки расширили свои услуги за счет мгновенных сервисов и круглосуточных способов оплаты. Еще ИТ-специалисты успешно занимаются цифровизацией медицины. Кроме того, московские компании подписывают соглашения с иностранными коллегами, продавая необходимую зарубежному рынку продукцию.

ТОЛЬКО ЦИФРЫ

По данным лидера рынка рекрутмента и аутсорсинга за 2023 год, оборот ИТ-компаний в России составил 3 триллиона рублей, а число граждан, работающих в сфере информационных технологий, — 740 тысяч. Уровень средней зарплаты, на которую рассчитывали ИТ-специалисты, составил 182,9 тысячи рублей. Рост их зарплат с конца 2022 года по ноябрь 2023-го составил 8,5 процента.

ПРЯМАЯ РЕЧЬ

Венера Ровенская, руководитель комитета по цифровизации московской Ассоциации предпринимателей: — У нас активно развивается ИТ-школа, которая даже в связи с текущей геополитической обстановкой считается лидером в мире. Это заслуга и правительства Москвы, и также федеральных ведомств, которые субсидируют компании, занимающиеся разработкой различных программ, а также поддерживают молодых сотрудников. Хочу отметить, что за долгие годы у нас в России появилось много специалистов, которые успешно выполняют задачи, связанные с цифровизацией различных сфер деятельности в нашей стране. Источник: Вечерняя Москва

Рекомендуем также

Технический директор DIS Group дал комментарий телеканалу РБК

26 февраля 2024
22 февраля технический директор DIS Group Олег Гиацинтов принял участие в прямом эфире телеканала РБК, прокомментировав проект приказа о новом порядке формирования автоматизированных баз персональных данных о пассажирах и персонале (экипаже), который должен вступить в силу 1 сентября. Посмотреть запись эфира можно здесь (начиная с 15 минуты)

Рекомендуем также

«Открытые системы». Михаил Хачатурян о сравнении производительности популярных на российском рынке решений для репликации данных

16 февраля 2024
Доцент кафедры Стратегического и инновационного развития Финансового Университета Михаил Хачатурян рассказал о самых популярных на рынке решениях по репликации данных. Репликация данных – это механизм синхронизации содержимого нескольких копий объекта (например, содержимого базы данных). Иными словами – процесс, под которым понимается копирование данных из одного источника в один или несколько приемников. Наиболее частым сценарием использования решений для репликации данных является переход компании с одного IT-решения на другое, например в рамках импортозамещения. Change Data Capture (CDC): захват изменений данных, подход к интеграции данных, основанный̆ на идентификации, регистрации и доставке изменений, внесенных в источники данных, во внешние системы. Наиболее распространенной является технология, основанная на захвате изменений из журналов баз данных источников. На рынке представлены как коммерческие, так и open source решения для репликации данных, использующие в основе технологии CDC. Одним из наиболее популярных на рынке коммерческих решений CDC долгое время являлось решение Oracle GoldenGate. Однако, в настоящее время необходимость решения задач импортозамещения выводит на первый план российские разработки и open source решения. В тесте участвовали доступные в РФ решения: российская разработка Датафлот Репликация и open source платформа Debezium. «Датафлот Репликация» – российское коммерческое решение для репликации транзакционных данных, использующее в основе захват изменений данных в журналах баз данных источников (Change Data Capture) и осуществляющее доставку изменений в гетерогенные системы-приемники. Решение зарегистрировано в едином реестре российского ПО. Мастером-дистрибьютором решения – компанией DIS Group – предоставляется техническая поддержка 24×7 на русском языке. Документация и пользовательские интерфейсы доступны на русском языке. Платформа Debezium: open source проект, по сути, представляет собой набор совместимых с Apache Kafka Connect специализированных коннекторов, осуществляющих чтение изменений журналов БД различных типов и передающих данные об изменениях в топики Apache Kafka. Требует для работы развертывания инфраструктуры Kafka. Техническая поддержка отсутствует. Документация существует только на английском языке. Пользовательские интерфейсы – практически отсутствуют, управление осуществляется из консоли, скриптами или из внешних приложений.

Сценарии использования репликации

Существует несколько наиболее распространенных сценариев использования решений для репликации данных:
  • Предоставление актуальных данных для оперативной отчетности: данные из транзакционных систем реплицируются в хранилища данных или в другие системы для получения близкой к реальному времени оперативной отчетности.
  • Снижение нагрузки на исходную информационную систему: данные реплицируются из высоконагруженных исходных систем в режиме близком к реальному времени в другие, менее дорогостоящие системы, на которые также переносятся тяжелые запросы пользователей. Таким образом снизив интенсивность запросов на исходной системе возможно обеспечить на ней значительное снижение нагрузки.
  • Аудит. С помощью репликации данных вы можете выполнять аудит базы данных в режиме реального времени, например, получать информацию кто и как менял данные в БД. Информация аудита может включать информацию об изменении данных (состояния до и после выполнения операции изменения), время, в которое данные были изменены, тип операции изменения, данные о пользователе, который выполнил изменения данных. Возможно использовать информацию аудита, например для в выполнения регулятивных или внутренних требований, выявления закономерностей активности пользователей, разработки систем обнаружения нелегитимной деятельности или мошенничества и т.п.
  • Проекты миграции с минимальным временем простоя. Репликация данных может эффективно использоваться в качестве решения для миграции баз данных и приложений. Использование репликации может обеспечить синхронизацию систем источников и приемников различных типов в режиме близком к реальному времени, и соответственно, обеспечить быстрый переход от старых критически важных систем к новым без простоев или с минимальным временем простоя. При необходимости вы также можете реплицировать данные из новой системы обратно в более старую систему для целей резервирования.

Тестирование

В ходе тестирования были использованы следующие конфигурации репликации: источник СУБД Postgres 15, приемник СУБД Postgres 15, источник СУБД Oracle 21, приемник СУБД Postgres 15. При тестировании для каждого источника использовался набор из трех таблиц (customers, products и orders) и соответствующие им таблицы приемники. При тестировании репликации в Debezium коннекторы к источникам ставились на паузу, выполнялась генерация изменений в источниках, выполнялся resume коннектора и отслеживалось время с момента старта коннектора до времени появления последнего изменения в таблице БД. При тестировании репликации в Датафлот Репликации выполнялась генерация изменений в источниках, затем производился запуск задачи, включающей последовательное выполнение задач Парсера, обработки Буфера и Загрузчика и отслеживалось время с момента старта Парсера до При тестировании использовались следующие сервера: сервер Postgres: 4 Core CPU Intel Xeon CPU X5690 @ 3.47GHz, 8 GB RAM; сервер Oracle: Intel(R) Xeon(R) CPU X5690 @ 3.47GHz, 16 GB RAM; сервер «Датафлот Репликация»/Debezium: 4 Core CPU Intel Xeon Gold 6130 CPU @ 2.10GHz, 32 GB RAM.

Результат

При первоначальной синхронизации PG-PG отставание решения Debezium от «Датафлот Репликация» составляло от 11 раз до 343 раз в зависимости от количества записей в таблице. Также были проведены замеры на время обработки 1 млн и 5 млн инсертов в таблице orders. Время работы коннектора Debezium до момента попадания всех записей в топик кафка при одном миллионе инсертов составило 153 секунд, у «Датафлот Репликация» в аналогичных условиях – 14 секунд. При пяти миллионах инсертов аналогичный показатель составил 397 минут у Debezium и 60 минут у «Датафлот». Источник: “Открытые системы”

Рекомендуем также

«Известия». Эксперты рассказали об использовании новых технологий в российской медицине

15 февраля 2024
Эксперты 15 февраля рассказали «Известиям» об использовании новых технологий в российской медицине. Так, советник президента «Меркатор холдинг» по цифровизации Александр Заверзаев отметил, что всё чаще вводятся новшества, которые помогают врачам принимать решения и ставить диагнозы, проводить скрининги здоровья и выполнять сложные процедуры с помощью роботизированных автоматических систем. «В современную практику вводят программы с использованием искусственного интеллекта, который анализирует большие массивы данных и выводит зависимости между показателями, что позволяет, например, открывать новые лекарственные средства. Так, например, в 2023 году ИИ смог открыть лекарственное средства для лечения болезни легких. Искусственный интеллект благодаря большому объему обучающих данных способен также создавать новые диагностические и лабораторные тесты», — сказал он. По словам эксперта, технологии касаются и обычных процессов взаимодействия между врачом и пациентом. В России развиваются наработки в сфере телемедицины, что позволят получать квалифицированную медицинскую консультацию дистанционно, отметил Заверзаев. «Потенциал этой технологии раскрывается еще больше, если мы говорим про умные, сертифицированные носимые устройства для контроля здоровья. Например, одна из московских компаний недавно запустила производство умных гаджетов для дистанционного контроля показателей здоровья, таких как ЭКГ, пульс и температура, данный гаджет способен автоматически сигнализировать врачу о нахождении рисков и способен выдавать рекомендации по улучшению своего здоровья самому пациенту в мобильном приложении», — рассказал он. Модели машинного обучения способны анализировать снимки МРТ и КТ, подсвечивая врачу области, которые требуют внимания, или же способны автоматизировано «очищать» записи от шумов и других помех. Это концентрирует внимание врача на чистых данных и делает выводы более точными, добавил специалист. «Алгоритмы анализа больших данных позволяют выявлять сложные закономерности и в сфере генетики. Искусственный интеллект выявляет склонность человека к генетическим заболеваниям, предлагает врачу наиболее подходящее лечение или профилактику с учетом предрасположенности организма к тому или иному активному веществу. Миру давно известны компании, которые занимаются производством медицинской техники, но с приходом технологий ИИ такие компании создают более продвинутые устройства и теперь разрабатывают технику, которая более точно проводит хирургические операции при самом минимальном вмешательстве, минимизирует риск осложнений, диагностирует заболевания с меньшими издержками и погрешностями», — указал Заверзаев. Не обошел искусственный интеллект сферу психологии и психиатрии, отметил эксперт. Алгоритмы способны сопоставлять факты и записи в дневниках здоровья пациентов и выявлять причины плохого настроения или депрессии. Генеральный директор DIS Group Павел Лихницкий, в свою очередь, заявил, что ключевую роль в инновационном развитии медицины играет грамотная работа с данными. По его мнению, она способствует улучшению качества здравоохранения и повышению эффективности медицинских услуг. «Благодаря доступу к большим объемам данных врачи могут более быстро и точно определять болезни, в том числе на ранних стадиях. Кроме того, BIG Data помогает в улучшении системы мониторинга здоровья населения и принятии комплексных мер для предотвращения развития различных заболеваний, в производстве новых лекарственных препаратов. Также данные используются для развития телемедицины, что позволяет обеспечить доступ к медицинским услугам в удаленных регионах России, где не всегда есть возможность оперативно получить квалифицированную медицинскую помощь», — сказал эксперт. Внедрение инновационных технологий в систему здравоохранения направлено на улучшение качества ухода за пациентами и оптимизацию процесса обработки информации, добавила директор Generation S Екатерина Петрова. «Цифровая трансформация играет ключевую роль в достижении этих целей, а искусственный интеллект является важным компонентом этого процесса. Он используется для прогнозирования, анализа изображений и диагностики, а также для оптимизации работы медицинских учреждений, начиная от анализа лабораторных показателей и заканчивая оценкой загруженности клиник. Всё это способствует улучшению качества медицинской помощи и повышению эффективности работы системы здравоохранения», — считает она. Накануне президент России Владимир Путин посетил специальную выставку форума, где ему представили передовые российские медицинские технологии и разработки. Также глава государства ознакомился с проектами на тематических стендах Минздрава, «Росатома», Газпромбанка и Фонда Росконгресс. Источник: “Известия”

Рекомендуем также

РБК+ Петербург. Студенты, акселераторы и бизнес: как создаются проекты для корпораций

14 февраля 2024
Какую роль играют акселераторы, и что мешает молодым предпринимателям довести проекты до инвестиционного цикла — в материале РБК+ Петербург В России действует уже более сотни образовательных проектов, которые учат с нуля создавать технологические стартапы и привлекать инвестиции — акселераторы. При таком развитии инфраструктуры поддержки, число вышедших на рынок стартапов в ближайшие годы вырастет на 10-20%, прогнозируют участники дискуссии, организованной РБК Петербург и командой проекта «Студенты в бизнесе» НИУ ВШЭ. Однако для этого придется преодолеть ряд ограничений и страхов, тормозящих развитие предпринимательства в среде молодежи.

Роль акселераторов

Число и возможности акселераторов в России за последние годы выросли. Так, сегодня только на платформе одного университета может действовать несколько площадок, которые помогают студентам запустить свой проект. Эксперт Технопарка ИТМО Игорь Куприенко отметил, что в ИТМО уже долгие годы работает целая экосистема поддержки предпринимательства, например: созданы центры прототипирования «Олимп» и FabLab, проводится сквозная образовательная программа «Создание высокотехнологического бизнеса», обучающиеся имеют возможность защитить свою ВКР как бизнес-проект, действует собственная акселерационная программа и многое другое. Свои программы запускает и бизнес. Руководитель акселератора StartupDrive от «Газпром нефти» Максим Онищенко отметил, что ранее программа работала со стартапами над конкретными бизнес-результатами уже стартовавшего продукта. Однако акселерационную программу 2023 года открыли и для студентов с технологичными решениями на уровне прототипа. Как отметил Игорь Куприенко, в рамках федерального проекта «Платформа университетского технологического предпринимательства» в России ежегодно проводится на базе университетов более 100 акселерационных программ, в которых принимает участие более 45 тыс. человек. Участники дискуссии прогнозируют, что при такой развитой инфраструктуре число вышедших из акселераторов на рынок стартапов в ближайшие годы вырастет на 10-20%. «Люди, у которых есть деньги, и у которых есть свежие идеи — это зачастую разные люди. Их синергия всегда дает хорошие результаты», — описывает роль акселераторов технический директор DIS Group Олег Гиацинтов. Полную версию статьи читайте на сайте РБК

Рекомендуем также

«Открытые системы». Управление данными в России: факторы и векторы развития

12 февраля 2024
Традиционно российский рынок ИТ следовал по тому же пути, что и глобальный, хотя и с некоторым запаздыванием. В 2022 году ситуация резко изменилась, и теперь отечественным заказчикам приходится рассчитывать в основном на ресурсы и возможности локальных игроков. Означает ли это, что наш рынок управления данными пойдет своим собственным путем? «В любом случае развитие каждого рынка идет в обоих направлениях, — развивает дискуссию Олег Гиацинтов, технический директор DIS Group. — Мы видим, например, что запросы, которые приходят от заказчиков в отношении функций для управления данными, часто отличаются и от того, что заложено в западные решения, и от того, что вообще требуется компаниям за рубежом. Поэтому развитие нашего рынка будут в первую очередь определять запросы отечественных заказчиков, при этом необходимо понимать, что сами они всегда смотрят на то, как работают их коллеги за рубежом». Полную версию статьи читайте в источнике: “Открытые системы”

Рекомендуем также

РБК Компании. Данные в «зазеркалье»: рассказывает технический директор Олег Гиацинтов

Как выбрать стратегически важный инструмент для развития бизнеса — решение по репликации данных

6 февраля 2024

Один из ведущих экспертов России во многих областях, связанных с Big Data и стратегическим управлением данными, включая интеграцию данных, обеспечение их качества, управления знаниями и построение датацентричных бизнес-процессов.

Данные играют ключевую роль в принятии бизнес-решений. Их надежность и доступность — неотъемлемая часть успешной работы организации.

Помощник в развитии вашего бизнеса

В современном мире принятие бизнес-решений полностью основано на данных. Системы, к которым часто обращаются за информацией, становятся высоконагруженными и начинают работать в более медленном режиме. А сегодня любая задержка грозит потерей выручки. Именно поэтому крайне важно создавать реплики, копии, самых важных систем: они помогут разгрузить продуктивную среду. Репликация данных играет важную роль в сокращении времени доступа к данным в ситуациях, когда требуется быстрый доступ к информации. Наличие локализованных копий данных позволяет значительно уменьшить время, необходимое для получения информации. Также репликация данных в глобальной платформе электронной коммерции обеспечивает клиентам быстрый доступ к информации о продукте. Кроме того, репликация данных играет важную роль в стратегиях аварийного восстановления и обеспечивает непрерывное развитие организации. Бизнес, хранящий реплицированные копии данных в разных географических местах, может продолжать свою деятельность даже в случае непредвиденных событий. Для предприятий очень важно иметь возможность быстро восстанавливать и возобновлять свои операции в случае сбоя системы. Следующий существенный момент — организациям необходимо иметь точную и актуальную информацию во всех системах и базах данных. Репликация позволяет синхронизировать данные во всех узлах в режиме реального времени или заданных интервалах времени. Также она обеспечивает автоматическое распространение обновлений и изменений на все узлы, что гарантирует: системы имеют актуальную и точную информацию. Повышение производительности и снижение задержки данных — еще одна немаловажная функция репликации данных. Например, в системе управления взаимоотношениями с клиентами (CRM), обновление контактных данных клиента торговым представителем гарантирует мгновенную доступность обновленной информации для всех пользователей, которые имеют доступ к CRM. Многие поставщики услуг в области облачных вычислений предлагают встроенные функции репликации данных, которые обеспечивают надежные варианты аварийного восстановления для предприятий. Например, данные реплицируются в нескольких центрах обработки данных, что обеспечивает дополнительную защиту и доступность информации в случае нештатных ситуаций. По нашему опыту в таком техническом решении, как репликация данных, особенно нуждаются крупные организации вне зависимости от типа бизнеса: банки, телекоммуникационные и нефтяные компании, организации по информационной безопасности, а также здравоохранение, и ритейл. То есть организации, которые наиболее активно используют данные в своей деятельности. Запросы также часто приходят от крупных компаний, имеющих филиалы в разных точках нашей страны или за рубежом. Для обеспечения быстрого доступа к нужной информации сотрудникам из разных регионов, достаточно реплицировать данные на серверы офисов предприятия. Это повышает эффективность работы, поскольку обработка запросов на местах становится более быстрой и клиентские запросы обслуживаются без задержек

Правило двух «С»

При выборе решения по репликации данных необходимо в первую очередь учитывать особенности вашей организации и вашего бизнеса: его потребности в отношении доступности данных, скорости их роста и объема. Важны, по сути, два параметра:
  • Структура данных: она определяет способ, которым данные организованы и связаны между собой. Если структура данных неправильно скопирована или изменена в процессе репликации, в дальнейшем это может привести к ошибкам и несоответствиям в базе данных, нарушению их целостности и корректности.
  • Степень консистентности данных: она гарантирует, что данные на различных серверах или узлах останутся согласованными и актуальными. Недостаточное внимание к этому параметру грозит множеством проблем. Например, потерей информации.

Как не ошибиться

Для эффективной и надежной работы системы репликации баз данных необходимо учитывать несколько ключевых факторов.
  • Параметр времени. Важно понимать, сколько минут/секунд потребуется на то, чтобы данные из источника появились в копии;
  • Уровень надежности и отказоустойчивости решения. Оно должно предлагать автоматическое обнаружение и восстановление отказов, а также гарантировать сохранность данных при сбоях;
  • Производительность. Правильно подобранное решение обеспечивает высокую производительность, включая поддержку сжатия данных, оптимизацию передачи информации и управление нагрузкой. Внедрение и использование репликационной системы требуют гибкости и масштабируемости. Это позволяет легко добавлять или удалять узлы репликации, а также адаптировать систему к изменяющимся требованиям и нагрузке;
  • Целостность данных — важный аспект репликации. Решение должно гарантировать, что все узлы репликации имеют одинаковые данные. Для этого применяются механизмы их синхронизации и контроля соответствия.
Важно понимать, что внедрение и использование решения для репликации могут быть сложными. Поэтому выбирайте продукт, который будет не только функциональным, но и удобным в использовании. Простота внедрения и управления снижает вероятность возникновения ошибок и проблем при его эксплуатации. Выбирайте решение, которое позволит поддерживать актуальность копий данных и синхронизировать их с источником. Также необходимо учитывать стоимость владения технологией, которая включает в себя не только стоимость лицензий, но и затраты на обучение персонала, поддержку, масштабирование и обновления. Опираясь на все эти пункты, можно принять обоснованное решение о выборе наиболее подходящего решения для репликации баз данных, которое будет отвечать потребностям организации и предоставлять необходимые функциональные возможности. Источник: РБК Компании

Рекомендуем также

РБК Компании. С чем связан рост интереса к решениям по интеграции данных

К 2030 году объем инвестиций в рынок по интеграции корпоративных данных составит 24,8 млрд долларов

1 февраля 2024

Один из ведущих экспертов России во многих областях, связанных с Big Data и стратегическим управлением данными, включая интеграцию данных, обеспечение их качества, управления знаниями и построение датацентричных бизнес-процессов.

Отчет компании Market Research Future (MRFR) указывает на то, что рынок интеграции корпоративных данных будет расти очень быстрыми темпами вплоть до 2030 года, достигая объема в размере примерно 24,8 млрд. долларов. Растущая потребность организаций в эффективном управлении информационными активами и получении комплексной информации из своих данных стала ключевым фактором роста рынка. На этом фоне в России расходы на импортозамещение в области программного обеспечения составляют уже более 50% от общих инвестиций в сфере информационных технологий. Также отмечается рост спроса на инструменты по интеграции данных, особенно российские.

Как интеграция данных влияет на бизнес

Итак, сегодня на работу по управлению информационными активами в организациях значительное влияние оказывают технологические продукты по интеграции данных. Они позволяют получать более точную и полную информацию о деятельности бизнеса, что в свою очередь способствует принятию обоснованных и эффективных управленческих решений. Интеграция данных увеличивает производительность, автоматизируя многие процессы и сокращая время, затрачиваемое на ручной ввод и обработку данных. Это снижает риски возникновения ошибок и вероятность потери данных. Также грамотно подобранное и внедренное решение будет способствовать улучшению качества информации, сокращая вероятность ошибок и объединяя данные из разных источников. Благодаря этому, бизнес становится более конкурентоспособным, так как появляется возможность быстрее и эффективнее реагировать на изменения в рыночной ситуации. Более того, интеграция данных совершенствует координацию и синхронизацию работы организации в целом. Еще одним преимуществом интеграции данных является улучшение клиентского опыта: получение более полной информацию о клиентах позволяет работать над качеством обслуживания и уровнем удовлетворенности аудитории. Автоматизация сбора и анализа информации при интеграции позволяет значительно сократить время, затрачиваемое на подготовку отчетности. Кроме того, решение по интеграции данных дает возможность выстраивать такие важные проекты, как хранилища, озера, фабрики данных, позволяя создавать единые зоны (они часто называются «единые версии правды данных»), на которых строится последующая отчетность, аналитическая работа и, соответственно, выбор пути дальнейшего развития организации.

Как выбрать решение по интеграции данных

Одним из наиболее эффективных решений являются промышленные ETL-инструменты. ETL переводится, как «Extraction, Transformation, Loading», то есть средство для извлечения данных из систем источников, их преобразование и доставка до тех приемников, которыми могут являться как хранилища, озера, так и другие системы. Выделяют средства типов ETL и ELT , отличие между ними заключается в последовательности перемещения данных. В случае с ETL данные извлекаются, преобразуются и загружаются, а в случае с ELT данные извлекаются, загружаются и только затем преобразуются. В случае ETL данные извлекаются из одного или нескольких источников, затем происходит преобразование данных, включая агрегирование и очистку, и, наконец, данные загружаются в приемник. При использовании больших объемов данных, поступающих быстро, и при использовании ELT этот набор операций может быть расширен группировкой или разгруппировкой данных, нормализацией или квантованием данных и другими операциями. ETL-решения предоставляют компаниям возможность эффективно работать с запросами, которые могут быть сложными и не оптимальными с точки зрения нагрузки на источники и приемники данных. Они также позволяют осуществлять промежуточное хранение данных для консолидации и визуально указывать желаемую логику перемещения и трансформации данных. Компании могут использовать инструменты по интеграции данных для решения задач репликации данных, создания копий, синхронизации данных и реконсиляции данных. Онлайн-мониторинг также доступен для проведения процессов в компании. Необходимо, чтобы решение поддерживало работу с российскими операционными системами и СУБД, было включено в реестр Минцифры Российской Федерации. Основные параметры, на которые следует ориентироваться при выборе:
  • Высокая производительность. Это даст возможность обрабатывать большие объемы данных оперативно, что особенно важно для бизнеса в условиях быстро меняющейся условий;
  • Мощный механизм обработки данных. Он позволит обеспечить надежное объединение информации из различных источников и формирование целостной и точной базы данных;
  • Выгрузка данных из любых источников. Это важно для обеспечения доступности информации из различных систем и баз данных;
  • Обработка любых типов данных. Поскольку современные организации используют разнообразные форматы и типы данных, важно иметь возможность работать со всеми файлами;
  • Высокая скорость разработки интеграционных процессов. Важна для оперативного внедрения новых решений и адаптации к изменяющимся потребностям бизнеса;
  • Низкая стоимость технической поддержки. Будет способствовать оптимизации расходов на поддержку интеграционных процессов;
  • Формирование документов по требованию. Обеспечит требуемый уровень прозрачности и оперативности при создании отчетности.
Таким образом, грамотно подобранное и реализованное решение по интеграции данных независимо от используемых источников и приемников данных позволяет настроить перемещение информации из одной системы в другую, а также определить способы ее преобразования и мониторинга, обеспечив вашей организации плавное развитие. Источник: РБК Компании

Рекомендуем также

РБК Компании. Как совершить рывок в бизнесе в 2024 году

Стратегически важный ресурс, при грамотном использовании которого возможно сделать рывок в бизнесе — мастер-данные

30 января 2024

Один из ведущих экспертов России во многих областях, связанных с Big Data и стратегическим управлением данными, включая интеграцию данных, обеспечение их качества, управления знаниями и построение датацентричных бизнес-процессов.

Управление мастер-данными имеет огромное значение для организации, поскольку напрямую связано с достижением конкретных бизнес-целей. В современной конкурентной среде сотрудники должны иметь возможность применять политики и процедуры, связанные со сбором, контролем качества, защитой, использованием и хранением данных. Одним из эффективных решений этого вопроса является внедрение MDM-системы, которая поддерживает ключевые области управления данными.

Измеримый эффект

По данным DIS Group, использование комплексного MDM-решения ускоряет процесс закупок на 40%, сокращает количество ошибок в снабжении производства в 2,5 раза, увеличивает вторичные продажи на 27%, ускоряет запуск новых продуктов на 31% и помогает формировать и выдавать отчетность в 5 раз быстрее. Достижение таких показателей возможно благодаря:
  • снижению издержек: правильное управление мастер-данными позволяет избежать избыточной или дублирующийся информации, что в свою очередь снижает издержки на хранение и обработку данных;
  • улучшению клиентского опыта: обладание точными данными о клиентах позволяет бизнесу обеспечивать персонализированный подход и постоянно повышать удовлетворенность и лояльность клиентов;
  • ускорению процессов принятия решений: мастер-данные помогают в унификации и стандартизации информации, что упрощает и ускоряет процессы принятия решений внутри компании;
  • управлению рисками: правильное управление мастер-данными позволяет бизнесу лучше контролировать риски, связанные с неправильной или устаревшей информацией;
  • повышению конкурентоспособности: появляется возможность оперативно реагировать на изменения в рыночной среде и усиливать свои позиции на рынке.
Кроме того, правильно подобранное и грамотно реализованное решение:
  • предоставляет возможность отслеживать историю изменений в документах, включая информацию об авторах изменений;
  • осуществляет мониторинг на различных уровнях, включая политики, правила, метрики и объекты мастер-данных;
  • обеспечивает проверку допустимости значений при вводе и динамическое маскирование данных при доступе и удаление после истечения заданного периода хранения.
Отметим, что вопросы конфиденциальности и защиты данных сегодня являются одним из приоритетов. В рамках управления мастер-данными необходимо реализовать меры контроля доступа, шифрования данных, управления согласием пользователей и т.д.

MDM-решения и ИИ

При грамотном использовании данных, ИИ открывает новые возможности для бизнеса, становится союзником в решении многих задач. Однако, для этого необходимо уделить внимание качеству данных и их обработке, чтобы выбранная система использовала искусственный интеллект и машинное обучение для обнаружения и каталогизации всех мастер-данных. А поскольку объединение всех разрозненных источников невозможно без интеграции данных, выбирая решение необходимо уточнить, сможет ли оно обеспечить высокую производительность и доступность работы с большими объемами критически важных данных. Также важно понимать, что стандартизация данных и контроль их качества осуществляются с помощью промышленных инструментов. Это позволяет обеспечить полноту и согласованность информации, а также проверять ее на наличие неполных или недопустимых записей. В случае конфликтов система должна разрешать их и добавлять недостающую информацию из сторонних источников. Встроенные возможности управления бизнес-процессами, такие как настраиваемые рабочие процессы, функции голосования, оценки и чаты, а также массовое управление данными и машинное обучение на основе рекомендованных пользователем потенциальных действий, способствуют повышению производительности сотрудников всех департаментов организации. Это особенно важно в контексте управления справочными данными, где часто возникают сложности с определением и согласованием стандартных значений для дат, стран, отраслевых кодов и т.п. Оптимизация управления данными обеспечивается с помощью систем управления справочными данными, которые помогают ИТ-специалистам и бизнес-пользователям.

Принципы внедрения

Организация управления нормативно-справочной информацией требует значительных усилий. В первую очередь необходимо найти бизнес-спонсора, поскольку практически все подразделения активно вовлечены в работу со справочниками, крайне важно определить единого заинтересованного бизнес-драйвера проекта. Одновременно следует отличать MDM-системы, предназначенные для отдельных департаментов компании, от решений класса enterprise, которые подходят крупным организациям. MDM-решение класса enterprise должно быть гибким, обладать переносимостью (возможность переноса решения с одной платформы на другую), масштабируемостью и модульностью. Вводить систему управления данными следует поэтапно: начинать с простых случаев использования и постепенно двигаться к более сложным, влияющим на каждое подразделение. Для успешной реализации необходимо:
  • определить бизнес-спонсора проекта;
  • разбить проект на небольшие этапы, чтобы облегчить его выполнение;
  • установить конкретные измеримые результаты для каждого этапа, чтобы иметь ясное представление о прогрессе проекта;
  • разработать гибкие варианты применения, которые позволят адаптироваться к изменениям потребностей бизнеса и всегда оставаться актуальными;
  • Записать цели на ближайшие несколько лет, чтобы обеспечить согласованность проекта с общей стратегией организации.
Таким образом, эффективность MDM-системы достигается за счет использования удобного современного решения и грамотного подхода к его внедрению, которое позволяет гибко переходить от одного этапа к другому в соответствии с изменениями требований и ростом бизнеса без каких-либо задержек. Источник: РБК Компании

Рекомендуем также