Импортозамещение каталога данных data.x5.ru

Заказчик:

ООО ИТ ИКС 5 Технологии

Руководитель проекта со стороны заказчика

Андрей Трянин

Начальник управления ИТ

Год завершения проекта

2023

Сроки выполнения проекта

Ноябрь, 2022 - Июль, 2023

Масштаб проекта

4500 человеко-часов

Цели

1. Заменить внедренное промышленное решение от IBM, после ухода вендора, без ухудшения пользовательского опыта и снижения MAU.

2. Обеспечить необходимый SLA

3. Снизить ТСО

4. Обеспечить возможность развития функционала

Результаты

Заменили "двигатель" на ходу, пользователи узнали о замене только из нашей коммуникации и по скорости работы.
В процессе реализовали «запас» на развитие, а также коннекторы к:

· GreenPlum из коробки работал не корректно,

· Hive

· QlikSense

SLA выше 98%,

скорость работы выросла в 10 раз,
освободили 2 вагона серверов, развернув решение в облаке.
Количество пользователей выросло до 5000 в месяц и 1100 в день (в среднем за неделю).
Сняли ограничения по дальнейшему развитию, чем сейчас и занимаемся

Уникальность проекта

Замена back-а системы незаметно для пользователей - почти пересадка сердца
MAU за время создания нового решения выросло с 3800 до 5000
Реализация проекта обеспечила рост SLA с 90% до 98%
Общее количество отчетов превысило 800, более 90 000 таблиц и 2500 показателей. Ежедневно каталогом пользовались порядка 1100 в среднем в течение недели.
Решение основано на opensource решении от OpenMetaData.
Внесли свой вклад в развитие OpenSource – реализовали коннектор к GreenPlum и разместили в репозитории OpenMetaData и даже получили спасибо, а также нашли единомышленников в РФ
Разместили в облаке, освободили два вагона железа
Увеличили скорость работы в 10 раз, знаем как ускорить еще раз в 5
Создали сущности, которых не хватало в коробке
Down time каталога составил 6 часов - требовалось для окончательного тестирования на продуктивном инстансе.

Проект решает задачи импортозамещения

Да

Использованное ПО

X5 Salt,
OpenMetaData,
X5 Ключ

Сложность реализации

Замена back-а системы незаметно для пользователей - почти пересадка сердца

Описание проекта

Один из фундаментальных блоков управления данными – каталог данных, был внедрен в 2019 году. На базе венгерского решения из верхнего квадрата Gartner. После февраля 2022 и ухода вендора с рынка РФ, получили ограничения в развитии, обновлении и проблемы со стабильностью решения.

В ноябре 2022 начали реализацию собственного Каталога данных. Важно было не потерять пользователей, сохранить основной функционал, заменить решение вендора.

Оценивали создание с 0 или на базе opensource, определив критичный функционал и оценив срок его реализации с "нуля" в 2+ года, решили взять opensource.

Долго смотрели, выбирали, развернули более 6 решений, чтобы пощупать в итоге выбрали OpenMetaData.

Реализация каталога была связана с созданием новых сущностей, переключением фронта на новый бэк незаметно для пользователей.

География проекта

Наши пользователи на всей географии присутствия X5