Развитие возможностей Витрины Данных «Эквайринг» и миграция на ArenadataDB

Заказчик
Банк ВТБ (ПАО)
Руководитель проекта со стороны заказчика
ИТ-поставщик
Компания «Дататех» ГК «Иннотех»
Год завершения проекта
2023
Сроки выполнения проекта
Июнь, 2022 - Сентябрь, 2023
Масштаб проекта
38960 человеко-часов
Цели
  1. Обеспечить бизнес-подразделения всеми необходимыми данными и инструментом формирования отчетности и анализа продукта «Эквайринг»;
  2. Реализовать полное покрытие показателей продукта: операционные доходы/расходы, административно-управленческие расходы и т.д.
  3. Улучшить регламент формирования витрин и повысить надежность решения относительно текущего решения;
  4. Осуществить переход на целевую архитектуру в рамках цифровой трансформации Банка;
  5. Минимизировать дополнительную нагрузку на системы источники данных;
  6. Поддержать полный технологический суверенитет;
  7. Снизить общую стоимость владения.
Результаты
  1. Бизнес-подразделения обеспечены всеми необходимыми данными и инструментом формирования отчетности и анализа продукта «Эквайринг»;
  2. Реализовано полное покрытие показателей продукта: операционные доходы/расходы, административно-управленческие расходы и т.д.
  3. Улучшен регламент формирования витрин и повышена надежность решения;
  4. Осуществлен переход на целевую архитектуру в рамках цифровой трансформации Банка;
  5. Минимизирована дополнительная нагрузка на системы источники данных;
  6. Поддержан полный технологический суверенитет;
  7. Снижена общая стоимость владения.

Уникальность проекта

  1. В рамках проекта необходимо было внедрить объекты на разных уровнях хранилища
  2. Работа множества команд
  3. Новое хранилище на новом технологическом стеке (отсутствие источников, отсутствие процессов, новая методология)
  4. Более 5 млрд. записей и 2,5 Терабайта данных;
  5. Необходимость выполнения задач по развитию решения параллельно с основной задачей по миграции аналитической платформы.
Проект решает задачи импортозамещения
Да
Использованное ПО
Кластер Arenadata DB, PostgreSQL, Kafka, Prometheus, Grafana, Nginx, Airflow, Elastic search, ПАК «Сила СХД», Dremio, Форсайт.

Отдельно стоит выделить ETL Framework, который был создан с нуля командой проекта.

Сложность реализации
  1. Одновременная смена технологической платформы СУБД, смена модели детального слоя хранилища и частичная смена источников данных;
  2. Перенос больших объемов данных на целевую платформу ArenadataDB;
  3. Необходимость улучшить регламент готовности данных для бизнеса с Т+4 до Т+1 одновременно со сменой платформы;
  4. Реинжиниринг решения на импортозамещенных технологиях с использованием стека открытого программного обеспечения;
  5. Распределенная географически команда проекта по всей России и распределенная команда проекта по стримам: разработка витрин, разработка ядра, качество данных, ролевой доступ к данным, аналитически справочники и поддержка.

Описание проекта
  1. Кардинально переработаны и внедрены витрины данных на отечественной платформе ArenadataDB, позволяющие формировать отчетность по продукту «Эквайринг», содержащая финансовый результат в детализации до терминала в регламенте и актуальностью данных за предыдущий день
  2. Расчетные алгоритмы витрин данных работают на ядре нового хранилища данных на платформе ArenadataDB;
  3. В ядро нового хранилища данных загружаются данные из новых источников данных, реализованных в рамках цифровой трансформации Банка;
  4. Таким образом новая витрина работает на новой импортозамещенной платформе ArenadataDB, формируется на ядре нового хранилища данных и поступают данные из новых источников.
  5. Витрина переключена на новый отечественный BI-инструмент Форсайт с возможностью смотреть отчетность и анализировать данные в различных измерениях и детализации.
  6. Бизнес-пользователи дополнительно получили возможность получать отчетность и анализировать данные в импортозамещенных инструментах «Мой Офис».
  7. По результатам внедрения практически заново разработанных витрин данных на импортозамещенной платформе ArenadataDB удалось повысить качество данных, что положительно сказывается практически на всех бизнес процессах по развитию эквайринговой сети.
  8. Витрина данных содержит более 5 млрд. записей суммарным объеме данных более 2,5 Терабайт данных.
  9. Использование только импортозамещенных технологий и открытого программного обеспечения.
  10. В проекте с разной степенью вовлечения приняло более 90 человек из 15 профильных команд.

География проекта

Проект покрывает все операции по эквайрингу на территории России.

Система спроектирована для доступна из всех 66 региональных операционных офисах Банка ВТБ.

В настоящий момент с системой работают сотрудники из разных городов России.
Дополнительные презентации:
lipxqyl8tkijsh2i768fknx8nfo37a91.pdf

Комментировать могут только авторизованные пользователи.
Предлагаем Вам в систему или зарегистрироваться.

Год
Предметная область
Отрасль
Управление
Мы используем файлы cookie в аналитических целях и для того, чтобы обеспечить вам наилучшие впечатления от работы с нашим сайтом. Заходя на сайт, вы соглашаетесь с Политикой использования файлов cookie.