Фреймворк BI.Qube 2.0

BI.Qube 2.0 – фреймворк (набор инструментов) для комплексного анализа данных и метаданных, начиная от извлечения их на источнике, и до обогащения в хранилище данных, с организацией эффективного хранения на проприетарных и open source платформах.

Применение BI.Qube 2.0 позволяет существенно снизить требования к уровню подготовки специалистов по построению корпоративных хранилищ данных (КХД) с использованием методологии Data Vault, и в большинстве случаев позволяет отказаться от написания программного кода и вести проектирование КХД в подходе low-code/no-code.

Продукт BI.Qube 2.0 включен в Реестр российского ПО, регистрационный номер 23535.
Класс ПО: Инструменты извлечения и трансформации данных (ETL)
Дата внесения в реестр: 12.08.2024
Ссылка: https://reestr.digital.gov.ru/reestr/2585880/

В BI.Qube 2.0 входит ряд подсистем, позволяющих полноценно решать задачи, появляющиеся при построении КХД, независимо от остальных подсистем. С другой стороны, каждая подсистема предоставляет полноценный интерфейс доступа к данным о своей деятельности, что позволяет организовать бесшовную сквозную связь между задачами разных подсистем.

Продукт BI.Qube 2.0 и его компоненты используют общий подход к организации артефактов разработки. Это позволяет унифицировать процесс разворачивания и тестирования средств разработки и отладки. Это также упрощает перенос и объединение изменений между разными средами разработки (CI/CD).

В состав BI.Qube 2.0 входят следующие компоненты:

MetaCommon – компонент имеющий развитый визуальный интерфейс, реализующий работу в режиме low-code/no-code и предназначенный для выполнения всех необходимых настроек, которые в последующем использует все остальные компоненты.
MetaStaging – компонент имеющий развитый визуальный интерфейс, реализующий работу в режиме low-code/no-code и предназначенный для извлечения данных из источников и доставки их в точку назначения.
Data&Model – компонент имеющий развитый визуальный интерфейс, реализующий работу в режиме low-code/no-code, предназначенный для создания аналитической модели данных, работой со справочниками в рамках MDM-системы и обогащения данных. Компонент работает с данными, доставляемыми с использованием компонента MetaStaging.

Data&Model включает в себя компоненты MetaVault и MetaMasterData.
- MetaVault имеет развитый визуальный интерфейс, реализующий работу в режиме low-code/no-code и предназначенный для организации хранения данных в модели Data Vault. Пользователь может не иметь компетенций по моделированию в концепции Data Vault, система все необходимые действия выполняет сама и предоставляет доступ к автоматически сгенерированным представлениям.
- MetaMasterData – MDM-инструмент, имеющий развитый визуальный интерфейс, реализующий работу в режиме low-code/no-code и предназначенный для работы с нормативно-справочной информацией. Он выполняет задачи обогащения данными, вводимыми в ручном режиме через веб-интерфейс, а также создания новых данных. Данный компонент работает только в связке с MetaVault и отдельно работать не может. Компонент реализует возможности MDM систем и созданные с его помощью объекты не требуют интеграции с объектами MetaVault.
MetaControl – компонент имеющий развитый визуальный интерфейс, реализующий работу в режиме low-code/no-code и предназначенный для создания различных бизнес правил, например, контроля за ETL-процессами. Компонент выполняет бизнес-правило, которое может быть представлено, например, запросом, выполняет сопоставление полученного результата с эталонным (ожидаемым) и при обнаружении расхождений (с учетом заданной точности) выполняет рассылку по e-mail или по средствам telegram-канала информации о выполненных действиях, всем заинтересованным получателям.