Встроенный ETL/ELT инструмент
В Luxms BI есть встроенный No/Low-Code ETL/ELT-инструмент Luxms BI Data Boring.
Модель программирования Data Boring на основе потоков идеально подходит для линейных рабочих процессов, включающих задачи обработки данных и автоматизации. Пользователи могут визуально проектировать свои рабочие процессы, перетаскивая и соединяя узлы в редакторе Data Boring.
Подходит для быстрого прототипирования - позволяет быстро выстроить связь с разнородными источниками данных, а также не требует знания программирования для решения практических задач.
Загрузка Excel
В Luxms BI реализована простая работа с загрузкой Excel: можно использовать Excel как источник данных, просто перетащив его на страницу дэшборда.
Также есть возможность простым способом обновить или дозагрузить Excel в уже созданный источник данных.
Ассоциативная модель
В Luxms BI реализована первая очередь функционала ассоциативной модели — возможность создавать новые кубы данных, просто перетаскивая мышкой таблицы из источника данных на холст (листик в клеточку).
Подготовка витрин/кубов данных (data engineering)
Объединение, очистка и трансформация данных из различных источников для формировать единых, доступных и производительных витрин/кубов данных.
Поддержка файлов Qlik (QVD-файлы)
Файл QVD — это файл, в котором содержится таблица данных, экспортируемых из Qlik Sense или QlikView. Пользователь может легко загрузить QVD-файлы и создавать визуализации в Luxms BI на основе полученных данных. Импорт осуществляется в пользовательском интерфейсе аналогично загрузке Excel или CSV файлов. Это особенно полезно для клиентов, все еще использующих Qlik и имеющих множество ETL-процессов на этой платформе.
Постепенный переход от дэшбордов на Qlik к использованию Luxms BI для визуализации QVD-файлов является первым шагом в полном отказе от ушедшей с российского рынка системы Qlik, сохраняя при этом существующие ETL-процессы.
Сейчас идет активная разработка парсера Qlik, который показывает, какие данные используются в скриптах трансформации Qlik, как из СУБД, так и в файловой системе, чтобы при миграции с Qlik удобнее было перенести всю информацию и потом визуализировать в Luxms BI.
Интеграция с SSAS (MDX) в Luxms BI
Luxms BI поддерживает MDX запросы для использования всех возможностей аналитики (возможность подключать в качестве источника данных SSAS (MDX)). Это позволяет использовать данные из уже существующих многомерных баз данных без необходимости их преобразования.
Интеграция с SSAS (MDX) совместно с использованием LPE языка позволит комфортно мигрировать с Power BI на Luxms BI. Прямо сейчас мы ведем 2 крупные миграции, в рамках одной из которых переводим более 1000 дэшбордов.
Подробнее про реализацию MDX-запросов в нашем блоге на Хабре.
Подключения к источникам и СУБД
Luxms BI может брать данные любой сложности, любой вложенности, из любого источника:
-
СУБД: нативные коннекторы к ClickHouse/Arenadata QuickMarts, Greenplum/Arenadata DB, PostgreSQL, Oracle Database, Microsoft SQL Server, Vertica, DB2, MySQL, SAP HANA и прочие JDBC/HTTP совместимые источники;
-
Хранилища: Teradata DWH;
-
BigData источники Hadoop: HBase, Hive;
-
Системы бухгалтерского учёта: 1С, ПАРУС;
-
Таблицы Excel и CSV файлы;
-
Специализированные системы учёта;
-
Неструктурированные источники, архивы;
-
Потоковые источники, в т.ч. реального времени: очереди и логи сообщений, такие как Apache Kafka, MQTT, RabbitMQ, Syslog, SNMP, Redis и т.д.
-
Все источники данных, поддерживаемые Apache NiFi (посредством формируемых с помощью NiFi витрин/csv).
