17 февраля 2021
Вебинар
Быстрая
аналитика на больших данных
Что это: Вебинар о передовых технологиях для защиты хранилища от "тяжёлых" запросов и ускорения отклика BI-системы. Рассказываем на примерах внедрений аналитической платформы Luxms BI.
Что такое Luxms BI
Luxms BI – аналитическая платформа с датацентричной архитектурой: сервер приложений расположен внутри базы данных. Высочайшая скорость отклика и неограниченная горизонтальная масштабируемость – главные отличия платформы. Luxms BI является полностью российской разработкой. Платформа зарегистрирована в Реестре Минкомсвязи, регистрационный номер – 3366.
Проблемы со скоростью
Данных становится всё больше. Требования к оперативности возрастают. На многих крупных внедрениях мы сталкиваемся с проблемой, которую назвали «Coffee-break analytics» - «аналитика с перерывом на кофе». Есть хранилище данных. Для него часто установлен лимит по ресурсам. Есть аналитик, который готовит данные для дэшбордов. Часто он подаёт сложные, тяжёлые запросы в хранилище, чем сильно нагружает хранилище. Есть пользователи, которые параллельно работают в интерфейсе BI системы, открывают дэшборды, обращаясь к хранилищу за нужными значениями. Бывает так, что аналитик, прождав минут 40 за чашкой кофе, вместо ответа на запрос получает ошибку «превышение квоты по ресурсам». Пользователь тратит секунды или даже минуты, чтобы увидеть график. А ресурсы хранилища всё это время по полной расходовались: диски крутились, память утилизировалась, процессоры были заняты. У проблемы есть несколько решений. Мы поделимся своим опытом.
Пример ускорения аналитического запроса
На входе:
На выходе:
Cтатистика по одному филиалу за месяц
Было
Стало
Кто ведёт?
Дмитрий Дорофеев
Главный архитектор Luxms
Выпускник Санкт-Петербургского политехнического университета Петра Великого по специальности прикладная математика.
Компьютерный гик, специалист по открытым системам, реализовал не один десяток коммерческих интернет-проектов и мобильных приложений с использованием самых современных технологий. Идеолог архитектурных решений платформы Luxms BI. В настоящий момент сфокусирован на Big Data, IoT, MPP.


Сергей Шестаков
Генеральный директор Luxms
Выпускник Санкт-Петербургского политехнического университета Петра Великого по специальности вычислительные системы, к.т.н.
Исследовал применение ИИ для сбора информации. Более 10 лет опыта работы в крупных компаниях финансового сектора в роли руководителя международных инновационных проектов, архитектора и ответственного за функционирование высокотехнологичных распределенных систем. В настоящее время предприниматель в сфере высоких технологий, основатель группы компаний Luxms, сфокусирован на задачах бизнес-аналитики, визуализации и массивно-параллельной обработке данных, в том числе с применением методов ИИ.
Максим Кикоть
Генеральный директор LiCO
Выпускник Санкт-Петербургского государственного электротехнического университета «ЛЭТИ» им. В.И.Ульянова по специальности инженер - системотехник.
Занимался разработкой ПО и систем контроля и сопряжения интерфейсов. Более 20 лет занимается практикой консультирования руководителей высшего и среднего звена, реализованы проекты более чем в 400 компаниях, в том числе проведение более 1200 тренингов и семинаров, а также проекты построения или перестроения организационных структур, создания систем мотивации, оценки и развития корпоративной культуры, разработки и изменений в стратегии компаний. В настоящее время специализируется на Управлении высокотехнологичными проектами, Управлении распределенными группами в IT компаниях.

Почему Luxms?
Технологии, о которых мы рассказываем, апробированы и подкреплены значимыми внедрениями в крупнейших компаниях России, в том числе РЖД и Газпром Нефть.
Преимущество архитектурного решения платформы Luxms BI доказано тестами в ландшафте заказчиков и на мощностях партнеров. Датацентричный подход даёт BI-платформе увеличение по скорости от 2 до 12 раз, в зависимости от сложности запросов (чем сложнее запрос – тем больше выигрыш по скорости).
Подробное сравнение BI-архитектур и результаты наших тестов опубликованы в одной из старейших и крупнейших международных организаций в компьютерной области Association for Computing Machinery. С текстом статьи можно ознакомиться по ссылке: https://dl.acm.org/doi/10.1145/3274856.3274869