Аналитическая платформа Visiology

Зачем нужна бизнес-аналитика? Чтобы руководитель в реальном времени видел все показатели бизнеса и вовремя смог отследить нештатные ситуации. Имея перед глазами подробные аналитические отчеты, менеджер может уверенно сказать, что влияет на ключевые показатели эффективности и как их можно улучшить. Системы бизнес-аналитики предоставляют такую возможность: они обеспечивают мгновенный доступ к информации и актуальным отчетам, и это помогает принимать правильные управленческие решения. Инвестиции в средства анализа данных не только вдвое сокращают время поиска нужных сведений и доступ к ним, но и существенно уменьшают продолжительность анализа данных (IDC «Time to Value and ROI From BI», 2018). Один из таких инструментов бизнес-анализа — информационно-аналитическая платформа Visiology для сбора и консолидации данных из разрозненных источников, преобразования и визуализации результатов анализа для пользователя.

Архитектура

По функциональному назначению Visiology схожа с другими платформами бизнес-аналитики: она обеспечивает подключение к множеству разнородных источников данных, предоставляет инструменты анализа и обеспечивает визуализацию результатов на любом устройстве — от смартфона до видеостены.

Каждый из функциональных модулей платформы (рис. 1) отвечает за решение конкретной задачи: загрузка данных из существующих информационных систем, автоматизированный ввод данных, анализ и обогащение данных, визуализация. На входе аналитической системы — In-Memory OLAP база данных ViQube, которая обеспечивает работу размещенного на сервере аналитического веб-портала, отвечающего за визуализацию отчетности, управление правами доступа (функция Single Sign-On исключения повторного ввода пароля) и интеграцию со сторонними системами авторизации, например Active Directory. Кроме того, подготовленные на портале витрины данных можно встраивать в другие веб-приложения — например, в корпоративный портал предприятия, публичный сайт компании или личный кабинет клиента.

Рис. 1. Экосистема платформы Visiology

Мобильное приложение Visiology Mobile позволяет бизнес-пользователю быстро получить необходимую информацию. Оно представляет собой копию аналитического веб-портала, однако здесь нет возможности создавать отчеты или менять исходные данные. В мобильном приложении имеется виртуальный аналитик ViTalk (рис. 2), способный работать в том числе в пространстве Telegram, что исключает необходимость установки дополнительных приложений, — в мессенджере появляется новый контакт, и здесь в свободной форме можно написать любой запрос к данным. Виртуальный аналитик, по сути, превращает голосовое обращение в сложный OLAP-запрос и обрабатывает его, выдавая ответ в виде текста, таблицы, диаграммы, круговой диаграммы, графика или столбчатой диаграммы. В случае отсутствия уточняющего запроса, ViTalk автоматически подбирает формат визуализации исходя из объема и состава выводимых данных. Часто многие руководители не очень хорошо разбираются с витринами данных и им требуется помощь аналитика — виртуальный аналитик распознаёт русский язык, что упрощает взаимодействие с системой бизнес-аналитики.

Рис. 2. Пример работы виртуального аналитика ViTalk

Конструктор отчетов — основной инструмент аналитика, позволяющий формировать и анализировать отчеты. В конструкторе предусмотрен инструментарий разработчика, который за счет наличия большого количества открытых API и SDK, библиотек плагинов, создаваемых сторонними разработчиками, и встроенных стилей позволяет выполнять достаточно сложные операции, такие как настройка интерактивности и определение показателей, вычисляемых «на лету». Стандартные возможности визуализации, включающие базовый набор диаграмм и интерактивных действий, могут быть расширены с помощью JavaScript. Бизнес-логика дополняется средствами C# и Python, математика — средствами Python с помощью модуля моделирования, позволяющего исследователям данных (data scientist) публиковать модели для пользователей и создавать для них графические интерфейсы. В перспективе конструктор будет интегрирован с Jupyter Notebook — основным инструментом исследователей данных.

Модуль ввода данных позволяет создавать веб-формы, использование которых поможет избежать ошибок и снизить трудоемкость процесса консолидации данных в Excel [1]. С помощью таких веб-форм можно автоматизировать процессы сбора и согласования данных — например, сбор планов от подразделений и дочерних предприятий корпорации, консолидацию управленческой отчетности, сбор существующих отчетов, предоставляемых вручную. При этом бизнес-аналитик может настраивать такую автоматизацию с минимальным привлечением ИТ-департамента. Данные из веб-формы можно перемещать в аналитическую базу данных ViQube для дальнейшего анализа и визуализации.

В данном случае, в отличие от работы с известными платформами бизнес-аналитики (Power BI, QlikView и пр.), ввод данных полностью интегрирован в аналитическую платформу Visiology: пользователь создает модель данных и указывает бизнес-процессы, к которым предоставляется доступ. Нет необходимости в сложной разработке процессов выгрузки данных или ETL (Extract, Transform, Load).

Инструмент ViLoader, пока не входящий в состав платформы, позволяет загружать большие объемы файлов Excel (десятки тысяч), предварительно визуально их разметив в полуавтоматическом режиме (такие файлы часто содержат «грязные» данные), что экономит время и силы сотрудников компании.

Работа с большими данными

Идеальная система бизнес-аналитики должна позволять руководителю контролировать все аспекты бизнеса, однако на практике часто получается так, что данных для принятия решений либо слишком мало, либо слишком много. В последнем случае требуется помощь аналитика или специалиста по исследованию данных. Иногда оказывается, что данные вообще находятся в некоторой «слепой» зоне: они есть, но не визуализируются по разным причинам — в том числе из-за нехватки компетенций и неготовности инструментов. Неструктурированные или «грязные» данные вообще не поддаются аналитике. Иногда же информацию вовсе не собирают, хотя существует запрос на ее анализ со стороны руководства. Все это негативно влияет на качество управленческих решений.

Инструменты бизнес-аналитики должны позволить сформировать полную картину по всем метрикам бизнеса, что реализуется стандартными инструментами любой системы бизнес-аналитики при использовании традиционных ERP-систем и баз данных. Однако при работе с большими данными сложно собрать всю информацию в «едином окне» — требуются специальные инструменты. При работе с большими данными и обслуживании множества одновременно работающих пользователей, In-Memory-движок ViQube работает в режиме push-down автоматической генерации SQL-запросов к распределенным СУБД c массовым параллелизмом (MPP): Arenadata, HP Vertica, Yandex ClickHouse. Такая интеграция основана на гибридном подходе: «горячие» данные размещаются в оперативной памяти, быстро обновляются и доступны для обработки аналитиком без задержек, а «холодные» ретроспективные данные содержатся в реляционном хранилище. Если запрос затрагивает «холодные» данные, то ViQube, вместо того чтобы сделать запрос самостоятельно, генерирует SQL-запрос и выполняет его на распределенной СУБД. Если же запрос касается только «горячих» данных, то ViQube его выполняет самостоятельно. Такой подход позволяет строить эффективную масштабную аналитическую систему, обслуживающую тысячи пользователей.

***

Аналитическая платформа Visiology используется в таких компаниях, как «Алроса», «Росатом», «Роскосмос», Русская медная компания, и рекомендована Аналитическим центром при правительстве РФ к использованию в субъектах РФ. Выбранная архитектура Visiology позволяет обеспечить высокую производительность при работе с любыми объемами данных и при произвольном количестве пользователей, получающих через встроенный модуль веб-форм доступ к разнообразным источникам данных в различных форматах. Виртуальный аналитик ViTalk, предоставляющий голосовой интерфейс, позволяет руководителям бизнеса работать с информацией непосредственно, без привлечения ИТ-специалистов, и решать практически любые задачи анализа данных.

Литература

1. Иван Вахмянин. Excel vs бизнес-аналитика // Открытые системы.СУБД. — 2020. — № 1. — С. 28–29. URL: www.osp.ru/os/2020/01/13055349 (дата обращения: 10.09.2020).

Иван Вахмянин ( ivan@visiology.com )  —  генеральный директор, Visiology (Москва).