В релизе 1.22 BI-системы Analytic Workspace (AW BI) реализована поддержка новых типов источников, добавлены встроенные ETL-блоки для обработки данных через готовые скрипты, и другие новые функции.
ИСТОЧНИКИ
Реализованы коннекторы для работы с данными источников Red Database и Firebird
Добавлена возможность подключения к СУБД Ред База Данных и Firebird.
Расширен перечень форматов подключаемых файлов
Установлено расширение для чтения файлов формата .xlsb, добавлена возможность использования файлов с расширениями .txt, .tsv, .xlsb, .ods, .odf, .jsonl.
Реализована поддержка чтения файлов .csv без строки заголовка
Добавлена комбинация параметров, которая позволит читать файлы .csv без строки заголовка.
Добавлены дополнительные параметры для чтения файлов из папок
Новые параметры позволяют управлять загрузкой файлов из папок по произвольно заданным критериям фильтра, а также автоматически задать для считанного набора данных название нового сгенерированного столбца по имени исходного файла.
Добавлена возможность подключения к СУБД Ред База Данных и Firebird.
Расширен перечень форматов подключаемых файлов
Установлено расширение для чтения файлов формата .xlsb, добавлена возможность использования файлов с расширениями .txt, .tsv, .xlsb, .ods, .odf, .jsonl.
Реализована поддержка чтения файлов .csv без строки заголовка
Добавлена комбинация параметров, которая позволит читать файлы .csv без строки заголовка.
Добавлены дополнительные параметры для чтения файлов из папок
Новые параметры позволяют управлять загрузкой файлов из папок по произвольно заданным критериям фильтра, а также автоматически задать для считанного набора данных название нового сгенерированного столбца по имени исходного файла.
МОДЕЛИ
Внедрена новая функциональность «ETL-блоки» — широкий шаг навстречу self-service ETL
«ETL-блоки» — это инструмент, который позволяет трансформировать и обрабатывать данные, используя готовые скрипты. Использование ETL-блоков избавляет пользователя от необходимости вручную программировать стандартные операции с данными, существенно ускоряет и облегчает работу с моделями.
Каждый ETL-блок — это:
В версии AW BI 1.22 добавлены следующие встроенные ETL-блоки:
Список ETL-блоков будет расширен в следующих версиях системы. Подробнее об ETL-блоках узнайте из видео выступления ведущего архитектора AW BI Александра Кварацхелия:
«ETL-блоки» — это инструмент, который позволяет трансформировать и обрабатывать данные, используя готовые скрипты. Использование ETL-блоков избавляет пользователя от необходимости вручную программировать стандартные операции с данными, существенно ускоряет и облегчает работу с моделями.
Каждый ETL-блок — это:
- Скрипт, который содержит функцию определения списка полей объекта и функцию сборки данных блока;
- Список настраиваемых параметров модели при использовании ETL-блока.
В версии AW BI 1.22 добавлены следующие встроенные ETL-блоки:
- «SQL-блок»;
- «Временная серия»;
- «Вычисляемые поля»;
- «Декоратор»;
- «Функция».
Список ETL-блоков будет расширен в следующих версиях системы. Подробнее об ETL-блоках узнайте из видео выступления ведущего архитектора AW BI Александра Кварацхелия:
ВИДЖЕТЫ
Добавлен новый тип виджета «Датчик»
Тип виджета «Датчик» или «Спидометр» отображает значения одной меры и помогает интерпретировать эти значения на основе цветовой шкалы.
«Датчик» часто используется для отображения ключевых показателей эффективности на информационных панелях управления. С помощью сегментации и кодировки цветом виджет эффективно отображает достигнутые результаты. «Датчик» позволяет легко считывать и понимать значения, а также предоставляет общую информацию о работе в определенной области.
Внедрена поддержка построения виджетов на данных live-моделей из сторонних БД ClickHouse
Появилась возможность подключения к внешним базам данных ClickHouse и строить виджеты, используя данные из этих баз.
Появилась возможность регулирования HTML-виджета в зависимости от текущей темы приложения
В HTML-виджетах стало доступно определение цветов по отдельности для светлой и темной тем приложения.
Добавлена функция для проброса фильтра из HTML-виджета
Реализована функция для проброса фильтра из HTML-виджета, которая позволяет сохранить заданную фильтрацию данных в создаваемом дашборде.
Тип виджета «Датчик» или «Спидометр» отображает значения одной меры и помогает интерпретировать эти значения на основе цветовой шкалы.
«Датчик» часто используется для отображения ключевых показателей эффективности на информационных панелях управления. С помощью сегментации и кодировки цветом виджет эффективно отображает достигнутые результаты. «Датчик» позволяет легко считывать и понимать значения, а также предоставляет общую информацию о работе в определенной области.
Внедрена поддержка построения виджетов на данных live-моделей из сторонних БД ClickHouse
Появилась возможность подключения к внешним базам данных ClickHouse и строить виджеты, используя данные из этих баз.
Появилась возможность регулирования HTML-виджета в зависимости от текущей темы приложения
В HTML-виджетах стало доступно определение цветов по отдельности для светлой и темной тем приложения.
Добавлена функция для проброса фильтра из HTML-виджета
Реализована функция для проброса фильтра из HTML-виджета, которая позволяет сохранить заданную фильтрацию данных в создаваемом дашборде.
АДМИНИСТРИРОВАНИЕ
Реализован новый внешний REST провайдер
Провайдер с типом «Внешний REST» применяется для бесшовного перехода в систему внутри стороннего приложения через единую точку входа.
Добавлено логирование действий пользователей в основные разделы AW BI
Теперь действия пользователей логируются в следующих разделах системы:
Провайдер с типом «Внешний REST» применяется для бесшовного перехода в систему внутри стороннего приложения через единую точку входа.
Добавлено логирование действий пользователей в основные разделы AW BI
Теперь действия пользователей логируются в следующих разделах системы:
- «Источники данных»;
- «Модели»;
- "Виджеты";
- "Информационные панели".
ОТЧЕТЫ И ВЫГРУЗКИ
Реализована вторая очередь работ по массовым рассылкам виджетов и информационных панелей на почтовые адреса пользователей системы
Теперь можно экспортировать и отправлять на почтовые адреса пользователей данные виджета или дашборда в графическом формате — .pdf или .png.
Теперь можно экспортировать и отправлять на почтовые адреса пользователей данные виджета или дашборда в графическом формате — .pdf или .png.
Другие улучшения
- Добавлена проверка на наличие всех используемых в виджетах полей при изменении SQL-запроса в модели;
- Скрыт блок фильтра по агрегатам для поля типа «Дата» с агрегацией «Минимум» и «Максимум»;
- Изменен символ для разделителя уровней в сводной таблице;
- Выполнена доработка кейсов с отображением результата в расчётных агрегатах виджетов;
- Скорректированы стили при экспорте панелей в .pdf или .png;
- Расширение odt убрано из списка разрешенных для файлового пуллера;
- Обновлены панель кнопок и окно «История выгрузок» в информационных панелях;
- Обновлено окно «История выгрузок» в виджетах;
- Проведены работы по устранению уязвимостей 1.21 версии;
- Сняты ограничения на просмотр участников групп в рассылках;
- Добавлены ограничения доступа к разделу «Рассылка по email»;
- Добавлены ограничения на рассылку данных виджетов и информационных панелей заблокированным пользователям;
- Внедрены дополнительные механизмы очистки папок запуска после работы DAG-ов моделей;
- Добавлено поле для порта http при подключении БД ClickHouse;
- Скрыт тип объекта доступа «Доступ к столбцам» в правилах доступа моделей;
- Улучшена авторизация в Airflow при наличии порта в URL AW BI;
- Реализована поддержка sftp-серверов с нестандартными портами и +ssh-rsa ключами;
- Выполнена адаптация подсказок под тач-экран;
- Реализован обработчик параметров ссылок;
- Устранена проблема по отсутствию картинок фона для виджета «Тренд» на стендах с использованием BASE HREF.
Исправлены ошибки
- Восстановлена работа методов перенаправления пользователя с использованием данных внутреннего провайдера и токена cистемы;
- Устранены ошибки (с идентификаторами моделей в SQL запросах) при синхронизации моделей, которые перенесены через импорт меты;
- Устранена ошибка при работе с виджетами на моделях, созданных через API/integration;
- Устранена ошибка открытия листа Excel-файла из папки с несколькими файлами;
- Устранена ошибка в ИП при фильтрации связанных виджетов, построенных на разных моделях.
