Analytic Workspace релиз 1.25: прогнозирование временных рядов и группировка по каталогам

Модернизация и улучшения в релизе 1.25 коснулись практически всех разделов системы: модели, виджеты, информационные панели и общие настройки.

МОДЕЛИ

Исключен сервис ETL-drill
Построение быстрых превью переведено на#nbsp;Spark, переделан механизм получения метаданных для SQL-запросов к#nbsp;файлам.

Добавлен новый встроенный ETL-блок для работы с#nbsp;массивами данных
Список доступных для использования ETL-блоков пополнился:

• «JSON-блок»#nbsp;— блок позволяет преобразовать значения из#nbsp;JSON-поля в#nbsp;новые строки или столбцы. Работает со#nbsp;значениями полей как в#nbsp;виде объектов, так и#nbsp;массивов.

Добавлен тестовый запуск ETL-блока из#nbsp;окна ввода параметров
В#nbsp;окно ввода параметров ETL-блока добавлена кнопка «Выполнить», по#nbsp;нажатию которой выполняется тестовый запуск блока внутри текущей модели. Результаты выполнения (выходная из#nbsp;блока таблица) отобразится в#nbsp;блоке «Результаты запуска».

Добавлен выбор поля, вложенного в#nbsp;ETL-блок объекта, в#nbsp;параметрах и#nbsp;в#nbsp;IntelliSense
На#nbsp;форме редактирования ETL-блоков часто встречаются параметры, в#nbsp;которых нужно указывать поля из#nbsp;вложенного в#nbsp;блок объекта. Для этого добавлены:

• Возможность выбирать поля из#nbsp;выпадающего списка;
• Например, в#nbsp;блоках «Разворот иерархии Parent-Child», «Прогнозирование временного ряда», «Классификация/регрессия с#nbsp;ML-моделью», «JSON-блок»;

Реализован запуск блока по#nbsp;прогнозированию временных рядов на#nbsp;обычной инфраструктуре Системы
Добавлена возможность запуска блока с#nbsp;прогнозированием временных рядов без использования ML-инфраструктуры. Внесены изменения в#nbsp;параметры блока. Добавлена возможность управления дискретностью генерации будущих точек#nbsp;— автоматическая генерация (это значение по#nbsp;умолчанию) не#nbsp;всегда работает, в#nbsp;процессе синхронизации может выйти ошибка с#nbsp;предложением указать требуемое значение явно.

Игнорирование настроек по#nbsp;инкрементальной загрузке из#nbsp;файлового источника
Для объектов с#nbsp;источником типа «Файл» настройки инкрементальности игнорируются. Независимо от#nbsp;того, что настроено в#nbsp;интерфейсе Системы, в#nbsp;Airflow для таких объектов будет выполняться полная выгрузка данных.

ВИДЖЕТЫ

Внесены дополнения в#nbsp;функциональность форматирования данных виджетов
Для графических виджетов при добавлении форматирования по#nbsp;умолчанию определен оператор форматирования «Диаграмма». Для круговых диаграмм добавлена возможность форматирования по#nbsp;агрегатам операторами «Диаграмма», «Цвет ячейки», «Значки», «Гистограмма (градиент по#nbsp;столбцу)».

Оптимизирована загрузка заголовков для сводных таблиц
Кеш заголовков сократил время формирования пивотной таблицы.

Добавлены настройки для итогов в#nbsp;табличные виджеты
Для типов виджетов «Таблица» и#nbsp;«Сводная таблица» добавлена настройка «Итоги», позволяющая задать параметры отображения строки/столбцов итоговых агрегатов.

Унифицировано применение шрифтов в#nbsp;виджетах
В#nbsp;список шрифтов добавлено значение «По#nbsp;умолчанию», при установке этого значения будет применен шрифт, указанный в#nbsp;настройках «Вид».

Добавлена возможность экспорта данных виджетов, построенных на#nbsp;live-моделях
Внедрена поддержка экспорта в#nbsp;файл формата .csv данных виджетов из#nbsp;live-моделей, построенных на#nbsp;различных подключениях к#nbsp;БД ClickHouse.

ИНФОРМАЦИОННЫЕ ПАНЕЛИ

Проведена оптимизация загрузки виджетов#nbsp;ИП по#nbsp;вкладкам
При открытии информационной панели данные для виджетов подгружаются только для активной вкладки и#nbsp;кешируются до#nbsp;изменении фильтров в#nbsp;самих виджетах. Выполненные работы позволили уменьшить количество элементов на#nbsp;странице браузера#nbsp;— получают данные только виджеты на#nbsp;активной вкладке.

АДМИНИСТРИРОВАНИЕ

Реализован новый провайдер LDAP kerberos
Провайдер с#nbsp;типом «LDAP kerberos» реализовывался под проект и#nbsp;будет работать в#nbsp;частных случаях с#nbsp;соответствующей инфраструктурой, работает по#nbsp;тому#nbsp;же принципу что и#nbsp;тип провайдера «OpenID Cookie».

ОБЩИЕ ИЗМЕНЕНИЯ

Добавлена функциональность группировки объектов по#nbsp;каталогам
Каталог#nbsp;— объект в#nbsp;файловой системе, предоставляющий способ группировки объектов реестра с#nbsp;целью облегчения поиска этих объектов по#nbsp;какому-то признаку и#nbsp;предоставления массового доступа к#nbsp;сгруппированным объектам.

В#nbsp;основные разделы системы добавлен функционал по#nbsp;работе с#nbsp;двумя видами каталогов:

• Каталог с#nbsp;личным доступом (доступен только автору);ц
• Каталог с#nbsp;общим доступом (доступен всем пользователям и#nbsp;группам пользователям, которым предоставлен доступ).

Любой объект может быть перемещен в#nbsp;личный каталог.

В#nbsp;каталог с#nbsp;общим доступом можно переместить объект, если каталог доступен с#nbsp;правом на#nbsp;«Редактирование"/"Администрирование» (в т.ч. с#nbsp;авторским правом) и#nbsp;на#nbsp;перемещаемый объект у#nbsp;пользователя имеется индивидуальное/групповое право на#nbsp;его администрирование (в т.ч. авторское право).

Каталог с#nbsp;общим доступом позволяет предоставить массовый доступ к#nbsp;содержимому с#nbsp;помощью настройки прав доступа. Объект, помещенный в#nbsp;такой каталог, наследует права доступа от#nbsp;ключей доступа к#nbsp;содержимому каталога, если для пользователя не#nbsp;были назначены индивидуальные или групповые права на#nbsp;объект.

Обновлена настройка доступа к#nbsp;объектам
Настройки по#nbsp;управлению доступом отдельных пользователей (индивидуальные права) и#nbsp;групп пользователей (групповые права) объединены в#nbsp;единую форму «Общий доступ».