UI - KIT (элементы, отступы, цвета)

Обновление перечня компонентов, входящих в поставку продукта. Выделение отдельных сервисов для процессов согласования и нотификации пользователей. Подробнее тут.

Оптимизация продукта

Отображения зацикленных потоков Data Lineage;

Загрузка дашбордов Visiology 3;

Использование памяти ingestion для профилирования строковых метрик;

Отображение связанных объектов данных на карточке объекта глоссария;

Выделение полномочий на редактирование KPI;

Отправка почтовых уведомлений при указании получателя;

Построение Data Lineage PXF с символами в наименовании;

Тестирование соединения Fine BI;

Закрытие сессий при подключении к Форсайт;

Связь между глоссарием и каталогом с символами в наименовании объектов глоссария;

Обновление документации настройки профилирования;

Отправка почтовых уведомлений получателям, определенных по роли;

Оптимизация поиска по наименованию объекта на странице обзора глоссария;

Добавление выбора «Не заполнено» для фильтров;

Снятие обязательности заполнения атрибута типа «Логическое значение» в импорте данных;

Сохранение скрытых системных атрибутов при обновлении приложения;

Экспорт пустого набора объектов;

Отображение пользователя, запустившего импорт, в истории версий объекта глоссария;

Локализация раздела действий с объектами каталога данных;

Отображение карточки таблиц с длинными описанием столбцов;

Ошибочный переход по ссылке на ЗнИ;

Локализация расписания переиндексации;

Разделение прав для перехода в раздел «Классификаторы»;

Стабилизация переиндексации;

Цветовое разделение иконок команд;

Предпросмотр настроенных атрибутов «Дата» и «Ссылка URL»;

Изменение курсора при наведении на инструкцию по заполнению атрибута;

Модальное окно для отправки группы объектов глоссария на согласование;

Сортировка наборов классификаторов по полному наименованию;

Отображение объектов каталога с длинным наименованием на визуализации связей в глоссарии;

Поддержка импорта валидных дробных чисел;

Разделение сохраненных представлений при переключении между глоссариями;

Локализация шагов подключения базы данных;

Отображение роли в карточке пользователя;

Упорядочивание столбцов в файле экспорта;

Принудительная установка курсора при заполнении знаменателя в «Формуле расчета»;

Редактировании объекта глоссария, после внесений изменений в тип объекта;

Отображение двунаправленных связей на визуализации в глоссарии.

Бизнес-глоссарий

Отображение направлений на визуализации связей;

Возможность развернуть визуализацию связей на весь экран;

Оптимизация отображения объектов с длинным наименованием на визуализации связей;

Возможность откатить объект с процесса согласования с помощью API;

Согласование объектов глоссария по электронной почте;

Оптимизация сохранения пользовательского представления;

Оптимизация процесса отправки объектов на групповое согласование;

Снятие ограничения на количество одновременно отправленных объектов.

Авторизация

Переработка модуля разделения полномочий. Развитие политик предоставление доступа;

Возможность разделения доступа к объектам глоссария в зависимости от типа или значений атрибутов объектов;

Отображение кнопок действий с объектом зависит от полномочий пользователя.

Каталог данных

Возможность управления загрузкой ключей и ограничений для ADB / Greenplum;

Отображение мощности и обязательности связей на ERD.

Инфраструктурные изменения

Обновление версий библиотек фреймворка захвата метаданных с систем-источника;

Обновление перечня компонентов, входящих в поставку продукта. Выделение отдельных сервисов для процессов согласования и нотификации пользователей. Подробнее тут.

Оптимизация продукта

Отображения зацикленных потоков Data Lineage;

Загрузка дашбордов Visiology 3;

Использование памяти ingestion для профилирования строковых метрик;

Отображение связанных объектов данных на карточке объекта глоссария;

Выделение полномочий на редактирование KPI;

Отправка почтовых уведомлений при указании получателя;

Построение Data Lineage PXF с символами в наименовании;

Тестирование соединения Fine BI;

Закрытие сессий при подключении к Форсайт;

Связь между глоссарием и каталогом с символами в наименовании объектов глоссария;

Обновление документации настройки профилирования;

Отправка почтовых уведомлений получателям, определенных по роли;

Оптимизация поиска по наименованию объекта на странице обзора глоссария;

Добавление выбора «Не заполнено» для фильтров;

Снятие обязательности заполнения атрибута типа «Логическое значение» в импорте данных;

Сохранение скрытых системных атрибутов при обновлении приложения;

Экспорт пустого набора объектов;

Отображение пользователя, запустившего импорт, в истории версий объекта глоссария;

Локализация раздела действий с объектами каталога данных;

Отображение карточки таблиц с длинными описанием столбцов;

Ошибочный переход по ссылке на ЗнИ;

Локализация расписания переиндексации;

Разделение прав для перехода в раздел «Классификаторы»;

Стабилизация переиндексации;

Цветовое разделение иконок команд;

Предпросмотр настроенных атрибутов «Дата» и «Ссылка URL»;

Изменение курсора при наведении на инструкцию по заполнению атрибута;

Модальное окно для отправки группы объектов глоссария на согласование;

Сортировка наборов классификаторов по полному наименованию;

Отображение объектов каталога с длинным наименованием на визуализации связей в глоссарии;

Поддержка импорта валидных дробных чисел;

Разделение сохраненных представлений при переключении между глоссариями;

Локализация шагов подключения базы данных;

Отображение роли в карточке пользователя;

Упорядочивание столбцов в файле экспорта;

Принудительная установка курсора при заполнении знаменателя в «Формуле расчета»;

Редактировании объекта глоссария, после внесений изменений в тип объекта;

Отображение двунаправленных связей на визуализации в глоссарии.

Глоссарий

Управление базовым набором атрибутов объектов глоссария. При необходимости теперь доступно отключение атрибутов: Синонимы, Владелец, Стюарды, Предметная область, Дополнительные предметные области;

Настройка уведомлений для конфигураций рабочих процессов. Внутри конфигурации можно указать кому и при каком событии должно быть направлено оповещение. Указанные пользователи получат уведомление внутри системы;

Поддержка импорта и экспорта данных в формате XLSX;

Визуальное разделение представления глоссария по типам объектов;

Теперь вы можете переключать режимы просмотра карточки объекта, чтобы по необходимости отслеживать незаполненные поля.

Каталог данных

Пользовательское описание дополнительно добавлено для таблиц, представлений, схем баз данных;

Автоматическое построение ER-диаграмм. Отображение доступно на карточке схемы базы данных.

Кастомизация интерфейса

Настройка цвета для интерфейса системы. Измените общее впечатление от работы с приложением в соответствии с вашим корпоративным стилем.

И другие улучшения

«Термины» ADC переименованы в «Объекты» для лучшего восприятия типизации глоссария;

Классификаторы персональных данных приведены в соответствии с 152 ФЗ;

Добавлены дашборды в Grafana для отслеживания метрик производительности работы приложения.

Глоссарий

Кастомизация карточки предметной области. Теперь вы можете создавать уникальные карточки предметной области для каждого глоссария, управлять набором атрибутов, их порядком и дополнительными параметрами;

Доступен новый тип данных для атрибутов «Код», теперь вы можете удобно управлять эталонными SQL-запросами и другими фрагментами кода в логических объектах Arenadata Catalog;

При создании пользовательских атрибутов доступен ручной ввод технического наименования атрибута. Реализация дополнительных интеграций с глоссарием Arenadata Catalog стала еще проще;

Доступен новый базовый атрибут «Синонимы», в нем вы можете указывать дополнительные наименования для термина, чтобы помочь своим коллегам найти нужную информацию.

Классификаторы данных

Теперь вы можете деактивировать классификаторы, если их использование не планируется на какой-то период. Деактивация также доступна для системных наборов классификаторов: «Персональные идентификаторы», «Персональные данные»;

Для классификаторов теперь доступна история версий, в ней вы можете отследить все изменения, внесенные пользователями.

И другие улучшения

Поддержка новой системы внешней аутентификации и управления доступом — Avanpost;
Версионирование Web-документации.

Глобальное обновление UI/UX

Оптимизация расположения и отображения основного меню Arenadata Catalog;

Обновленные карточки объектов каталога данных;

Поддержка регулярных выражений Cron для настройки расписания загрузок метаданных и выполнения тестов качества данных;

Обновление интерфейса раздела Качество данных.

Качество данных

Настройка расписания запуска тестов теперь ведется в рамках таблицы;

Наборы тестов теперь являются логическими объектами (Вы можете объединять тесты по неограниченным правилам, добавлять один тест в несколько наборов);

Тесты качества данных теперь имеют поле «Статус решения». Пользователи могут подтверждать любые ошибки результатов тестов, а после устранения сбоев — документировать их непосредственно в пользовательском интерфейсе.

Каталог данных

Добавлен новый коннектор SAP Hana, первая интеграция ADC в экосистему SAP;

Добавлен новый коннектор MongoDB, извлекающий коллекции в виде таблиц;

Добавлен новый коннектор Qlik Sense;

Добавлен новый коннектор Spline для извлечения метаданных и линейных данных из заданий Spark. Независимо от того, где происходит выполнение Spark, если вы настроили Spline Agent, мы можем отправлять метаданные Spark в Arenadata Catalog;

Модификация коннектора для Greenplum для построения линеджа PXF таблиц — MySQL, Postgres;

Для объектов каталога данных добавлен дополнительный атрибут «Пользовательское описание», с помощью этого разделения вы можете отслеживать какое описание указано в вашем источнике данных, а в «Пользовательском описании» вести подробную информацию в Arenadata Catalog.

Глоссарий

Добавлена возможность групповых операций с терминами. Теперь вы можете массово редактировать, публиковать и удалять термины в пользовательском интерфейсе;

Для группового удаления и публикации доработаны возможности рабочих процессов. Задачи по согласованию изменений теперь могут состоять из нескольких терминов;

Раздел «Связанные термины» в карточке термина теперь содержит дополнительную информацию о типе связи и типе связанного объекта;

Функционал импорта теперь доступен для всех сущностей глоссария. Вы можете импортировать не только термины, но и предметные области, и глоссарии. Для импорта добавленных сущностей также доступна загрузка шаблонов;

Теперь с помощью импорта терминов можно создавать связи с физическими объектами каталога данных;

Добавлена поддержка кодировки UTF-8 BOM для импорта объектов глоссария.

Каталог данных

К коннектору FineBI добавлена возможность автоматического построения происхождения данных;

Обновление коннектора Luxms BI. Поддержка новой версии BI-платформы;

Модификация коннектора для Greenplum для построения линеджа PXF таблиц — MS SQL Server.

И другие улучшения

Улучшение локализации;
Оптимизация UI;
Добавление инструкций к новому функционалу в web-документации.

Глоссарий

На странице обзора глоссария теперь доступна настройка представления, вы можете управлять перечнем и порядком столбцов в таблице отображения атрибутов терминов;

Теперь вы можете фильтровать по всем столбцам в обзоре глоссария, управлять перечнем отображаемых фильтров и использовать одновременно несколько фильтров;

Сохранение настроек представления. Мы запоминаем ваш выбор столбцов и значений фильтров. Вернувшись в глоссарий спустя время, вам не придется повторять работу;

Термины глоссария и классификаторы теперь можно искать с помощью общего поиска по системе;

Добавление типа пользовательского атрибута глоссария «Сотрудник/Группа». Теперь вы можете указывать дополнительные роли для терминов;

Разделение связей термина с физическими объектами по типу сервиса;

Возможность создания связей с физическими объектами из карточки термина.

Загрузка метаданных

Загружать метаданные теперь проще! При настройке подключения к источнику отображается инструкция по заполнению каждого поля;

При тестировании соединения проверяется список необходимых полномочий. Вы можете отследить какие метаданные могут быть извлечены с вашими настройками системы;

Автоматическая классификация персональных данных;

Улучшен SQL-парсер для более точного построения происхождения данных;

Новый коннектор Apache Impala;

Новый коннектор FineBI;

Добавление загрузки метаданных из Хранилищ. Коннектор к S3 и возможность добавление собственных коннекторов;

Добавление сущности Модель данных BI-систем с автоматическим построением связей происхождения;

Расширение возможностей информации об использовании таблиц. Теперь можно добавлять свои запросы в Arenadata Catalog, назначать запросам владельца, присваивать классификаторы и описание, отслеживать пользователей запроса и связи с другими таблицами.

И другие улучшения

Отправка уведомлений по электронной почте c возможностью использования своих шаблонов писем;

Увелечен лимит значений для списков до 20;

Атрибуты типа «Ссылки» поддерживают ссылки на кириллице;

Стабилизация API и обновление swagger.

Персонализация глоссария

В модуль глоссария была добавлена типизация терминов. Каждый тип термина имеет свой набор атрибутов, который может расширяться пользователями. Так можно наполнять термины всеми необходимыми для организации данными и использовать функционал глоссария для построения моделей данных;

Были добавлены коробочные типы терминов и возможность создания пользовательских типов терминов. С помощью конструктора типа термина можно управлять набором атрибутов, их порядком и обязательностью заполнения;

Для Администратора добавлен интерфейс, в котором доступен мониторинг задач пользователей по срокам исполнения, поиск задач без исполнителя и возможность делегирования задачи другим пользователя в случае, если ответственный за согласование пользователь недоступен.

Реестр атрибутов

Создание пользовательских атрибутов, используя различные типы данных;

В реестре атрибутов осуществляется полное управление атрибутами: указание валидации, инструкций по заполнению, выбор количества значений и указание значения по умолчанию;

Ведение реестра атрибутов позволяет переиспользовать атрибуты в разных типах терминов.

И другие улучшения

Доработка коннектора Greenplum;

Подписка на объекты глоссария;

Коннектор для Luxms BI с возможностью создания автоматического Data Lineage до столбца таблицы источника данных;

Блокировка публикации терминов при невозможности определения ответственных за согласование пользователей;

Добавление статусов срока исполнения задач.