06 декабря / 19

Новый релиз «Модус:Управление корпоративным хранилищем данных (ETL) 1.4.6.»

1. Управление НСИ
Разработан новый модуль - НСИ, реализующий функционал для управления справочниками и маппингами, используемыми для стандартизации и категоризации данных. Разработаны структуры для централизованного хранения и интеfрфейсы для ввода, просмотра, редактирования и сопряжения трёх видов сущностей:
  • первичных справочников (содержат значения, полученные из источников данных);
  • эталонных справочников (значения для стандартизации и категоризации данных);
  • маппингов, связывающих значения первичных справочников с эталонными.
Эталонные  справочники и маппинги используются в сценариях подготовки данных для стандартизации и категоризации данных.

2. Работа под ОС Linux
Для ОС Линукс доработан функционал получения данных.

3. Сбор данных
Доработаны механизмы управления очередями.
Доработано заполнение служебных полей, в т.ч. при получении данных, используя АгентETL.
Переработан механизм опроса АгентаETL о работающих заданиях.
Доработано получение данных, используя СКД и  отчеты источника.

4. Интеграция с 1С:Fresh
Выполнены доработки загрузки справочной информации из Менеджера сервиса 1С:Fresh.

5. Загрузка из файлов
Доработана загрузка csv-файлов. Для шаблонов строк подключения добавлена возможность использовать в качестве параметра Каталог, из которого планируется загружать файл с данными. Устранена ошибка при загрузке csv-файла с перемещением во временный рабочий каталог.
Для ОС Linux доработана загрузка xlsx-файлов, используя «Мастер загрузки файлов Excel».

6. Новые источники данных
Добавлена возможность сбора данных из БД ClickHouse с помощью АгентаETL.
ClickHouse - столбчатая база данных, разработанная Яндексом, позволяющая работать с миллиардами записей.

7. Разграничение доступа
Уточнены правила разграничения прав для использования некоторых функций и объектов пользователями с ролями Аналитик и Наблюдатель.