Начало работы Modus ETL

Программный продукт: «Модус: Управление корпоративным хранилищем данных (ETL)» (сокращенное название — Modus ETL), разработан на платформе с использованием «:Библиотека стандартных подсистем 8» (далее — БСП) и является -конфигурацией, позволяющей выгружать данные из разных источников (учетных систем, баз данных, web-сервисов, файлов), обрабатывать полученные данные по предварительно настроенным правилам (сценариям) и сохранять результаты в базу данных хранилища.

Конфигурация- программного продукта предназначена для автоматизации ETL-процессов (от англ. «Extract, Transform, Load» — «извлечение, преобразование, загрузка») извлечения данных из различных источников, подготовки и загрузки данных в хранилище.

Программный продукт может являться частью программного комплекса, включающей помимо Modus ETL, хранилище данных (DWH) и программный продукт для визуализации данных Modus: Аналитический портал:

Случаи использования:

  • получение больших массивов данных из разнообразных источников;
  • объединение/консолидация данных из разных источников;
  • обработка данных — очистки, дополнения, стандартизации, агрегации, расчета показателей и т.д. — по разнообразным правилам;
  • обновление данных по расписанию.

Как это работает:

  1. Настройте доступ к источникам данных.
  2. Настройте правила получения данных из каждого типа источников.
  3. Проверьте доступность источников.
  4. Получите данные, пользуясь интерфейсом «Выгрузка в отчет» (ручной режим).
  5. Проверьте, что данные получены без ошибок.
  6. Проанализируйте полученные данные и определите необходимость и алгоритмы обработки данных для конкретной задачи.
  7. Настройте правила (сценарии) обработки данных.
  8. Настройте ETL-пакет, включающий стадии получения и обработки данных.
  9. Настройте расписание ETL-пакета.
  10. Контролируйте получение данных по расписанию.

 

Варианты использования Modus ETL

Технические требования ETL

Навигация в ETL