14
Модус:ETL Управление корпоративным хранилищем данных Включено в Единый реестр российского ПО совместимо

Модус:ETL - MODUS · 4 User friendly ETL † ˆ ˆˇˇ ˆ ˘˛“‘˘ ˆ˛˝ ˇ ˆ •ˆ ˇ ˆˇ ˆ˛ ˝ ˛ ˙ ˜˚˛˝˙ˆ˚ ˇ ˘˚ ETL- ˆ ˙˛˛ ˇ˛˝ ˙,

  • Upload
    others

  • View
    3

  • Download
    0

Embed Size (px)

Citation preview

  • Модус:ETLУправление корпоративнымхранилищем данных

    Включено в Единый реестрроссийского ПОсовместимо

  • Схема работы

    2

    Реляционнаябаза данных

    MS SQL

    или

    Извлечениеи трансформация

    данных

    Управлениекачеством данных

    (DQM)

    Загрузкаданных в хранилище

    по расписанию(DWH)

    Поддержкаисторичности данных

    и др. ERP системы

    Базы данных

    Веб-сервисы

    Файлы

    MS SQLPostgreSQL

    PostgreSQL

    Modus / Tableau /Qlik / Power BI

    MS SSAS / Полиматика / Mondrian

    Дашборды

    Аналитика

  • 3

    Преимущества

    Коннекторы

    1С запрос

    Адаптер HTTP

    COM

    Варианты полученияданных

    СКД в источникеуправление параметрами запроса

    12

    3

    СКД в ETL- разработка СКД

    - передача СКД + параметры

    Интеграция с 1С на продвинутомуровне

    Библиотека настроенныхправил сбора и подготовки данных для формирования отчетов

    1С:ERP

    1C:УХ

    1С:УПП

    1С:Бухгалтерия

  • 4

    User friendly ETLдружественные пользователю интерфейси инструменты

    Преимущества

    Мастера и шаблоны ETL-процессов по очистке, обогащению, верификации данных

    Диаграммы для визуализации ETL-пакетов полученияи обработки данных

    Контроль процессов с простым и понятным интерфейсом

    ER-диаграммы для настройки и визуализации моделей данных

  • 5

    Преимущества

    из СУБД - 50 мл строк/чиз файлов - 30 млн строк/ч

    Многопоточный сбор данных с управлением очередями

    Высокая производительность

    Открытый для изменения кодс возможностью самостоятельнойдоработки продукта.

    Производительность получения данных:

  • 6

    ETL:Управление хранилищем данных

    CRM

    Call-центр

    ERP

    Web-сайт

    HR

    Финансы

    Структурированныеданные

    Подготовленныедля визуализации данные

    Сырые данные

    Метаданные

    Данные в терминахпользователя

    Данные из разныхисточников

    Стандартизацияданных

    Семантическиймаппинг

    Версионированиеданных

    Хранилище данных

  • коннектор 1С-ETLи нативными способамиполучения данных[1С-запросы и СКД]

    Внимание! Проблема обновления 1С

    Проблема возникает при обновлениях версий 1С.Коннекторы для QlikView и Tableau не гарантируют, что структура таблиц на физическомуровне в системе источнике останется той же.

    Подключениек продуктам 1С

    На высоком уровне Используются метаязыки 1С и SQL хорошо знакомые специалистам, которые обеспечивают высокую гибкость решения

    Программисты 1Си аналитики

    Требуются большиевычислительныемощности

    Используется свой метаязык.Требуется хорошее знаниепродукта

    Специалисты сознанием скриптовогоязыка QlikView [прямые SQL-запросы к БД

    противоречат лицензионнойполитике]

    [ограничения по связываниютаблиц при полученииданных]

    Специалистысо знанием языкаDAX

    Проблемы с импортоми обработкой большихданных

    Нехватка инструментовобработки и очистки данных.Требуются знания метаязыка

    На высоком уровне Отсутствует. Необходимапредобработка данных в другихпрограммных продуктах

    Поддержка ETL ПривлекаемыеспециалистыПродукт Поддержка BIG DATA

    через коннектор для 1С

    oData

    Аналитики

    Сравнение продуктов

    [прямые SQL-запросы к БД]

    через коннектор для 1С

    7

  • Модус:ETL

    Приложение.Интерфейсы ETL

  • 9

    ETL-процессы - последовательность настройки

    Сборданных

    Трансформацияданных

    - Настроить ETL-пакет: [состав выгрузки]n + [сценарий трансформации]m + [пакет]p

    - Настроить Расписание запуска и правила нотификацииНастройкаETL-пакета

    - Сформировать Наборы данных для аналитического портала

    шаблоныETL-операций

    диаграммаETL-пакета

    интерфейсыдля контроля

    Наборыданных

    - Настроить подключение к источникам данных

    - Зарегистрировать Набор источников

    - Настроить Правила сбора данных

    - Настроить Сценарии обработки данных

    - Построить целевую модель данных в хранилище

    - Настроить Трансформацию данных в целевую модель

    Доп. интерфейсыи мастера

    библиотека готовыхинтеграций

  • Интерфейс [Рабочий стол]

    10

  • Интерфейсы для контроля работы ETL-пакета

    Дата-время старта и Статуспоследних завершившихся процессов

    Прогресс-бары по очередиобработки источников

    Переход в интерфейсы по контролюи управлению очередями

    Переход в подробные Логи

    11

  • 12

    Диаграмма пакета. Интерфейс для визуализации ETL-процессов

    Запуск порасписанию

    Список рассылки

  • 13

    Управление качеством данных Интерфейс DQM \ Анализ

  • Управляйте бизнесом на основеданных!

    [email protected]+7 (495) 782-87-47modus.bi