Поисковый запрос
Нажмите Enter для поиска и Esc для выхода

Продукты

Трансформация Данных Юниверс (Universe SmartETL)

Связаться с нами

Самостоятельный доступ аналитиков к данным (Self-Service)

Картинка
Как правило, в организациях данные распределены по множеству корпоративных систем. Это усложняет взаимодействие систем, а проблема решается кастомными решениями. В результате бизнес-пользователи зависят от IT-департамента, где тоже могут копиться проблемы.
Юниверс SmartETL создана для автоматизации процессов сбора, обработки и консолидации данных, что позволяет решить эти проблемы. Бизнес получает все актуальные данные в едином однородном информационном пространстве, что значительно повышает производительность и эффективность решений.

Используйте данные на 100% с Юниверс SmartETL

Картинка
Интеграция с любыми источниками и потребителями данных. Легко и быстро
Принятие решений на основе достоверной информации из множества систем вашего IT-ландшафта
Придание юридической значимости данных и контроль их подлинности в процессе обработки
Существенное сокращение времени и ресурсов на подключение новых систем  к вашему IT-ландшафту
Экономия IT-ресурсов: Low Code - возможность настройки интеграций без программирования
Интеграция новых систем в кратчайшие сроки за счет переиспользования готовых компонентов и решений, многие из которых доступны из коробки

Российское ПО



Информация о продукте «Юниверс Дата SmartEL»
  • Интеграция с экосистемой платформы Юниверс Дата.

    Широкие возможности при работе с моделями данных в DG (Data Governance), нативная интеграция с MDM, обеспечение качества данных в DQ.
  • Аутентификация, авторизация и аудит сессий

    Управление пользователями и ролями во встроенном Identity Provider, поддержка SSO (Single Sign On), возможность интеграции с решением заказчика через OpenID Connect, SAML 2.0, LDAP, AD.
  • Мониторинг и Логирование

    Централизованный сбор и отображение логов компонент системы с возможностью фильтрации, состояние и загрузка компонент и модулей системы, статистика и статусы обработки данных.
  • Контроль качества данных

    Форматно-логический контроль, интеграция с модулем DQ (Data Quality) для выполнения правил проверки качества и обогащения данных.
  • Паттерны потоков обработки

    Коллекция шаблонов сценариев и потоков обработки данных уровня предприятия. Типовые блоки, шаги, состояния, логика, отработка позитивных и негативных сценариев, ошибок и  т.д. которые могут быть взяты за основу для упрощения и ускорения работ по настройке потоков данных.
  • Готовые интеграционные решения.

    Набор готовых коннекторов и процессов для российских государственных и промышленных систем.
  • Гарантированная доставка

    При возникновении внештатных ситуаций, выявлении ошибок, необходимости внести изменения в процесс возможна повторная обработка данных, как весь процесс так и отдельные шаги без необходимости обращения к системам источникам
  • Хранение операционных метаданных

    Возможность сохранения исходных данных, промежуточных состояний и дополнительной служебной информации в процессе обработки.
  • Интеллектуальные алгоритмы обработки данных.

    Упрощают подготовку и загрузку данных, позволяют в автоматическом режиме определить модель данных источника, выбрать наиболее подходящую модель исходной записи из уже настроенных в системе, выполнять конвертацию форматов
  • Управление моделями данных.

    Автоматизированное создание, хранение, версионирование, импорт моделей систем источников и потребителей данных, маппинг атрибутов различных моделей в визуальном интерфейсе
  • Гибкие ETL и ELT сценарии NiFi

    Визуальный интерфейс настройки процессов извлечения и трансформации данных

Преимущества

  •  Масштабирование
    Масштабирование


    Гибкое масштабирование через кластеризацию

    Управление пропускной способностью и количеством одновременных задач

    Контейнеризация (Docker, Kubernetes)

    Работа в облаке
  •  Надежность и безопасность
    Надежность и безопасность


    Гарантированная доставка данных

    Логирование и сбор информации в процессе обработки данных, контроль интеграции на каждом шаге

    Возможность сохранения исходных данных и промежуточных состояний

    Повторная обработка данных

    Многопользовательская авторизация, настройка ролей доступа, поддержка SSO

    Отказоустойчивость системы
  •  Универсальность
    Универсальность


    Управление всеми интеграциями IT-ландшафта из одной точки - Унифицирует процессы обработки данных и даёт единый инструмент для специалистов, использующих и сопровождающих данные

    Расширяемая модульная архитектура

    Любые виды интеграции: онлайн, оффлайн, стриминг , базы данных, файловый обмен, файловые системы. Может применяться как классический ETL и ELT, так и для потоковой обработки данных

    Пакетный режим обработки с высокой пропускной способностью

    Набор готовых адаптеров к российским гос. системам: НСУД, СМЭВ, другие Федеральные и Региональные информационные системы

Готовое решение - SmartETL

Продукт Юниверс SmartETL – инструмент извлечения и трансформации данных (ETL – Extract Transform Load), позволяет осуществлять централизованную настройку потоков данных, с возможностью преобразования моделей данных между различными информационными системами.
Продукт позволяет централизовать поток преобразований информации, когда речь идет о сложной и непрозрачной интеграции различных информационных систем. При этом, возможно добавление связей между различными информационными системами без их доработки, а соответственно, без дополнительных финансовых затрат и с полной поддержкой обратной совместимости. Главные преимущества: управление целыми бизнес сущностями, а не разрозненными таблицами и файлами, а также возможность реализации сценариев обработки со сложной бизнес логикой.
Политика
лицензирования
  • Автоматизированное создание, хранение, версионирование, импорт моделей систем источников и потребителей данных, маппинг атрибутов различных моделей в визуальном интерфейсе
  • Визуальный интерфейс настройки процессов извлечения и трансформации данных
  • Нативная интеграция с MDM
  • Широкие возможности при работе с моделями данных в DG (Data Governance)
  • Форматно-логический контроль, интеграция с модулем Юниверс DQ (Data Quality) для выполнения правил проверки качества и обогащения данных
  • Коллекция шаблонов сценариев и потоков обработки данных уровня предприятия. Типовые блоки, шаги, состояния, логика, отработка позитивных и негативных сценариев, ошибок и т.д. которые могут быть взяты за основу для упрощения и ускорения работ по настройке
  • Community Edition +
  • Коллекция шаблонов сценариев и потоков обработки данных уровня предприятия. Типовые блоки, шаги, состояния, логика, отработка позитивных и негативных сценариев, ошибок и т.д. которые могут быть взяты за основу для упрощения и ускорения работ по настройке
  • Управление пользователями и ролями во встроенном Identity Provider, поддержка SSO (Single Sign On), возможность интеграции с решением заказчика через OpenID Connect, SAML 2.0, LDAP, AD
  • Централизованный сбор и отображение логов компонент системы с возможностью фильтрации
  • Мониторинг состояния и загрузки компонент и модулей системы, статистика и статусы обработки сообщений потоков данных
  • Возможность сохранения исходных данных, промежуточных состояний и дополнительной служебной информации в процессе обработки
  • Интеллектуальные алгоритмы обработки данных, которые упрощают подготовку и загрузку данных, позволяют в автоматическом режиме определить модель данных источника, выбрать наиболее подходящую модель исходной записи из уже настроенных в системе
  • Platform Edition +

F.A.Q.
Вопросы и ответы

Да, система отлично масштабируется с использованием кластеризации, контейнеризации. Так же возможно управление пропускной способностью и количеством одновременных задач
Да, есть возможность настройки интеграций без программирования, используя визуальный интерфейс и язык логических выражений
Да, SmartETL имеет модульную архитектуру, компоненты и модули системы обладают программным интерфейсом
К функционалу NiFi добавляются дополнительные модули, управление моделями данных (хранение, версионирование, маппинги), сохранение исходных данных и операционных метаданных, гарантированная доставка, инструменты упрощающие подготовку и загрузку данных. Паттерны потоков обработки, дополнительные и доработанные процессоры NiFi, интеграция с платформой Юнидата. API для обмена сообщениями с Платформой в динамическом формате в терминах модели данных. Мониторинг, централизованный сбор логов, поддержка SSO
Решает задачи извлечения данных, трансформации, обогащение и объединение данных из различных источников, доставка качественных данных системам-потребителям
ETL, ELT решение, позволяющее автоматизировать разработку конвейеров данных между информационными системами - источниками и потребителями информации