SDP DataFlow

Cбор данных из различных источников и наполнение хранилищ данных
analitics.webp
Загрузка, трансформация и передача данных, виртуальная оркестрация задач и обработка данных в режимах реального времени и пакетной обработки между разными источниками и системами назначения
Широкий спектр форматов исходных данных: журналы, данные о географическом местоположении, социальные сети
Поддержка множества протоколов, в том числе SFTP, HDFS и KAFKA
Поддержка основных реляционных СУБД

Функции

Пользовательский интерфейс на основе веб-приложения
Единая точка для создания, управления и мониторинга
Конфигурация потоков данных
  • Гарантированная доставка данных
  • Минимальная задержка и большая пропускная способность
  • Динамическое управление приоритетами
  • Изменение потока данных во время отдельных шагов
  • Обратная совместимость
Контроль происхождения данных
Отслеживание изменений данных на всем пути от источника до приемника
Быстрая разработка и эффективное тестирование
Создание собственных и оптимизация существующих модулей для обработки данных
Безопасность
  • SSL, SSH, HTTPS-шифрование
  • Многопользовательская и внутренняя авторизация, управление политиками
Поддержка структурированных и неструктурированных форматов исходных данных для загрузки
  • Таблицы баз данных
  • CSV
Поддержка стандартных протоколов работы и доступа к данным
  • SFTP и SSH
  • KAFKA
  • HDFS
  • SQL
Поддержка кластеризации с возможностью работы на нескольких узлах для повышения производительности обработки данных
Преобразование потоков данных из CSV в PARQUET
Управление параллельными потоками данных

Преимущества

server-icon.svg
Визуальный оркестратор задач
flag-icon.svg
Запуск задач по расписанию
diagram-project-icon.svg
Реализация workflow любой сложности
chart-line-icon.svg
Low-code построение и выполнение задач ETL любой сложности
database-02-icon.svg
Поддержка широкого спектра форматов исходных данных: журналов, данных о геоположении, соцсетей

Документация

Пообщайтесь с экспертом

Оставьте запрос на консультацию — свяжемся с вами и ответим на вопросы

Новости Platform V SDP DataFlow

Продукты категории «Аналитика данных»