powered by simpleCommunicator - 2.0.51     © 2025 Programmizd 02
Форумы / Разработка информационных систем [игнор отключен] [закрыт для гостей] / Несколько ETL серверов в одном контуре. Это нормально?
5 сообщений из 5, страница 1 из 1
Несколько ETL серверов в одном контуре. Это нормально?
    #39967224
Фотография Nika gnome
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Добрый день.
Вот в контуре есть несколько ETL серверов. Один у DWH, что логично. Но помимо него разработчики ещё нескольких систем посчитали нужным организовать у себя ночные обмены данными. Например, 1C MDM (мастер дата) ночами загребает новые сущности, появившиеся в разных системах и так далее. Таких в сумме 4 штуки.

Как реально организовывается работа в компаниях в таких случаях? В случае дневного обмена ясно, что используется какой-нибудь MQ , общий для всех. А вот в случае ETL процессов как правильно?
...
Рейтинг: 0 / 0
Несколько ETL серверов в одном контуре. Это нормально?
    #39967236
mad_nazgul
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Nika gnome,

Э-э-э Data Lake ?

А так мне кажется у вас такая "кривая" интеграция. :-)
...
Рейтинг: 0 / 0
Несколько ETL серверов в одном контуре. Это нормально?
    #39968302
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Просто через DWH обмен сделать. Обосновать снижением нагрузки на продуктивные системы-источники.
...
Рейтинг: 0 / 0
Несколько ETL серверов в одном контуре. Это нормально?
    #40006314
Фотография Nika gnome
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
это точно не "data lake".
...
Рейтинг: 0 / 0
Несколько ETL серверов в одном контуре. Это нормально?
    #40006711
Фотография Критик
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Nika gnome,

Если хотите все подмять под себя, то попробуйте объявить ваш stage ODS-слоем, утвердите у архитекторов и вперёд )
...
Рейтинг: 0 / 0
5 сообщений из 5, страница 1 из 1
Форумы / Разработка информационных систем [игнор отключен] [закрыт для гостей] / Несколько ETL серверов в одном контуре. Это нормально?
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]