Новые сообщения [новые:0]
Дайджест
Горячие темы
Избранное [новые:0]
Форумы
Пользователи
Статистика
Статистика нагрузки
Мод. лог
Поиск
|
08.11.2018, 08:29
|
|||
---|---|---|---|
|
|||
Oracle -> Kafka через dbms_logmnr |
|||
#18+
Всем привет. Есть идея организовать некий аналог "golden gate" используя dbms_logmnr. Пока не вижу особых подводных камней, кроме нагрузки на сервак. Идея, через dbms_logmnr парсим redo-логи, кидаем данные в Kafka используя JMS. Хотелось бы критику услышать или почему-то лучше сделать иначе/почему не взлетит? Плюсы: 1) Единый подход для всех таблиц; 2) Аля "Online" механизм; 3) Можно настроить мониторинги отставания; 4) Список таблиц для репликации будем пробрасывать через какую-либо настроечную табличку. P.S> Сейчас реализовано через sqoop, от него хотелось бы уйти. ... |
|||
:
Нравится:
Не нравится:
|
|||
|
11.11.2018, 11:52
|
|||
---|---|---|---|
Oracle -> Kafka через dbms_logmnr |
|||
#18+
есть тулза debezium https://debezium.io/docs/faq/ они сейчас прикручивают коннектор к кафке через Xstreams, который ту же GG лицензию требует. но у них есть обсуждение вариантов https://issues.jboss.org/browse/DBZ-137 я бы глянул последнюю ссылку https://github.com/erdemcer/kafka-connect-oracle может там что-то уже рабочее и с исходниками. ... |
|||
:
Нравится:
Не нравится:
|
|||
|
|
start [/forum/topic.php?fid=48&mobile=1&tid=1856602]: |
0ms |
get settings: |
10ms |
get forum list: |
14ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
33ms |
get topic data: |
14ms |
get forum data: |
3ms |
get page messages: |
45ms |
get tp. blocked users: |
1ms |
others: | 244ms |
total: | 372ms |
0 / 0 |