|
Oracle -> Kafka через dbms_logmnr
|
|||
---|---|---|---|
#18+
Всем привет. Есть идея организовать некий аналог "golden gate" используя dbms_logmnr. Пока не вижу особых подводных камней, кроме нагрузки на сервак. Идея, через dbms_logmnr парсим redo-логи, кидаем данные в Kafka используя JMS. Хотелось бы критику услышать или почему-то лучше сделать иначе/почему не взлетит? Плюсы: 1) Единый подход для всех таблиц; 2) Аля "Online" механизм; 3) Можно настроить мониторинги отставания; 4) Список таблиц для репликации будем пробрасывать через какую-либо настроечную табличку. P.S> Сейчас реализовано через sqoop, от него хотелось бы уйти. ... |
|||
:
Нравится:
Не нравится:
|
|||
08.11.2018, 08:29 |
|
Oracle -> Kafka через dbms_logmnr
|
|||
---|---|---|---|
#18+
есть тулза debezium https://debezium.io/docs/faq/ они сейчас прикручивают коннектор к кафке через Xstreams, который ту же GG лицензию требует. но у них есть обсуждение вариантов https://issues.jboss.org/browse/DBZ-137 я бы глянул последнюю ссылку https://github.com/erdemcer/kafka-connect-oracle может там что-то уже рабочее и с исходниками. ... |
|||
:
Нравится:
Не нравится:
|
|||
11.11.2018, 11:52 |
|
|
start [/forum/topic.php?fid=48&fpage=3&tid=1856602]: |
0ms |
get settings: |
11ms |
get forum list: |
13ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
43ms |
get topic data: |
10ms |
get forum data: |
2ms |
get page messages: |
40ms |
get tp. blocked users: |
1ms |
others: | 236ms |
total: | 362ms |
0 / 0 |