powered by simpleCommunicator - 2.0.49     © 2025 Programmizd 02
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Oracle -> Kafka через dbms_logmnr
2 сообщений из 2, страница 1 из 1
Oracle -> Kafka через dbms_logmnr
    #39729737
Pavel_PV
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Гость
Всем привет.

Есть идея организовать некий аналог "golden gate" используя dbms_logmnr. Пока не вижу особых подводных камней, кроме нагрузки на сервак. Идея, через dbms_logmnr парсим redo-логи, кидаем данные в Kafka используя JMS.
Хотелось бы критику услышать или почему-то лучше сделать иначе/почему не взлетит?
Плюсы:
1) Единый подход для всех таблиц;
2) Аля "Online" механизм;
3) Можно настроить мониторинги отставания;
4) Список таблиц для репликации будем пробрасывать через какую-либо настроечную табличку.

P.S> Сейчас реализовано через sqoop, от него хотелось бы уйти.
...
Рейтинг: 0 / 0
Oracle -> Kafka через dbms_logmnr
    #39731299
H5N1
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
есть тулза debezium https://debezium.io/docs/faq/
они сейчас прикручивают коннектор к кафке через Xstreams, который ту же GG лицензию требует. но у них есть обсуждение вариантов
https://issues.jboss.org/browse/DBZ-137

я бы глянул последнюю ссылку https://github.com/erdemcer/kafka-connect-oracle
может там что-то уже рабочее и с исходниками.
...
Рейтинг: 0 / 0
2 сообщений из 2, страница 1 из 1
Форумы / NoSQL, Big Data [игнор отключен] [закрыт для гостей] / Oracle -> Kafka через dbms_logmnr
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]