ReSQL.ru
     
powered by simpleCommunicator - 2.0.52     © 2025 Programmizd 02
Мобильная версия    Контакт    Правила    FAQ    Помощь
Доб. в избранное | Игнор. тему | Прикреп. тему | Пометить прочит. / непрочит. | Фильтр
Форумы / Oracle [игнор отключен] [закрыт для гостей] / ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
25 сообщений из 80, страница 3 из 4
  3  все
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38223018
Фотография DВА
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
DВА
Участник
Alexander RyndinDВАмоя женская логика и то курит в сторонке ))У вас таки есть договор с Oracle на открытие формата блока данных? :)
ну, если Оракл заинтересован, готова обсудить )))
...
Рейтинг: 0 / 0
12.04.2013, 10:23
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38223225
неугомонный оптимизатор
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
неугомонный оптимизатор
Гость
Alexander RyndinWizdomforce (Powecenter CDC Express)нет уже никакого Powecenter CDC Express (да и Wizdomforce), не путайте людей. Есть 2 продукта с CDC
1) Informatica PowerCenter Real-time Edition
2) Informatica Data Replication (аналог GG)
Оба продукта работают, и успешно читают логи Oracle.
...
Рейтинг: 0 / 0
12.04.2013, 11:54
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38223314
чем 1 и 2 отличаются?
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
чем 1 и 2 отличаются?
Гость
неугомонный оптимизаторAlexander RyndinWizdomforce (Powecenter CDC Express)нет уже никакого Powecenter CDC Express (да и Wizdomforce), не путайте людей. Есть 2 продукта с CDC
1) Informatica PowerCenter Real-time Edition
2) Informatica Data Replication (аналог GG)
Оба продукта работают, и успешно читают логи Oracle.
А вкратце чем 1 и 2 отличаются?
...
Рейтинг: 0 / 0
12.04.2013, 12:42
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38223401
неугомонный оптимизатор
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
неугомонный оптимизатор
Гость
чем 1 и 2 отличаются?,

1) полноценный ETL c опцией CDC
2) для клонирования баз, простой репликации
...
Рейтинг: 0 / 0
12.04.2013, 13:33
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38223441
Где бы взять
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Где бы взять
Гость
неугомонный оптимизаторAlexander RyndinWizdomforce (Powecenter CDC Express)нет уже никакого Powecenter CDC Express (да и Wizdomforce), не путайте людей. Есть 2 продукта с CDC
1) Informatica PowerCenter Real-time Edition
2) Informatica Data Replication (аналог GG)
Оба продукта работают, и успешно читают логи Oracle.А можно ссылку на какую-то техническую документацию (или хотя бы презентацию).
А то вот самое после вот этого довольно технического документа я не видел ничего кроме маркетингового булшита.
...
Рейтинг: 0 / 0
12.04.2013, 13:58
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38224627
неугомонный оптимизатор
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
неугомонный оптимизатор
Гость
Где бы взять,

например скачть с edelivery , доки все с дистрибутивами идут.
...
Рейтинг: 0 / 0
13.04.2013, 21:50
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38224667
Где бы взять
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Где бы взять
Гость
неугомонный оптимизаторГде бы взять,

например скачть с edelivery , доки все с дистрибутивами идут.И там будет про Informatica Real Time Edition?
...
Рейтинг: 0 / 0
13.04.2013, 23:05
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38241343
Фотография Маланин Андрей
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Маланин Андрей
Участник
Коллеги,

Здорово, что Вы открыли и очень хорошо поговорили в этом топике.

IPC движется вперед и очень хорошо этот механизм описан в файлике с названием PWX_90_CDC_Guide_for_LUW , который входит в пакет поставки Informatica 9.1.0 HF4.

Ссылка на PDF и топик

Две редакции (продукта) IPC, о которых вы писали, есть часть Informatica PowerExchange и называются там так:

1. Oracle LogMiner CDC. PowerExchange can use Oracle LogMiner to read change data from Oracle redo logs. To move the change data to
one or more targets, PowerExchange uses the PowerExchange Client for PowerCenter (PWXPC) in conjunction
with PowerCenter.

2. Real-Time PowerExchange Logger for Oracle LogMiner CDC . If you want to use the PowerExchange Logger for Linux, UNIX, and Windows, also configure the PowerExchange
Logger. The PowerExchange Logger can capture change data from Oracle redo logs and write only the successful
units of work (UOWs), in chronological order based on commit time, to PowerExchange Logger log files.
...
Рейтинг: 0 / 0
26.04.2013, 12:55
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38512280
igershan
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
igershan
Гость
Коллеги,
с вопросами по Informatica можно обратиться в российский офис или к партнёрам
http://www.informatica.com/ru/company/contact-locations/#russia
...
Рейтинг: 0 / 0
25.12.2013, 16:01
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38512480
brig_2000
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
brig_2000
Гость
igershanКоллеги,
с вопросами по Informatica можно обратиться в российский офис или к партнёрам
http://www.informatica.com/ru/company/contact-locations/#russia

По теме топика есть что сказать? Или вы подняли архивную тему для рекламы продукта? У нас тут не билборд, а форум.
...
Рейтинг: 0 / 0
25.12.2013, 19:37
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38513807
tempsqlru
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
tempsqlru
Гость
Brig_2000,

brig_2000igershanКоллеги,
с вопросами по Informatica можно обратиться в российский офис или к партнёрам
http://www.informatica.com/ru/company/contact-locations/#russia

По теме топика есть что сказать? Или вы подняли архивную тему для рекламы продукта? У нас тут не билборд, а форум.

Увидел, что вопрос пользователя Guest остался без ответа. См. ниже.
Надеюсь на понимание.

Где бы взятьнеугомонный оптимизаторГде бы взять,

например скачть с edelivery , доки все с дистрибутивами идут.И там будет про Informatica Real Time Edition?
...
Рейтинг: 0 / 0
27.12.2013, 07:16
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517639
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan Durak
Участник
GG плох тем что не умеет лить изменения в базу если приемник это не Оракл.
Как с этим у Informatica ???
...
Рейтинг: 0 / 0
04.01.2014, 14:41
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517648
Фотография ASCRUS
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
ASCRUS
Участник
Ivan DurakGG плох тем что не умеет лить изменения в базу если приемник это не Оракл.
Как с этим у Informatica ???
IDR умеет, под каждый тип поддерживаемого СУБД есть своя оптимизация заливки данных. Ну и заливка изменений данных возможна в двух режимах - в виде лога изменений (служебные поля+старые/новые значения изменившихся полей) и в виде наложения изменения на стейджинговые таблицы. Так же есть поддержка перехвата и анализа изменений DDL, вплоть до синхронизации структуры на приемнике после изменения на источнике.

Но IMHO все таки самое важное у CDC это не заливка данных в приемники, а их захват на источниках с максимальной надежностью и минимальным влиянием на производительность рабочей системы. У OGG насколько я понимаю вариантов, как можно захватывать данные предлагается больше, чем у IDR, это заказчиков гораздо больше интересует, чем кто куда может как загружать. Здесь вариант с промежуточными CSV файлами + Bulk Load в хранилище вполне прокатывает, хотя и усложняет немного разработку и сопровождение.
...
Рейтинг: 0 / 0
04.01.2014, 15:40
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517671
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Ryndin
Участник
Ivan DurakGG плох тем что не умеет лить изменения в базу если приемник это не Оракл.
Как с этим у Informatica ???GG поддерживает как приемник все основные базы.
...
Рейтинг: 0 / 0
04.01.2014, 16:37
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517675
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Ryndin
Участник
ASCRUSIvan DurakGG плох тем что не умеет лить изменения в базу если приемник это не Оракл.
Как с этим у Informatica ???
IDR умеет, под каждый тип поддерживаемого СУБД есть своя оптимизация заливки данных. Ну и заливка изменений данных возможна в двух режимах - в виде лога изменений (служебные поля+старые/новые значения изменившихся полей) и в виде наложения изменения на стейджинговые таблицы.;) Мы же прекрасно видели, что это работает на очень небольших объемах.
CDC в реальном времени - это OLTP-нагрузка. Обычно специализированные хранилищные MPP системы не способны переварить OLTP-нагрузку.
...
Рейтинг: 0 / 0
04.01.2014, 16:43
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517679
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan Durak
Участник
Alexander RyndinASCRUSпропущено...

IDR умеет, под каждый тип поддерживаемого СУБД есть своя оптимизация заливки данных. Ну и заливка изменений данных возможна в двух режимах - в виде лога изменений (служебные поля+старые/новые значения изменившихся полей) и в виде наложения изменения на стейджинговые таблицы.;) Мы же прекрасно видели, что это работает на очень небольших объемах.
CDC в реальном времени - это OLTP-нагрузка. Обычно специализированные хранилищные MPP системы не способны переварить OLTP-нагрузку.
кое-где есть batch mode - операции склеиваются и применяются пачками. Ускорение в разы.
...
Рейтинг: 0 / 0
04.01.2014, 16:48
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517680
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan Durak
Участник
Alexander RyndinIvan DurakGG плох тем что не умеет лить изменения в базу если приемник это не Оракл.
Как с этим у Informatica ???GG поддерживает как приемник все основные базы.
основные ок. А Greenplum?
...
Рейтинг: 0 / 0
04.01.2014, 16:48
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517711
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Ryndin
Участник
Ivan DurakAlexander Ryndinпропущено...
;) Мы же прекрасно видели, что это работает на очень небольших объемах.
CDC в реальном времени - это OLTP-нагрузка. Обычно специализированные хранилищные MPP системы не способны переварить OLTP-нагрузку.
кое-где есть batch mode - операции склеиваются и применяются пачками. Ускорение в разы.В GoldenGate всегда склеивается в батчи. Но производительность все равно крайне плачевная.
...
Рейтинг: 0 / 0
04.01.2014, 18:32
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517712
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Ryndin
Участник
Ivan DurakAlexander Ryndinпропущено...
GG поддерживает как приемник все основные базы.
основные ок. А Greenplum?Oracle поддерживает PostgreSQL. Пробовали делать и для GP, но скорость ужасна.
Да и GP - это пока экзотика.
...
Рейтинг: 0 / 0
04.01.2014, 18:33
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517776
Фотография Маланин Андрей
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Маланин Андрей
Участник
По-моему для целей CDC с Oracle-системы лучше всего использовать MATERIALIZED VIEW LOGS (с), который создает и полностью поддерживает невидимый триггер на таблицу (c от Oracle). Стабильно как трактор.
...
Рейтинг: 0 / 0
04.01.2014, 22:11
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517810
капитан корабления переделок
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
капитан корабления переделок
Гость
Маланин АндрейСтабильно как трактор.и тяжел как трактор.
...
Рейтинг: 0 / 0
04.01.2014, 23:26
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517830
Ivan Durak
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Ivan Durak
Участник
капитан корабления переделокМаланин АндрейСтабильно как трактор.и тяжел как трактор.
факт. Пробовали - не взлетает.
...
Рейтинг: 0 / 0
05.01.2014, 00:21
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517861
Интересно
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Интересно
Участник
Alexander RyndinIvan Durakпропущено...

кое-где есть batch mode - операции склеиваются и применяются пачками. Ускорение в разы.В GoldenGate всегда склеивается в батчи. Но производительность все равно крайне плачевная.

То есть нижеследующие ссылки пустые рекламные слоганы? или у вас объемы данных больше чем у Мегафона? или не так готовите? или только для каких-то конкретных случаев, а не огульно?
http://www.oracle.com/us/corporate/customers/customersearch/megafon-1-goldengate-ss-1692965.html
http://www.oracle.com/us/corporate/customers/customersearch/megafon-goldengate-ss-1737988-ru.html
...
Рейтинг: 0 / 0
05.01.2014, 02:39
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517864
Alexander Ryndin
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Alexander Ryndin
Участник
интересноAlexander Ryndinпропущено...
В GoldenGate всегда склеивается в батчи. Но производительность все равно крайне плачевная.

То есть нижеследующие ссылки пустые рекламные слоганы? или у вас объемы данных больше чем у Мегафона? или не так готовите? или только для каких-то конкретных случаев, а не огульно?
http://www.oracle.com/us/corporate/customers/customersearch/megafon-1-goldengate-ss-1692965.html
http://www.oracle.com/us/corporate/customers/customersearch/megafon-goldengate-ss-1737988-ru.html Там речь шла в контексте записи в Greenplum. К сожалению, фраза получилась вырванной из контекста
...
Рейтинг: 0 / 0
05.01.2014, 02:52
| Ответить | Цитировать | Написать  
ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
    #38517874
Интересно
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Интересно
Участник
Alexander Ryndinинтереснопропущено...


То есть нижеследующие ссылки пустые рекламные слоганы? или у вас объемы данных больше чем у Мегафона? или не так готовите? или только для каких-то конкретных случаев, а не огульно?
http://www.oracle.com/us/corporate/customers/customersearch/megafon-1-goldengate-ss-1692965.html
http://www.oracle.com/us/corporate/customers/customersearch/megafon-goldengate-ss-1737988-ru.html Там речь шла в контексте записи в Greenplum. К сожалению, фраза получилась вырванной из контекста

ок. понятно. Вообще GG идеальное средство для риал-тайм репликации Oracle DB to Oracle DB (может быть еще MySQL???), так как при извлечении измененных данных задействуются очень низкоуровневые механизмы OracleDB, рядом с которыми матвью логи, о которых в топике упомянали, и рядом не стояли.

Репликация из/в базы отличные от Oracle сделана в GG на среднем уровне, сравнимом с другими средствами CDC, в том числе от Informatica и IBM. Оно и понятно: также как Oracle с GG не подпускает конкурентов к низкоуровневым возможностям Oracle DB, так и конкуренты не подпустят Oracle GG к низкоуровневым возможностям IBM DB2, Ms SQL Server, Terradata и т.д. И если раньше Teradata плотно работала с фирмой, выпускавшей предшественника ODI, то после покупке того Oracle, Teradata будет выгодно поддерживать связи с Informatica и ее CDC.

Я так думаю, хотя могу и ошибаться.
...
Рейтинг: 0 / 0
05.01.2014, 03:30
| Ответить | Цитировать | Написать  
25 сообщений из 80, страница 3 из 4
  3  все
Форумы / Oracle [игнор отключен] [закрыт для гостей] / ETL Informatica, ODI и другие используют Oracle GoldenGate для CDC или напрямую redo?
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали тему (0):
Читали форум (0):
Пользователи онлайн (0):
Польз. соглашение
NoSQL.ru       Новости, Чат       Фотоальбом: Участники, Встречи
Закрыть
start [/forum/topic.php?fid=52&msg=38517810&tid=1881276]:
 0ms
get settings:
 10ms
get forum list:
 12ms
check forum access:
 4ms
check topic access:
 4ms
track hit:
 163ms
get topic data:
 13ms
get forum data:
 3ms
get page messages:
 66ms
get tp. blocked users:
 2ms
others: 15ms
total:  292ms
созд. / загр.: 292ms
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]