|
|
|
Потеря данных при выборке информации
|
|||
|---|---|---|---|
|
#18+
Всем добрый день! Обрисую ситуацию есть 2 мат вью (ежедневная и архивная ), процесс ETL выгружает информацию в txt файл для последующей загрузки на DWH. Выборка из этих мат вью простая , типа: select * from table1 union all select * from Arc_table1 До заливка информации на DWH происходит по стампу (тобиш считывается максимальный стамп на DWH, и все что выше его забирается с источника). И вот в определенные моменты происходит следующее должно выгрузиться таблица со значениями 1 2 3 4 5 6 А выгружается : 1 3 4 6 Изоляция БД стандартная "Read Committed" , предполагаю что пропущенные строки или вставлялись как раз в этот момент но не успели закомититься, а последующие за ними успели, или возможно происходил апдейт этих строк в этот самый момент считывания. Короче ни причины почему так происходит я не знаю ни соответственно как ее решить тоже. Буду рад любым идеям :) Спасибо! ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 06.03.2018, 16:57 |
|
||
|
Потеря данных при выборке информации
|
|||
|---|---|---|---|
|
#18+
Читай данные с перекрытием назад заведомо больше самой долгой транзакции. И мердж дубликатов. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 06.03.2018, 17:06 |
|
||
|
Потеря данных при выборке информации
|
|||
|---|---|---|---|
|
#18+
-2-, Не прокатит по причине данные выгружаются 1 раз в сутки ночью, тобиш дыры заполнятся только через сутки, а ме надо чтоб сегодня вчерашние данные были без пробелов. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 06.03.2018, 17:11 |
|
||
|
Потеря данных при выборке информации
|
|||
|---|---|---|---|
|
#18+
kolyady, если выгружать не с матвью, а селектом из таблиц, таж проблема? ..... stax ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 06.03.2018, 18:02 |
|
||
|
Потеря данных при выборке информации
|
|||
|---|---|---|---|
|
#18+
Stax, есть доступ только на мат вью, к таблам доступа нету ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 06.03.2018, 18:36 |
|
||
|
Потеря данных при выборке информации
|
|||
|---|---|---|---|
|
#18+
О гуру Оракла скажите же хоть что нибудь, буду рад любым предположениям почему так может происходить :( ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 07.03.2018, 11:24 |
|
||
|
Потеря данных при выборке информации
|
|||
|---|---|---|---|
|
#18+
kolyady-2-, Не прокатит по причине данные выгружаются 1 раз в сутки ночью, тобиш дыры заполнятся только через сутки, а ме надо чтоб сегодня вчерашние данные были без пробелов.Сдвинь момент забора данных на интервал перекрытия. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 07.03.2018, 12:11 |
|
||
|
Потеря данных при выборке информации
|
|||
|---|---|---|---|
|
#18+
kolyadyStax, есть доступ только на мат вью, к таблам доступа нету шо тут посоветовать, пусть разбираются те кто отобрал доступ показать пропущенные записи, пуст разбираются/ищут что с ними не так (мож там признак не включать во вью) можно подгружать несколько раз (напр еще и утром), но где уверененность что и за н-й раз записи попадут надо найти причину почему не попадают, темболее выгрузка ночью ..... stax ... |
|||
|
:
Нравится:
Не нравится:
|
|||
| 07.03.2018, 16:31 |
|
||
|
|

start [/forum/topic.php?fid=52&msg=39611943&tid=1884326]: |
0ms |
get settings: |
9ms |
get forum list: |
14ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
48ms |
get topic data: |
8ms |
get forum data: |
2ms |
get page messages: |
32ms |
get tp. blocked users: |
1ms |
| others: | 245ms |
| total: | 365ms |

| 0 / 0 |
