powered by simpleCommunicator - 2.0.48     © 2025 Programmizd 02
Форумы / Sybase ASA, ASE, IQ [игнор отключен] [закрыт для гостей] / Хэш-сумма в Sybase IQ
4 сообщений из 4, страница 1 из 1
Хэш-сумма в Sybase IQ
    #39567905
OCP_2015
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Добрый день.

Коллеги, вопрос касательно подсчета контрольной суммы в IQ. Работает крайне медленно, мы считаем ETL инструментом.

Никто не пробовал UDF писать?

В целом, удавалось ли кому-то достичь приемлемого результата, поделитесь, пожалуйста.

Объем порядка 1-10 миллионов строк, ширина 10-50 атрибутов.
...
Рейтинг: 0 / 0
Хэш-сумма в Sybase IQ
    #39567958
White Owl
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
OCP_2015Коллеги, вопрос касательно подсчета контрольной суммы в IQ. Работает крайне медленно, мы считаем ETL инструментом.Если вы "считаете ETL инструментом", то расчет идет внутри этого ETL инструмента и IQ тут совершенно ни при чем и надо смотреть на ускорение используемого ETL инструмента.
Вот если у вас будет computed поле или простое поле будет считаться триггером, тогда расчет будет идти уже в самой СУБД.

А для приемлемости результата надо смотреть что за контрольная сумма считается (какой алгоритм используется)? И насколько она нужна вообще?
...
Рейтинг: 0 / 0
Хэш-сумма в Sybase IQ
    #39568268
OCP_2015
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
White Owl,

допустил не точность. В IQ работает крайне медленно, поэтому считаем в ETL. Даже не смотря на то, что приходится выгрузить, посчитать, загрузить обратно, работает быстрее.

Считается MD5, применимость в SCD1,2,4 загрузчиках.
...
Рейтинг: 0 / 0
Хэш-сумма в Sybase IQ
    #39568584
White Owl
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
...
Рейтинг: 0 / 0
4 сообщений из 4, страница 1 из 1
Форумы / Sybase ASA, ASE, IQ [игнор отключен] [закрыт для гостей] / Хэш-сумма в Sybase IQ
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]