|
Хэш-сумма в Sybase IQ
|
|||
---|---|---|---|
#18+
Добрый день. Коллеги, вопрос касательно подсчета контрольной суммы в IQ. Работает крайне медленно, мы считаем ETL инструментом. Никто не пробовал UDF писать? В целом, удавалось ли кому-то достичь приемлемого результата, поделитесь, пожалуйста. Объем порядка 1-10 миллионов строк, ширина 10-50 атрибутов. ... |
|||
:
Нравится:
Не нравится:
|
|||
11.12.2017, 18:22 |
|
Хэш-сумма в Sybase IQ
|
|||
---|---|---|---|
#18+
OCP_2015Коллеги, вопрос касательно подсчета контрольной суммы в IQ. Работает крайне медленно, мы считаем ETL инструментом.Если вы "считаете ETL инструментом", то расчет идет внутри этого ETL инструмента и IQ тут совершенно ни при чем и надо смотреть на ускорение используемого ETL инструмента. Вот если у вас будет computed поле или простое поле будет считаться триггером, тогда расчет будет идти уже в самой СУБД. А для приемлемости результата надо смотреть что за контрольная сумма считается (какой алгоритм используется)? И насколько она нужна вообще? ... |
|||
:
Нравится:
Не нравится:
|
|||
11.12.2017, 20:07 |
|
Хэш-сумма в Sybase IQ
|
|||
---|---|---|---|
#18+
White Owl, допустил не точность. В IQ работает крайне медленно, поэтому считаем в ETL. Даже не смотря на то, что приходится выгрузить, посчитать, загрузить обратно, работает быстрее. Считается MD5, применимость в SCD1,2,4 загрузчиках. ... |
|||
:
Нравится:
Не нравится:
|
|||
12.12.2017, 12:56 |
|
Хэш-сумма в Sybase IQ
|
|||
---|---|---|---|
#18+
Ну тогда навскидку читать эти две ссылки: http://infocenter.sybase.com/help/index.jsp?topic=/com.sybase.infocenter.dc01034.1600/doc/html/san1297809523264.html https://www.mkyong.com/java/java-md5-hashing-example/ ... |
|||
:
Нравится:
Не нравится:
|
|||
12.12.2017, 18:41 |
|
|
start [/forum/topic.php?fid=55&fpage=3&tid=2009631]: |
0ms |
get settings: |
10ms |
get forum list: |
12ms |
check forum access: |
3ms |
check topic access: |
3ms |
track hit: |
44ms |
get topic data: |
10ms |
get forum data: |
3ms |
get page messages: |
39ms |
get tp. blocked users: |
1ms |
others: | 12ms |
total: | 137ms |
0 / 0 |