Новые сообщения [новые:0]
Дайджест
Горячие темы
Избранное [новые:0]
Форумы
Пользователи
Статистика
Статистика нагрузки
Мод. лог
Поиск
|
|
11.12.2017, 18:22
|
|||
|---|---|---|---|
Хэш-сумма в Sybase IQ |
|||
|
#18+
Добрый день. Коллеги, вопрос касательно подсчета контрольной суммы в IQ. Работает крайне медленно, мы считаем ETL инструментом. Никто не пробовал UDF писать? В целом, удавалось ли кому-то достичь приемлемого результата, поделитесь, пожалуйста. Объем порядка 1-10 миллионов строк, ширина 10-50 атрибутов. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
11.12.2017, 20:07
|
|||
|---|---|---|---|
Хэш-сумма в Sybase IQ |
|||
|
#18+
OCP_2015Коллеги, вопрос касательно подсчета контрольной суммы в IQ. Работает крайне медленно, мы считаем ETL инструментом.Если вы "считаете ETL инструментом", то расчет идет внутри этого ETL инструмента и IQ тут совершенно ни при чем и надо смотреть на ускорение используемого ETL инструмента. Вот если у вас будет computed поле или простое поле будет считаться триггером, тогда расчет будет идти уже в самой СУБД. А для приемлемости результата надо смотреть что за контрольная сумма считается (какой алгоритм используется)? И насколько она нужна вообще? ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
12.12.2017, 12:56
|
|||
|---|---|---|---|
Хэш-сумма в Sybase IQ |
|||
|
#18+
White Owl, допустил не точность. В IQ работает крайне медленно, поэтому считаем в ETL. Даже не смотря на то, что приходится выгрузить, посчитать, загрузить обратно, работает быстрее. Считается MD5, применимость в SCD1,2,4 загрузчиках. ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
12.12.2017, 18:41
|
|||
|---|---|---|---|
Хэш-сумма в Sybase IQ |
|||
|
#18+
Ну тогда навскидку читать эти две ссылки: http://infocenter.sybase.com/help/index.jsp?topic=/com.sybase.infocenter.dc01034.1600/doc/html/san1297809523264.html https://www.mkyong.com/java/java-md5-hashing-example/ ... |
|||
|
:
Нравится:
Не нравится:
|
|||
|
|
|
start [/forum/topic.php?fid=55&mobile=1&tid=2009631]: |
0ms |
get settings: |
10ms |
get forum list: |
13ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
39ms |
get topic data: |
14ms |
get forum data: |
3ms |
get page messages: |
46ms |
get tp. blocked users: |
2ms |
| others: | 240ms |
| total: | 375ms |
| 0 / 0 |
