Гость
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / Тормоза при процессинге куба. / 10 сообщений из 10, страница 1 из 1
25.12.2002, 18:29
    #32084382
Предводитель команчей
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
Доброе время суток, коллеги.
Столкнулся со следующей проблемой : ОЧЕНЬ медленно стал идти процессинг куба. Обычно на пересчет уходило 2-2,5 часа, теперь - после 10 часов работы не обработана и половина. Дисковая система функционирует нормально, без ошибок, перфоманс на уровне. Другие кубы обрабатываются тоже быстро. Проблемный куб строится на таблице фактов в которой более 24 млн. записей. CHECKDB для таблицы говорит что все ОК.
Подскажите в каком направлении копать ?

ЗЫ Прошу простить за сумбурное изложение.
...
Рейтинг: 0 / 0
27.12.2002, 10:04
    #32085074
Букзз
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
А OLAP сервер пробовали перезагрузить?
...
Рейтинг: 0 / 0
27.12.2002, 10:11
    #32085078
Ирина
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
Предводитель команчей, а процессинг вообще заканчивается или нет? Дело в том, что 24млн не очень много. Сколько у Вас партитионс? Может случайно какой-то joint между таблицами потерялся? Это может запросто привести к плохому поведению. Можно в event log посмотреть, может какие ошибки лезут. Ну и перегрузить сервер, еще никому не помешало:)

Ирина

----------------------------------------------------
This posting is provided "AS IS" with no warranties, and confers no rights
...
Рейтинг: 0 / 0
27.12.2002, 11:29
    #32085152
Glory
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
2Ирина

А как вообще можно оценить время процессинга ?
У меня вот
- таблица фактов 27 млн. записей (на другом SQL сервере)
- 3 меры
- 12 измерений (от 3 до 230000 записей)

Так там только Design Storage бежит уже третьи сутки(!!!!!). Мне уже самому интересно рассчитает он что-нибудь или нет.
В Event Log-e все тихо.Сервер предварительно перезагружался.

У меня PIII-1GHz, 512RAM, Win2000 Serv SP3, MS AS2000 SP2
...
Рейтинг: 0 / 0
27.12.2002, 13:13
    #32085217
Предводитель команчей
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
Привет всем.

2 Glory - оказывается не только у меня с этим проблемы, сразу веселее стало :-)))

2 All -
Сервер я понятное дело перегружал.
Его конфигурация 2 Х PIII-1.2 GHz, 1 Gb RAM, RAID 5, контроллер AMI A159; Win2K Server SP2, MS AS2K SP2.
Последние пару дней были потрачены на тестирование железа, по результатам которого я склонен думать, что это самое железо отрабатывает заплаченные за него деньги исправно.

Теперь по кубу. Таблица фактов 24,4 млн записей, 3 меры, 7 измерений(до 250 000 элементов).

Насчет joint'ов - надо проверить, может действительно там проблема. И еще - а если поковырять настройки OLAP сервера ? Буфер изменить, значения затрагивающие память, еще что-то ?
...
Рейтинг: 0 / 0
02.01.2003, 11:36
    #32085981
Ирина
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
Очень сложно сказать какое должно быть время процессинга, зависит от многих параметров - кол-во процессоров, сеть, сложность и кол-во joints, Distinct Count или нет, да все не перечислишь. Приблизительно скорость процессинга 20К-100К в час(в нашей лабе), конечно и 20 и 100 экстримы и такое редко бывает. Поговорила со знающим человеком, который посоветовал начать с SQL query, которые наш сервер засылает и посмотреть нет ли там чего-нибудь необычного, возвращает ли SQL Server то же кол-во записей, что вы ожидали.

Ирина

----------------------------------------------------
This posting is provided "AS IS" with no warranties, and confers no rights
...
Рейтинг: 0 / 0
04.01.2003, 00:34
    #32086249
Glory
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
Приблизительно скорость процессинга 20К-100К в час

Уточните пожалуйста.

20К-100К - это 20-100 Kbytes? Kbits? K....?
...
Рейтинг: 0 / 0
04.01.2003, 01:15
    #32086252
Ирина
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
Это 20000-100000 записей(rows):)

Ирина

----------------------------------------------------
This posting is provided "AS IS" with no warranties, and confers no rights
...
Рейтинг: 0 / 0
04.01.2003, 09:16
    #32086297
Предводитель команчей
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
Всем привет.

Моя проблема с низкой производительностью построения куба благополучно разрешилась. В моем случае все оказалось просто... На моей таблице фактов не было индексов 8-(((. О такой очевидной вещи я подумал в последнюю очередь. Но ведь до какого-то момента работало и без индексов !?.
Короче, были созданы индексы на таблице фактов по полям, которые учавствуют в соединении с измерениями. Куб построился за 59 минут.

Приблизительно скорость процессинга 20К-100К в час(в нашей лабе)
Ирина , объясните, пожалуйста, а что есть какая-то абсолютная величина, которая характеризует скорость процессинга ? И что мы понимаем под скоростью процессинга в 100 К строк/час ? Счетчик строк в окошке Analysis Manager при процессинге ? Если имеется ввиду это, ИМХО ведь это все индивидуально.
...
Рейтинг: 0 / 0
04.01.2003, 10:50
    #32086334
Ирина
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Тормоза при процессинге куба.
Конечно индивидуально, и величина совсем не абсолютная, поэтому и такой большой разброс. Это всего-лишь один из показателей оптимальности,называется throughput(надеюсь, что написала правильно) и характерезует скорость обработки запросов к реляционной базе.

Ирина

----------------------------------------------------
This posting is provided "AS IS" with no warranties, and confers no rights
...
Рейтинг: 0 / 0
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / Тормоза при процессинге куба. / 10 сообщений из 10, страница 1 из 1
Целевая тема:
Создать новую тему:
Автор:
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]