powered by simpleCommunicator - 2.0.52     © 2025 Programmizd 02
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / Тормоза при процессинге куба.
10 сообщений из 10, страница 1 из 1
Тормоза при процессинге куба.
    #32084382
Предводитель команчей
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Доброе время суток, коллеги.
Столкнулся со следующей проблемой : ОЧЕНЬ медленно стал идти процессинг куба. Обычно на пересчет уходило 2-2,5 часа, теперь - после 10 часов работы не обработана и половина. Дисковая система функционирует нормально, без ошибок, перфоманс на уровне. Другие кубы обрабатываются тоже быстро. Проблемный куб строится на таблице фактов в которой более 24 млн. записей. CHECKDB для таблицы говорит что все ОК.
Подскажите в каком направлении копать ?

ЗЫ Прошу простить за сумбурное изложение.
...
Рейтинг: 0 / 0
Тормоза при процессинге куба.
    #32085074
Букзз
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
А OLAP сервер пробовали перезагрузить?
...
Рейтинг: 0 / 0
Тормоза при процессинге куба.
    #32085078
Ирина
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Предводитель команчей, а процессинг вообще заканчивается или нет? Дело в том, что 24млн не очень много. Сколько у Вас партитионс? Может случайно какой-то joint между таблицами потерялся? Это может запросто привести к плохому поведению. Можно в event log посмотреть, может какие ошибки лезут. Ну и перегрузить сервер, еще никому не помешало:)

Ирина

----------------------------------------------------
This posting is provided "AS IS" with no warranties, and confers no rights
...
Рейтинг: 0 / 0
Тормоза при процессинге куба.
    #32085152
Glory
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
2Ирина

А как вообще можно оценить время процессинга ?
У меня вот
- таблица фактов 27 млн. записей (на другом SQL сервере)
- 3 меры
- 12 измерений (от 3 до 230000 записей)

Так там только Design Storage бежит уже третьи сутки(!!!!!). Мне уже самому интересно рассчитает он что-нибудь или нет.
В Event Log-e все тихо.Сервер предварительно перезагружался.

У меня PIII-1GHz, 512RAM, Win2000 Serv SP3, MS AS2000 SP2
...
Рейтинг: 0 / 0
Тормоза при процессинге куба.
    #32085217
Предводитель команчей
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Привет всем.

2 Glory - оказывается не только у меня с этим проблемы, сразу веселее стало :-)))

2 All -
Сервер я понятное дело перегружал.
Его конфигурация 2 Х PIII-1.2 GHz, 1 Gb RAM, RAID 5, контроллер AMI A159; Win2K Server SP2, MS AS2K SP2.
Последние пару дней были потрачены на тестирование железа, по результатам которого я склонен думать, что это самое железо отрабатывает заплаченные за него деньги исправно.

Теперь по кубу. Таблица фактов 24,4 млн записей, 3 меры, 7 измерений(до 250 000 элементов).

Насчет joint'ов - надо проверить, может действительно там проблема. И еще - а если поковырять настройки OLAP сервера ? Буфер изменить, значения затрагивающие память, еще что-то ?
...
Рейтинг: 0 / 0
Тормоза при процессинге куба.
    #32085981
Ирина
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Очень сложно сказать какое должно быть время процессинга, зависит от многих параметров - кол-во процессоров, сеть, сложность и кол-во joints, Distinct Count или нет, да все не перечислишь. Приблизительно скорость процессинга 20К-100К в час(в нашей лабе), конечно и 20 и 100 экстримы и такое редко бывает. Поговорила со знающим человеком, который посоветовал начать с SQL query, которые наш сервер засылает и посмотреть нет ли там чего-нибудь необычного, возвращает ли SQL Server то же кол-во записей, что вы ожидали.

Ирина

----------------------------------------------------
This posting is provided "AS IS" with no warranties, and confers no rights
...
Рейтинг: 0 / 0
Тормоза при процессинге куба.
    #32086249
Glory
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Приблизительно скорость процессинга 20К-100К в час

Уточните пожалуйста.

20К-100К - это 20-100 Kbytes? Kbits? K....?
...
Рейтинг: 0 / 0
Тормоза при процессинге куба.
    #32086252
Ирина
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Это 20000-100000 записей(rows):)

Ирина

----------------------------------------------------
This posting is provided "AS IS" with no warranties, and confers no rights
...
Рейтинг: 0 / 0
Тормоза при процессинге куба.
    #32086297
Предводитель команчей
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Всем привет.

Моя проблема с низкой производительностью построения куба благополучно разрешилась. В моем случае все оказалось просто... На моей таблице фактов не было индексов 8-(((. О такой очевидной вещи я подумал в последнюю очередь. Но ведь до какого-то момента работало и без индексов !?.
Короче, были созданы индексы на таблице фактов по полям, которые учавствуют в соединении с измерениями. Куб построился за 59 минут.

Приблизительно скорость процессинга 20К-100К в час(в нашей лабе)
Ирина , объясните, пожалуйста, а что есть какая-то абсолютная величина, которая характеризует скорость процессинга ? И что мы понимаем под скоростью процессинга в 100 К строк/час ? Счетчик строк в окошке Analysis Manager при процессинге ? Если имеется ввиду это, ИМХО ведь это все индивидуально.
...
Рейтинг: 0 / 0
Тормоза при процессинге куба.
    #32086334
Ирина
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Участник
Конечно индивидуально, и величина совсем не абсолютная, поэтому и такой большой разброс. Это всего-лишь один из показателей оптимальности,называется throughput(надеюсь, что написала правильно) и характерезует скорость обработки запросов к реляционной базе.

Ирина

----------------------------------------------------
This posting is provided "AS IS" with no warranties, and confers no rights
...
Рейтинг: 0 / 0
10 сообщений из 10, страница 1 из 1
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / Тормоза при процессинге куба.
Целевая тема:
Создать новую тему:
Автор:
Закрыть
Цитировать
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]