Гость
Целевая тема:
Создать новую тему:
Автор:
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / Снова DistinctCount в SSAS / 12 сообщений из 12, страница 1 из 1
28.12.2018, 17:23
    #39754652
netkiller
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
Всем доброго времени суток.

Пытаюсь оптимизировать кубик, выявил что основные тормоза из за мер DistinctCount.
Начал наблюдать их в profiler и заметил что если не выбран не один фильтр, то чтение данных из секции происходит 1 раз
При выборе некоторых фильтров, заметил что секция данных начитывается порядка 100 раз во время выполнения запроса.
Теперь пытаюсь понять чем отличаются одни атрибуты от других.
Есть у кого нибудь мысли зачем начитывать одну секцию по 100 раз?

Запрос идет из Экселя, выбрана одна физическая мера DistinctCount и один атрибут который может принимать значение 0/1(Да/Нет) , секция начитывалалсь больше 100 раз , скрин из profiler прилагаю
...
Рейтинг: 0 / 0
28.12.2018, 18:12
    #39754666
a_voronin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
netkiller,

Если MOLAP
1) В партиции должно быть не более 15 млн строк
2) В партиции должен быть настроен slice -- он должен работать

если ROLAP
1) Партиционированный колумнстор совпадающий по партициям с кубом
2) тоже самое про slice
...
Рейтинг: 0 / 0
28.12.2018, 19:16
    #39754684
Alex_496
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
netkiller,

проверьте на версии 2016 и выше
...
Рейтинг: 0 / 0
29.12.2018, 09:09
    #39754793
netkiller
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
Спасибо за советы,
режим хранения MOLAP, в секции сейчас 63 млн, попробую разбить
sql - 2014, с обновлением проблемы, админы говорят надо сначала обновить винду.
...
Рейтинг: 0 / 0
29.12.2018, 10:15
    #39754817
ShIgor
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
a_voronin,

а откуда инфа про 15 млн? или это эмпирически?
нигде просто не встречал
...
Рейтинг: 0 / 0
29.12.2018, 12:59
    #39754888
ondorsal
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
ShIgor,
Вот такое сообщение можно иногда увидеть.
...
Рейтинг: 0 / 0
29.12.2018, 14:16
    #39754944
Alex_496
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
ShIgor,

Разработчики SSAS как best practicas рекомендовали, чтобы в партициях 2 ... 20 млн. записей
...
Рейтинг: 0 / 0
29.12.2018, 15:59
    #39754995
ShIgor
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
я конкретного человека спрашиваю о конкретной цифре в 15млн на партициях с DC
про остальное давно всем известно.
...
Рейтинг: 0 / 0
29.12.2018, 18:49
    #39755020
vikkiv
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
на то время (когда разрабатывались эти рекомендации и выводились "best practices")
были немного другие объективные причины для таких рекомендаций
(скорость работы с дисками и файловой системой, память, производительность CPU для
обработки такого объёма данных, ну и само ядро SSAS с внутренними оптимизациями)

сейчас (на современном оборудовании {HW} и OS/SSAS версиях {SW}) эти параметры немного другие,
соответственно и требования/рекомендации отличаются, вполне даже близко к "на порядок".

это к тому что рекомендациям стоит следовать в контексте к которому они даны.
...
Рейтинг: 0 / 0
16.01.2019, 15:29
    #39760329
a_voronin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
ShIgorя конкретного человека спрашиваю о конкретной цифре в 15млн на партициях с DC
про остальное давно всем известно.

https://techcommunity.microsoft.com/t5/DataCAT/Analysis-Services-Partition-Size/ba-p/305008

И, как вам уже сказали, это империчеки.
...
Рейтинг: 0 / 0
16.01.2019, 16:08
    #39760369
ShIgor
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
a_voronin,

15млн там нет.
...
Рейтинг: 0 / 0
16.01.2019, 17:42
    #39760454
a_voronin
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
Снова DistinctCount в SSAS
ShIgora_voronin,

15млн там нет.

15.033.768 точная цифра. Получено с помощью зюйд анализа на гиперкубе Голсона-Нонеберга.
...
Рейтинг: 0 / 0
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / Снова DistinctCount в SSAS / 12 сообщений из 12, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]