|
Azure Support for multidimensional models: Completed - currently no plans to launch a PaaS
|
|||
---|---|---|---|
#18+
Официальное подтверждение: R.I.P. SSAS MD By: Azure AS PM Team (Admin, Microsoft Azure) commented · February 3, 2021 9:01 PM There are currently no plans to launch a PaaS service for multidimensional workloads. We are focusing investment in other areas , specifically making Power BI a superset of AAS. We recently launched pre-configured VM images with multidimensional to help customers with multidimensional workloads lift and shift these workloads to the cloud using pay-as-you-go terms on Azure. The SSAS VM images are preconfigured to deploy Analysis Services in multidimensional mode. https://feedback.azure.com/forums/556165-azure-analysis-services/suggestions/16813708-support-for-multidimensional-models ... |
|||
:
Нравится:
Не нравится:
|
|||
04.02.2021, 03:04 |
|
Azure Support for multidimensional models: Completed - currently no plans to launch a PaaS
|
|||
---|---|---|---|
#18+
vikkiv, как думаете, в пользу Synapse? ... |
|||
:
Нравится:
Не нравится:
|
|||
04.02.2021, 09:58 |
|
Azure Support for multidimensional models: Completed - currently no plans to launch a PaaS
|
|||
---|---|---|---|
#18+
George Nordic vikkiv, как думаете, в пользу Synapse? по azure DWH тут рядом был отзыв churupaha Пробовал запилить ELT (не ETL) - я не знаю как другие MPP работают, но тут очень всё зависит какую колонку оно выберет для shuffle данных (на промежуточных этапах плана выполнения) и если уникальных значений в колонке по которой делается шафл мало, то всё данные для обработки на какой-то стадии попадут на один/два дистрибушна прицепленных к паре нод, остальные будут простаивать, можно помогать хинтами, а оно надо? думал лить данные с blob storage или adls через polybase, руками писать автоматизацию было долго и стремно хотелось проще. нашел проще - ADF Copy Activity умеет это делать через polybase и всю рутину берет на себя и вот не задача - не позволяло указать формат даты/время источника чтобы его правильно парсить... обратился в тех поддержку - сказали ну вы каким нибудь pig пройдитесь по данным на blob storage поменяйте формат даты на тот что понимает polybase (или adf) и потом живите спокойно. чего? политика билинга не очень хороша - пока головы онлайн - всё билится, сторадж билится постоянно. если у вас уже где-то есть стар схема и надо перелить в azure dwh, то конечно онобудет класно и быстро работать (с columnstore), но если надо запилить ELT - то вылазит куча гемора, что не хочется этим гамном пользоваться. может что-то изменилось, не знаю. вобщем плюнул на это сырое г. https://www.sql.ru/forum/1300789/azure-analysis-services-multidimensional-golosuem-chtoby-uskorit-vypusk-servisa?mid=21702329#21702329 пару лет у же прошло, но люди смотрю так и просят добавить хотя бы MERGE https://feedback.azure.com/forums/307516-azure-synapse-analytics/suggestions/13520394--in-preview-merge-statement-support похоже весь пар у майкрософта уходит в датабрикс ... |
|||
:
Нравится:
Не нравится:
|
|||
04.02.2021, 11:07 |
|
Azure Support for multidimensional models: Completed - currently no plans to launch a PaaS
|
|||
---|---|---|---|
#18+
H5N1 по azure DWH тут рядом был отзыв H5N1 пару лет у же прошло, но люди смотрю так и просят добавить хотя бы MERGE Хотя на одном из проектов тоже просто так грузить большие объемы данных в synapse не получается, но получилось через Azure Data Lake Storage . Вот и есть у меня подозрения что SSAS MD прибили в пользу synaps'a. С Уважением, Георгий ... |
|||
:
Нравится:
Не нравится:
|
|||
04.02.2021, 12:23 |
|
Azure Support for multidimensional models: Completed - currently no plans to launch a PaaS
|
|||
---|---|---|---|
#18+
George Nordic Ну, вот там в комментарих как раз и говорят, что merge реализован в synapse, даже ссылку дают: https://azure.microsoft.com/en-us/updates/new-merge-command-for-azure-synapse-analytics/ по ссылке честно говорится, что фича лишь в preview, а в комментах жалобы что на 90 млн строк не пашет. и выглядит что спарк часть нативно databriks не поддерживает, получается если строить хранилище в ADLS то только на бесплатном delta lake формате от databriks, а витрины придется в azure DWH делать. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.02.2021, 12:37 |
|
Azure Support for multidimensional models: Completed - currently no plans to launch a PaaS
|
|||
---|---|---|---|
#18+
Может у нас объёмы не приближались к этим граблям, но на тогда ещё Azure DWH вполне работало через External Table (aka PolyBase) т.е. по принципу если приемлемо работает - то не чини / не трогай ещё есть некоторые ML трансформации через DataFrame API на Spark (PySpark/Hadoop) через DataBricks как обратно в ADLS (через mount) так и напрямую в SQL хранилища (иногда через промежуточный Hive) но там тоже вроде до 12 млн строк за один раз немного не дотягивало.. А так-то да, у MS уже довольно давно очевидны явно выраженные движения сделать по своему, а не как клиенту лучше.. ну и заодно вынудить платить за неоптимальный compute естественно Но как-бы Магомед и гора (Мухаммед чтобы никого не задеть), поэтому неизбежно приходится подстраиваться под то что есть а не нравится или нет.. и заодно всё больше начинаю по цене сравнивать с GCP/AWS прежде чем планировать архитектуру решения.. вроде и выбор расширяется - но при этом складывается впечатление что качество/удобство деградирует новые продукты требуемую функциональность не заменяют и не улучшают, при этом стоят больше.. это если смотреть как клиенту за чей счёт это финансируется, но если как разработчик - то в принципе нормально, и латентных тормозов с дороги убирают надеющихся за дорого выехать на знании одной фишки на протяжении всей карьеры и дают неплохо заработать как более динамичному специалисту на вечных трансформациях систем.. хотя я по возрасту (и из-за неизбежных возрастных изменений в мышлении) через лет 5-10 в первую категорию попаду - там и отношение к происходящему изменится на противоположное.. ... |
|||
:
Нравится:
Не нравится:
|
|||
04.02.2021, 16:21 |
|
|
start [/forum/topic.php?fid=49&fpage=5&tid=1857197]: |
0ms |
get settings: |
9ms |
get forum list: |
13ms |
check forum access: |
4ms |
check topic access: |
4ms |
track hit: |
31ms |
get topic data: |
12ms |
get forum data: |
3ms |
get page messages: |
45ms |
get tp. blocked users: |
2ms |
others: | 259ms |
total: | 382ms |
0 / 0 |