Гость
Целевая тема:
Создать новую тему:
Автор:
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / удаление части данных из куба / 12 сообщений из 12, страница 1 из 1
15.08.2018, 08:39
    #39687831
Mihich
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
как можно удалить часть данных из куба.
суть проблемы проста:
данные ежедневно добавляются в куб, раз в неделю специальный чел контролирует правильность загрузки. Иногда, происходит сбой заливки данных. надо вырезать данные за промежуток времени и залить заново.

прошу прощение, но я еще пока чайник в кубах
...
Рейтинг: 0 / 0
15.08.2018, 12:29
    #39688012
StarikNavy
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
Mihich,

1) настроить вьюшку (добавить условие) удалить из базы данные
2) пересчитать куб (партицию)
...
Рейтинг: 0 / 0
15.08.2018, 13:28
    #39688076
Mihich
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
Так для этого нужно чтоб были все данные в БД для обработки куба ((( А у меня только в БД только оперативные (за сутки) (((
...
Рейтинг: 0 / 0
15.08.2018, 13:29
    #39688079
Mihich
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
я могу найти данные еще за неделю, а вот за годы это уже проблема (((
...
Рейтинг: 0 / 0
15.08.2018, 18:38
    #39688338
Ferdipux
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
Mihichя могу найти данные еще за неделю, а вот за годы это уже проблема (((

Тогда пилите DWH, где будете хранить данные для скармливания кубу.
Теоретически можно в кубе сделать партиции по дням и заливать данные в партицию, но не советую.
Вам неоткуда будет взять данные если вы решите изменить формулы расчета. И куб SSAS тормозит при процессинге если партиций в нем много.
...
Рейтинг: 0 / 0
16.08.2018, 07:35
    #39688472
Den Limonov
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
А разве нельзя сделать копию процесса загрузки и скормить ему нужную дату вместо SYSDATE или LOAD_DATE?
...
Рейтинг: 0 / 0
17.08.2018, 09:17
    #39689247
Mihich
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
кубы делал не я. я их сейчас поддерживаю. поэтому и возникла проблема ( идея) из куба вырезать нужное окно данных, а потом заливать в это окно. чтоб не было задвоения данных. Но чувствую придется искать в данных дыры и заливать именно тот кусок которого не хватает((
...
Рейтинг: 0 / 0
17.08.2018, 09:18
    #39689248
Mihich
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
Ferdipux, прошу прощение, а DWH это что?
...
Рейтинг: 0 / 0
17.08.2018, 09:20
    #39689251
Mihich
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
Den LimonovА разве нельзя сделать копию процесса загрузки и скормить ему нужную дату вместо SYSDATE или LOAD_DATE?

да так и делаю. но геморойно каждый раз вручную искать окна (((
...
Рейтинг: 0 / 0
17.08.2018, 09:51
    #39689269
Mihich
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
протормозил ))))
...
Рейтинг: 0 / 0
17.08.2018, 12:07
    #39689402
StarikNavy
Участник
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
Mihich,

ели вы каждый день генерите новую партицию, и в нее пишети свежие данные, то соответсвенно нужно удалить партицию за нужный день.

а сколько сейчас партиций у кубе (ради интереса)?
данные для измерений как меняются?
...
Рейтинг: 0 / 0
17.08.2018, 12:52
    #39689445
Mihich
Гость
Скрыть профиль Поместить в игнор-лист Сообщения автора в теме
удаление части данных из куба
StarikNavyMihich,

ели вы каждый день генерите новую партицию, и в нее пишети свежие данные, то соответсвенно нужно удалить партицию за нужный день.

а сколько сейчас партиций у кубе (ради интереса)?
данные для измерений как меняются?

как посмотреть сколько партиций?
данные для измерений берутся с датчиков. делается дополнительная обработка измерений.

ЗЫ: я пока в этом чайник
...
Рейтинг: 0 / 0
Форумы / OLAP и DWH [игнор отключен] [закрыт для гостей] / удаление части данных из куба / 12 сообщений из 12, страница 1 из 1
Найденые пользователи ...
Разблокировать пользователей ...
Читали форум (0):
Пользователи онлайн (0):
x
x
Закрыть


Просмотр
0 / 0
Close
Debug Console [Select Text]