Руководство поставило задачу экспорта из 1С 8 проводок и таблиц материального учета в какое-нибудь центральное хранилище.
Экспорт нужно делать дважды в месяц, затем преобразовать данные таблиц 1с в другой вид и загрузить в ХД (хранилища данных). Затем в центральном офисе 10 пользователей будут строит отчеты (отчеты на ХП) и будут выплевываться (кстати посоветуйте куда?) с обязательной выгрузкой в Excel. Количество филиалов 35, в среднем 300 000 проводок в год на одном филиале, значит 10,5 млн. записей в таблице проводок ХД (хранилища данных) и 5-6 млн. записей в таблице материального учета я их для себя назвал таблицы фактов. Справочников подвязанных к таблицам фактов порядка 16 (я их назвал для себя таблицы измерений) в них содержится по всем филиалам вместе взятых записей 100-200 тыс. На филиалах 1с крутится на MS SQL 2000 StnEd (Win 2003 server), в центральном офисе есть уже MS SQL 2000 StnEd (Win 2003 server). Есть под эту базу отдельный сервер. Данные должны хранится 5-7 лет и накапливаться (то есть эта хранилище может превратится в какую-нибудь систему принятия решений), так как растет объем реализации то через 7 лет можно ожидать и 150 млн. записей в одной и 70 млн. в другой таблице. Прогнозирую сложные выборки, с агрегированием и прочее за большие периоды, неплохо бы что-нибудь типа иметь патриционирования, такое в Oracle есть вроде. Сразу обращаюсь за консультацией.
1. Какую ОС выбрать для этих целей?
2. Какую СУБД выбрать MS SQL 2000, 2005, Oracle 10g Std Ed One или Std Ed, ASE, ASA, PostgreSQL, еще, что-нибудь по вашему предложению. Основные требования надежность данных, возможность восстановления после краха системы, время 10*5.
3. На чем построить отчетную систему с возможностью модификации данных (Crystal Report, ASP.Net, WinForms(C#), Developer Suite (если СУБД Oracle), Java, еще что-нибудь) с выгрузкой в Excel.
4. Как построить таблицы измерений все сущности в одну или по разным таблицам?
5. Может быть как-то по другому проводки организовать, сейчас в голове решение такого характера (Дата, Дт, Суб1, Суб2, Суб3, Кт, СУб1, Суб2, Суб3, Сумма) может быть стоит расщепить на 2 таблицы.
6. Нужно ли делать итоговые таблицы или представления (желательно индексированные и материализованные).
7. Скольких разработчиков привлекать из аутсорсинга ?
8. Как построить стратегию выгрузки-передачи-загрузки (канал хороший почти у всех) репликация SQL Server-экспорт в ХД (хранилище данных) или ХML или полная база 1сv8 (так называемый <file>.dt) или запросы к таблицам на филиалах их результат куда-то поместить (куда?) и передать в централ. офис, затем извлечь эти данные (из этого куда) и поместить в ХД?
Отчеты сложные, желательно иметь хорошую оптимизацию и производительность, и надежность хранилища данных.

Сам склоняюсь к Win 2003+Oracle SE + Developer Suite+ [Oracle App Server], может я неправ? Может стоит рассмотреть вариант, то что есть Win2003+SQL Server 200 SE+ADO(ASP,C#).NET (Access, Excel, еще что-нибудь). Или еще какая-нить комбинация.

Спасибо.

Yo.!в Oracle 10g Std Ed One или Std Ed partitioning нету, он только в EE edition ...
зато есть нормальные мат вью. имхо поскольку выборки будут делатся по агрегированым мат вью то партитирнинг может и не пригодится. в mssql indexed view не умеет агринированые данные хранить.
а вообще лучше в форуме dwh спросить.

EE дорогой $800* min 25 users=$20 000
а SE Std One $150* min 5 (у меня 10)=$1500
SE Std $300*min 5 (у меня 10)=$3000

Чем оракл привлекает, что у него очень гибкий язык разработки SQL*Plus, PL/SQL. И к нему есть Dev Suite сразу все в одном флаконе. С точки зрения эгоистических намерений, мне хочется что бы ХД было построено именно на нем.Но дело в том, что мне надо аргументировать перед руководством. Допустим стороний консультант советует нам использовать MS.

Я оговорился, просто в этом же хранилище возможны соотнесения данных бухучета и западных стандартов, то есть нужна еще одна таблица фактов, которая будет строится по желанию бухгалтера-аудитора. Например он хочет что-бы по нажатию кнопки было
(отобрать все записи с таким-то бух счетом
обновить колонку соответствия с западным отчетом на такое-то значения из такой-то таблички
сагрегировать по статьям западного учета.
Визуализировать все это
Нажать кнопку и получить данные в Excel)


Аналитика по 3 разрезам,
Построение бух. баланса
Построение разных фин отчетов, в основном участвуют или срез по остаткам по всем аналитикам (3 шт), либо обороты за период
Построение западных очетов

Структура такая, таблица фактов (Дата, СчетДт, Анал1, Анал2, Анал3, СчетКт, Суб1,Суб2,Суб3, Сумма) и 16 таблиц измерений(Id, Наименование, тип), которые соединяются по 6 полям.


8. Как говорится, it's depends, от очень многих условий, например, изменяются данные ли "задним числом".

Нет не могут, только корректировки нового периода

Anton DemidovЕсли ваш MS SQL SERVER шёл с 1С, то по лицензионному соглашению его нельзя использовать для других целей. Т.е. покупать всё равно придётся.

ИМХО ставьте Оракл на Windows 64bit.
Enterprise Edition вам пока не нужна, если через несколько лет вы дорастёте объёмами до необходимости использования партицирования - тогда и будете договариваться с Ораклом об апгрейде.





Насчет MS да правда не можем использовать кроме 1С.


Win 2003+Oracle 10g SE One+DevSuite (Forms+Report) - хороший выбор?