Всем привет.

Немного вступления.
Я занимаюсь созданием отчётов на VBA + MS SQL(через ADODB драйвер).
Сейчас на работе постепенно хотим уходить от Vba, заменив его более современным языком.
Мой выбор пал на C# - начал постепенно его изучать. В качестве тренировки хочу написать след. решение:

Есть след. задача:
Есть большой файл в Excel 100К+ строк на 60 столбцов, который представляет из себя информацию по всем грузоперевозкам в различных аспектах.

Файл постоянно видоизменяется в плане кол-ва строк(причём строки могут как добавляться,меняться, так и удаляться полностью)
Раньше данную информацию хранили в БД в 1 таблице, но сейчас была проведена реструктуризация хранения информации на сервере и база была нормализована , соответственно информация была распределена по 30 бизнес-таблицам.

Сейчас данные из Excel загружаются мною в БД 1 раз в месяц путем полной перезаписи всех данных за определенный период. Ненормализованные данные закачиваются сначала в промежуточную таблицу на сервере, а затем с помощью хранимой процедуры идет запись/удаление во всех бизнес-таблицах БД.

Итак я хотел бы сделать приложение для работы с данной таблицей и синхронизацией ее с сервером, чтоб пользователи могли сами вести запись/удаления своих данных в реальном времени(это пока предварительная концепция ):

- Собираюсь в Desctop - приложении(в дальнейшем может сделаю надстройку для Excel) сделать загрузку из Excel в GridView c возможностью редактирования данных, с последующей загрузкой на сервер, а также возможностью наоборот выгрузить данные с сервера. При всех операциях пользователь должен работать с шаблоном данных как в Excel(то есть 1 большая ненормализованная таблица, возможно добавлю фильтры по периодам, для сокращения строк)

Перерыл весь интернет, но так и не понял, как лучше спроектировать данную систему, в связи с чем хотел бы услышать мнение опытных разработчиков:
1) Какую библиотеку для работы с Excel использовать в проекте, чтобы приложение работало на всех машинах (компы все примерно одинаковые, ms office стоит у всех)
2) Как работать с ненормализованными данными: Необходимо ли разбивать на сущности на клиенте, а затем каждую сущность закачивать в свою таблицу, либо же оставить 1 сущность, а потом ее гдето делить ...
3) Как производить редактирование данных на сервере, ведь назад с сервера я должен выводить в GridView консолидированные данные из view с сервера
4) Почитав соответствующие форумы был поражен кол-вом решений по взаимодействию с БД , какой метод лучше выбрать в моём случае: чистый ado.net, или одну из ORM?
5) Есть ли хорошие книги/статьи по решению подобных кейсов как у меня?

Shocker.Pro,

Я предполагаю, что пользователь будет управлять своими данными через интерфейс:

1) Импорт
- Загрузка из Excel нового куска данных в интерфейс в GridView
- Первичная валидация данных, информирование об ошибках, исправление ошибок через GridView
- Загрузка на сервер

2)Повседневная работа
- Выгрузка данных использую фильтры в GridView, корректировка
- Загрузка на сервер.

Экспорт
3) Выгрузка обратно в Excel за определенный период


Пока сам еще не определился - в процессе разработки будет виднее. Пока хотел бы больше разобраться, как выстроить объектную модель и структуру приложения, какие технологии применить.

Shocker.Pro, Спасибо, учту.

Допустим, файл прошел проверку. Как мне лучше управлять ненормализированными данными? Делить по сущностям(класссам) на клиенте и организовывать связь каждой сущности с соответсвующей таблицей в бд? Далее, допустим, через orm - удалять, изменять, добавлять строки в БД?

Shocker.Pro, так как этот проект я буду делать в качестве тренировки, я его буду делать во внерабочее время. Поэтому у меня нет цели сделать его быстрее.

Есть цель сделать его максимально правильно с точки зрения архитектуры и "пощупать" все соответсвующие технологии.

Я так понимаю, что нужно делать трёхзвенку , так как двухзвенка это уже вчерашний век.

То есть необходимо остановиться на MVC модели?

То есть необходимо делить на клиенте, а потом писать на сервер.

Этот подход необходимо применять и при работе с файлом при импорте и при повседневной работе с DataGridView?

Как лучше реализовать бизнес-логику - пробегаться циклом по всем строкам Excel файла/DataGridView и формировать сущности в зависимости от столбца или есть более изящный способ?