Мне нужно загрузить кучу данных, в которых могут встречатся дублирующая информация - ее мне нужно игнорировать:




Но оно не работает, если после каждой вставки не сохранять информацию в БД. А мне не хотелось бы вызывать SaveChanges после каждой строки документа, состоящего из тысяч строк.

Можно как-то заставить EF при поиске искать и в локальном кеше ?


PS. Вообще можно ли сделать так, чтобы EF при вставке в БД сам проверял наличие информации (по поисковому запросу - например по номеру документа), и вставлял только отсутствующую ? Т.е. некий аналог SQL Merge. Просто, ведь, DbContext.Documents.FirstOrDefault тоже каждый раз будет делать обращение к бд. А значит будет тысячи обращений, при вставке данных. Хотелось бы свести это все к единственному обращению в базу.

Petro123,

Не по первичному ключу. Добавляется документ с уникальным номером. А ключ это сгенеренный в базе ID. Хотелось бы иметь возможность искать в локальном кэше по номеру документу. А еще больше хотелось бы, чтобы уже при bulk вставке в базу производились эти проверки. Чтобы не пулять тысячу маленьких запросиков, а один, пусть и большой.

Дело в том, что данные загружаются из разных файлов excel. Дубли могут быть, и нужно игнорировать повторные попытки загрузить.

Это можно сделать через:



Но мне не нравится шквал запросов в базу данных. По уму бы все делать в одном запросе.

Petro123,

Дубли могут быть в РАЗНЫХ файлах. Т.е. нужно проверять наличие документа из файла с теми, что уже загружены в базу. Т.е. делать тысячу запросов в базу вида FirstOrDefault (x=> x.DocNumber== y.DocNumber). Как я могу от этого избавится ?

Как можно сделать bulk вставку с проверкой в момент добавления ? Ну я могу конечно написать процедуру t-sql и закидывать туда табличный параметр - но это все без EF. А с EF можно что-то сделать более менее эффективное в плане производительности то ?