maytonГосподи да я в качестае примера привел. Ф. И. О. Можно еще сотню придумать.это я понял, только не понял что и почему может потеряться?

Petro123Карту присылает сервис на клиента коллекцией.
И я обратно на сервис коллекцией с правками.знаешь анек про то что ответил программист сыну на вопрос о солнце?

Petro123вадядобавление данных из файла средствами самой базы есть самый быстрый способ.вам везет с заказчиком. Он быстрое выбирает. А у нас коллекции(.
Вадя, коллекции как делать по сабжу?где тут инфа что приходит коллекция и уходит коллекция?
тут цитата про добавление из файла и что у вас коллекции.

Petro123Семантика и метрика в коллекции каждой фигуры.и причём здесь палочки?
и причём здесь субд?

Korcarтам автоматом записи из файла закидываются в базу
Petro123Код или машинистка я не знаю.
я так понял, что появляется файл (не важно откуда) и его надо занести в базу.
Petro123Понятно что я про коллекции спросил свой случай.коллекция явно меньше содержимого файла( если коллекцию надо в базу засунуть) поэтому , наверное, для коллекции батч будет проще. ну а если только одно поле изменилось в коллекции - тут надо смотреть по конкретной ситуации - может и проще заменить всю строку из коллекции в строке таблицы в базе, т.е. и переписать не изменённые поля

Petro123А чем заменить коллекции?тут вопрос в том, что у тебя уже работает и отлажено -не стоит трогать. даже если это и можно ускорить - работает, устраивает- и пусть так будет.
если что-то новое - то тут уже стоит опробовать новое, может и заменить коллекцию на палочки .

maytonБедняга спросил про транзакции. Надо дать ему знание. Чистое. Рафинированное.он спросил про первое что ему известно или подсказали, я же дал вариант как такие задачи надо решать.

maytonЭто плохой пример. Это часть проприетарного функционала MYSQL которая
к SQL в общем понимании этого слова отношения не имеет.плохой пример? а ты знаешь насколько этот плохой пример быстрее всех остальных? а ты знаешь что он и как может обрабатывать?
если ТС новичок - то это как раз и повод познакомиться с возможностями инструмента.
bulk inserts в данном случае, по сравнению с LOAD DATA INFILE, тормоз, лишняя работа, лишняя нагрузка.
в той же mssql есть своя проприетарная BULK INSERT.

mayton,
ну так у тс mysql.
соответственно и предложено.
а транзакции здесь не причем, вот если бы он сначала проичитал файл, а потом начал писать в базу, вот тогда можо былоб о них говорть. но задача стоит загрузить из файла в базу.
в mysql не обязательно грузить из csv файла. можно из любого текстового , главное что6 была известна структура строки. с разделителями или без.

maytonвадяон спросил про первое что ему известно или подсказали, я же дал вариант как такие задачи надо решать.
Ментор из тебя плохой. Ты ему даешь варианты как сотона искушает юного послушника.
Нельзя так родной. Заметь что я в топике не критикую твой бизнес. Ты пилишь задачи - и
рубишь свою капусту. Это твоё дело. И раз с 2002 года пилишь - пускай так оно и будет.
И я на твою позицию не претендую. И даст бох никогда и не буду.

Я просто акцентирую внимание на том надо менторствовать с умом. Извращённые кейсы
мы и сами знаем. Но они - это не учебный материал.
я не ментор, и если ты читал посты тс, то обратил бы внимание на то, что они заинтересовались вариантом загрузки предложенным мной.
подойлет ли он им - это им решать, если будут вопросы по этому варианту - отвечу.
фактом остается то, что тс об этом варианте либо. не знал, либо забыл, либо не счёл возможным до упоминания тут.
тс не первый год тут и знает что и как спрашивать для учебы и для работы.
я расценил его вопрос как для решения проблемы по работе в новой для него области, и соответственно дал ответ, как сделать, чтоб всё работало быстро.

Basil A. Sidorovвадяа ты знаешь насколько этот плохой пример быстрее всех остальных?"Маша наклеила девяносто марок, а профессор - только десять. Но зато - все правильно"
Э.Успенский "Двадцать пять профессий Маши Филипенко".
это камень в огород mysql?

разработчик субд создал специализированный инструмент для загрузки больших объёмов сразу из файла.
но нет , мы умнее разработчика - мы создадим свой велосипед, и будем маяться , плакать но есть кактусы....

Basil A. SidorovБолее того, насколько я помню (и даже перечитал) топик у вопросителя - MS SQL.тут ошибся - тогда надо смотреть в сторону BULK INSERT. у MS, как правило, ещё больше возможностей.

Basil A. SidorovДо сих пор неизвестно, насколько структура файлов пригодна для загрузки в базу.это не означает, что нельзя предложить этот вариант.

Basil A. SidorovИспользовать загрузку из файла средствами базы можно ровно в одном случае: файл изначально подготовлен именно для такой загрузки.не надо быть столь категоричным.
что значит "изначально подготовленным"?
достаточно чтоб строки имели одинаковую структуру. и структура была известна.
даже без разделителей.
Petro123все твои предложения не имеют отношения к java в топике java.
Security руками, склейка строк, ws и утилиты базы.
Korcarага. без блобов и строки не тяжелые, но перспективы разных способов интересны
Korcarща появился ещё вариант с загрузкой файлов напрямую в БД. в этом случае все комиты субд на себя берёт, если правильно понимаю.
это и обсуждаем

давно не работал с mssql , а там все намного проще.
https://support.microsoft.com/ru-ru/help/321686/how-to-import-data-from-excel-to-sql-server


Petro123все твои предложения не имеют отношения к java в топике java.главное помучиться или решить проблему?