moris пишет:
> Ожидаемое поведение. Т.к. если использовать fast bcp и указывать размер
> батча -b, то только то кол-во строк, которое указано как размер батча,
> будет записано на страницу.

Как -то я в этом не уверен. -b задает колическтво записей в одной
транзакции (не смотря на то что в FAST-режиме данные не логируются,
транзакции выделения страниц все равно есть). Но вот что при этом
ASE будет размещать каждую запись на одной сранице - я как-то
не слышал об этом и не верю. Хотя бы потому что -b не зависит от размера
строки, а если бы все строки клались бы на одну страницу, то было бы
какое-то верхнее ограничение на число, указываемое в этом параметре.
А его нет. moris, вы вообще откуда это взяли ?
Posted via ActualForum NNTP Server 1.4

Freebird пишет:

> 2. Зачем батч сделал = 1 строке?
> В файле источнике есть нечитабельные строки и при копировании (таже bcp)
> возникает ошибка (не могу сейчас дать оригинальный текст): "не могу
> сконвертировать символ в чарактер сет сервера". Когда ставлю размер
> батча =1, то ломанные строки отпадывают, а нормальные пишутся в базу.

Это делается по-другому, там можно указать файл для ошибок,
и тогда туда вывалятся все невставленные записи.
Posted via ActualForum NNTP Server 1.4

moris пишет:

> Sybase
> Setting the batch size to 1 causes Adaptive Server to allocate one data
> page to one row copied in. This option only applies to fast bcp, and is
> only useful in locating corrupt rows of data. Use -b1 with care — doing
> so causes a new page to be allocated for each row, and is a poor use of
> space

Ну ни фига ж себе ! Никогда бы не подумал такое.
Posted via ActualForum NNTP Server 1.4

Freebird пишет:
> Автор: "Freebird"
> Да уж. Спасибо.
>
> На счет файла ошибок. Сам почитаю, но был бы признателен за пример.

Ну там особо не чего показывать, хитрости особой нет.

-e errfile
is the full path name of an error file where bcp stores any rows that it was
unable to transfer from the file to the database. Error messages from bcp appear
on your terminal. bcp creates an error file only when you specify this parameter.

И на сколько я помню туда будут вываливаться именно все строки
из обломившихся батчей (см. ниже), включая хорошие, а не только та, которая
сломала батч.

> Пока понимание такое что, если указывать -b то отвалится только батч с
> ломанными строками
> а если не указать то отвалится все.

Да.

Лучше посчитать примерно количество строк на страницу (если строки фиксированной
длины, конечно, или примерно фиксированной длины) и указать его.

Еще кстати для больших таблиц классно заливать их в раздельные партиции,
параллельно. Создаешь таблицу партицированной, по числу engine-ов, которые
хочешь занять для вставки данных, например, все которые есть.
Разделяешь исходный файл на N примерно равных частей.
Потом заливаешь парралельно в N партиций BCP-ёй данные, и это все
реально происходит паралельно. Потом после заливки делаешь
ALTER TABLE partition 1 (или как там это ... ) - операция
выполняется почти мгновенно. Ну и все - таблица залита.
Можно конечно не убирать потом партиции, если они нужны реально в работе.
Скорость заливки увеличивается почти в N раз. Да, забыл сказать,
это все работает естественно только на многопроцессорных машинах,
на однопроцессорной выигрыша реального в скорости не будет.

Кстати на счет документации. Я так понял, что эти предупреждения
о -b 1 добавили достаточно недавно, раньше я этих предупреждений
точно не видел.
Posted via ActualForum NNTP Server 1.4

moris пишет:
> В доке на ASE 12.5.0
> <http://manuals.sybase.com/onlinebooks/group-as/asg1250e/util/@Generic__BookTextView/5819;pt=5960>
> встречается описание этой фичи, думаю что и раньше было тоже.

Не, не раньше точно.
Posted via ActualForum NNTP Server 1.4

Freebird пишет:
> В процессе заливки в каждом фрагменте базы остается 2,7% свободного
> места независимо от размера фрагмента. Если бы это было на одном

> Вопрос:
> Это ограничение устанавливается на базе, на сервере или это поведение bcp?

Скорее всего базы. На каждом экстенте оставляется одна страница
неаллоцированной, про запас. На каждой странице - не больше fillfactor-а
заполненного места, и так далее. это в общем нормально.
Posted via ActualForum NNTP Server 1.4

moris пишет:
> Не поленился и залез в доку по ASE12.0
> Там описано тоже самое

Ну ты мега-чувак !! А я значит мега-дыра-в-башке.
Posted via ActualForum NNTP Server 1.4