Подскажите как в Linux максимально быстро сделать в текстовом файле
1. замену \n на ',' концов строки может быть несколько \n\n\n а запятая нужна одна, в самом конце запятая не нужна
2. в начале файла воткнуть 1 символ
3. в конец файла воткнуть 1 символ

в итоге
111111
222222
333333

нужно переделать в [11111,22222,33333]

используем только утилиты из стандартной поставки, perl тоже сгодится
максимально быстро потому что файлы десятки гигабайт, строчки в них десятки мегабайт

Scott TigerSintetik, кастомное решение на C будет по определению быстрее.
возможно, но делать некому, поэтому нужно обойтись стандартными утилитами

Dimitry Sibiryakovsed


я знаю что им можно, какое выражение?
нашел sed 's/^,+//;s/,+$//;s/,,+/,/g' но не работатет

еще есть paste -s -d

добавить символ в конец файла без создания нового файла echo "]" >> file
а как аналогично добавить в начало файла ?

ну вроде собрал все вместе
sed -r ':a;N;$!ba;s/\n+/,/g' FILE; sed -i -e '1 s/^/[/;' FILE; echo "]" >> FILE

проявилась проблемка, sed не работает на файле 15 гигабайт, т.е. команда отрабатывает без ошибок, но ничего не меняется
та же команда на кусочке большого файла отрабатывает, чего делать?

Andy_OLAPSintetikпроявилась проблемка, sed не работает на файле 15 гигабайт, т.е. команда отрабатывает без ошибок, но ничего не меняется
та же команда на кусочке большого файла отрабатывает, чего делать?
У народа отрабатывает и на 25 Гб файлах.
Попробуйте лайф-хак OPTIMIZING FOR SPEED с предварительным find .
там вопрос скорости, а у меня вопрос работоспособности, протестировал подробнее, граница проходит по 2G, народ говорит, что команда пытается засосать кусок в память, обламывается по нехватке памяти, но ничего не говорит
А так проблему решил другой комбинацией команд.