Как убрать переносы в линуксе

Удаление знаков переноса строки в bash

Регулярка извлекает с файла кусок многострочного текста. Следующая задача — получить из него одну строку. Попробовал sed «s/\r\n//» . Комбинации опробованы различные. Гуглю различные вариации обозначения знака переноса, не получается. За направление правильного гуления скажу большое спасибо ). текст — utf-8.

Отслеживать
задан 23 фев 2013 в 20:28
15 1 1 золотой знак 1 1 серебряный знак 4 4 бронзовых знака
Непонятно. Приведите пример текста и желаемый результат. А вообще в никсах перевод строки это \n
23 фев 2013 в 20:41

stroka3 stroka2 stroka1 stroka1 stroka2 stroka3 — результат \n разнообразно опробован и без результата. различные флаги sed и tr

23 фев 2013 в 21:05

Что-то вы делаете не так 🙂 $ cat in.txt stroka3 stroka2 stroka1 stroka1 stroka2 stroka3 $ cat in.txt | tr -s ‘\r\n’ ‘ ‘ stroka3 stroka2 stroka1 stroka1 stroka2 stroka3 $ cat in.txt | tr -d ‘\r\n’ stroka3stroka2stroka1stroka1stroka2stroka3

23 фев 2013 в 21:13
нумерация, конечно, спутана
23 фев 2013 в 21:14
Добавил в коммент выше вывод tr -d. Всё прекрасно удаляется.
23 фев 2013 в 21:16

3 ответа 3

Сортировка: Сброс на вариант по умолчанию

cat in.txt | tr -s '\r\n' ' ' > out.txt 

Или, если склеить строки (в примере выше \r\n меняется на пробел):

cat in.txt | tr -d '\r\n' > out.txt 

P.S. ‘\r\n’ меняем на ‘\n’ для unix-переводов строк.

Отслеживать
ответ дан 23 фев 2013 в 20:42
user6550 user6550

смотрим содержимое файла in.txt ~ $ cat in.txt stroka3

stroka2 stroka1 stroka1 stroka2 stroka3 

загоняем всё что в файле в переменную

~ $ string=`cat in.txt` 

с помощью echo выводим содержимое переменной

~ $ echo "$string" # переменная в кавычках выдаст с переносами строк stroka3 stroka2 stroka1 stroka1 stroka2 stroka3 ~ $ echo $string # переменная БЕЗ кавычкех выдаст БЕЗ переносов строк stroka3 stroka2 stroka1 stroka1 stroka2 stroka3 

Запрет расстановки переносов в определённых словах

Если переносы в словах текста расставляются автоматически, но некоторые из них ставятся неправильно, или если некоторые слова не должны переноситься на следующую строку, расстановку переносов для таких слов можно отключить:

1. Choose LibreOffice — Preferences Tools — Options — Language Settings — Writing Aids
2. Выберите словарь в списке Словари пользователя и нажмите кнопку Изменить . Если список пуст, нажмите кнопку Создать , чтобы создать словарь.
3. В поле Слово введите слово, которое требуется исключить из процесса расстановки переносов, и знак равенства (=), например, «претенциозный itemListElement» itemscope=»true» itemtype=»http://schema.org/HowToStep» dir=»auto»> Нажмите кнопку Создать , затем кнопку Закрыть .

Чтобы быстро исключить слово из процесса расстановки переносов, выделите его, выберите команду Формат — Символ , откройте вкладку Шрифт и в поле Язык выберите «Нет».

В некоторых словах содержатся специальные символы, которые в LibreOffice отображаются в виде дефисов. Если требуется предотвратить переносы для таких слов, то можно вставить специальный код, запрещающий перенос слова в месте вставки этого кода. Выполните следующие действия:

1. Установите курсор в том месте, в котором требуется запретить перенос.
2. Choose Insert — Formatting Mark — Word Joiner . The inserted formatting mark will be shown in gray. To remove it, simply place the cursor over the formatting mark and press the Del key.

Как удалить newline (символ новой строки) из вывода команд и файлов в командной строке Linux

Как удалить newline (перевод строки) из строки в Bash

Для перевода строки в операционных системах используются символы:

Причём в Linux используется \n (также называется EOL, End of Line, newline, новая строка). В других операционных системах могут быть вариации.

По умолчанию многие программы, утилиты командной строки Linux автоматически добавляют символ newline — в целом это делает вывод более читаемым. Но иногда символ перевода строки не нужен. Эта заметка посвящена тому, как убрать из строки вывода или из строк файла символ новой строки (newline).

Как удалить символ newline из строки

echo

Если вы выводите строку или результат выполнения команды с помощью «echo», то вы можете использовать опцию -n, которая означает не выводить конечный символ newline.

Обратите внимание на различный результат команд:

echo -n 'HackWare.ru' | md5sum ce7d43633e2bfb3d283f2cfbdbeb0d2a - echo 'HackWare.ru' | md5sum 19acfcdef400742c5de064e0bf9e9a87 -

Первая команда считает контрольную сумму строки «HackWare.ru», а вторая команда считает контрольную сумму строки «HackWare.ru» к которой добавлен конечный символ newline.

tr

Вы можете удалить конечный символ новой строки с помощью tr в конструкции

tr -d '\n'

echo 'HackWare.ru' | tr -d '\n' | md5sum ce7d43633e2bfb3d283f2cfbdbeb0d2a -

sed

Вы можете удалить конечный символ новой строки с помощью sed в конструкции (данная команда удаляет символы «\n» и «\r»:

sed -z 's/[\n\r]//g'

echo 'HackWare.ru' | sed -z 's/[\n\r]//g' | md5sum ce7d43633e2bfb3d283f2cfbdbeb0d2a -

Perl

Следующая конструкция на PERL также удаляет символ новой строки:

perl -pe 'chomp'

echo 'HackWare.ru' | perl -pe 'chomp' | md5sum ce7d43633e2bfb3d283f2cfbdbeb0d2a -

Ещё один пример использования:

wc -l < log.txt | perl -pe 'chomp'

awk

С помощью awk вы можете удалить символы newline (новой строки) используя следующую конструкцию:

echo 'HackWare.ru' | awk '< printf "%s", $0 >' | md5sum

Смотрите также: Уроки по Awk

Ещё один вариант:

echo 'HackWare.ru' | awk '' | md5sum

Удаление newline из результатов выполнения команды

Все предыдущие примеры можно использовать для удаления newline из вывода команд, передав вывод по конвейеру (трубе, «|»). Далее приведены ещё несколько конструкций, которые вы можете использовать для удаления newline из результатов выполнения команды.

printf

Поместите КОМАНДУ в конструкцию вида:

printf '%s' $(КОМАНДА)

Будет выведен результат выполнения КОМАНДЫ без конечного символа newline.

printf '%s' $(echo 'HackWare.ru') | md5sum

xargs и echo

Для подавления вывода символа новой строки newline вы можете использовать конструкцию с xargs:

КОМАНДА | xargs echo -n

Будьте внимательны с предыдущей конструкцией, поскольку она также ещё и сжимает пробелы. Чтобы понять о чём идёт речь, изучите вывод следующей команды:

echo "a b" | xargs echo -n; echo -n $(echo "a b")

Поскольку xargs может быть очень медленной, вы можете использовать следующую конструкцию:

echo -n `КОМАНДА`

Помните, что если вывод начинается с -e, то предыдущая конструкция будет истолковывать вывод как опцию echo.

Подстановка команды

В следующих примерах команда, заключённая в "$(КОМАНДА)" будет выведена без конечного newline:

echo -n "$(wc -l < log.txt)" printf "%s" "$(wc -l < log.txt)"

Как удалить только последний символ newline из многострочного вывода

Все предыдущие примеры подразумевают, что удаление символа выполняется из однострочного вывода. Если вам нужно удалить последний символ из многострочного вывода, то далее показано, как это сделать.

Perl

Следующая команда выведет содержимое файла log.txt, при этом будет удалён только один символ newline в самом конце файла, все остальные newline будут сохранены. Особенностью команды является то, что даже если файл заканчивается на несколько символов newline, все они будут удалены.

perl -pe 'chomp if eof' log.txt

printf

Следующий пример также удалит символ newline в конце файла log.txt, но удалён будет строго ПОСЛЕДНИЙ символ newline:

printf "%s" "$(< log.txt)"

Как удалить newline из файла в Bash

Вы можете использовать вывод содержимого файла в паре с любой из перечисленных выше конструкций для удаления newline. Например:

cat log.txt | tr -d '\n'

Аналог предыдущей команды:

tr -d '\n' < log.txt

Команды awk, sed, perl и другие могут как обрабатывать стандартный ввод, так и получать имена файла, который нужно обработать (удалить символы newline) в виде опции. Примеры:

awk '< printf "%s", $0 >' log.txt awk '' file sed ':a;N;$!ba;s/\n//g' file.txt perl -p -i -e 's/\R//g;' filename

Как удалить newline из переменной в Bash

Для удаления символа newline (или любых других символов) вы можете использовать Pattern substitution (разновидность Shell Parameter Expansion), формат следующий:

• Для удаления всех совпадений:

• Для удаления первого совпадения:

• Для удаления совпадения в конце строки:

• Удаление всех совпадений и присвоение нового значения этой же переменной:

VARIABLE=$

При этом символ newline (\n) нужно экранировать обратным слэшом.

Вывод переменной без удаления newline:

text='hello\n\nthere\nagain\n' echo -e $

hello there again

Вывод переменной с удалением всех newline:

text='hello\n\nthere\nagain\n' echo -e $

hellothereagain

Вывод переменной с удалением только первого newline:

text='hello\n\nthere\nagain\n' echo -e $

hello there again

Вывод переменной с удалением последнего newline:

text='hello\n\nthere\nagain\n' echo -e $

hello there again

Как заменить newline ("\n") на пробел (" ")

tr

Чтобы заменить newline ("\n") на пробел вы можете использовать следующую конструкцию:

tr '\n' ' '

echo -e 'hello\n\nthere\nagain\n' | tr '\n' ' '

sed

sed ':a;N;$!ba;s/\n/ /g' FILE

Кросс-платформенный совместимый синтаксис, который работает с BSD и OS X sed:

sed -e ':a' -e 'N' -e '$!ba' -e 's/\n/ /g' FILE

В GNU sed есть опция -z для записей (строк), разделённых нулём. Вы можете просто вызвать:

sed -z 's/\n/ /g'

sed -z 's/\n/ /g' FILE

Bash

while read line; do printf "%s" "$line "; done < FILE

Ещё один вариант:

cat FILE.txt | while read line; do echo -n "$line "; done

Ещё один вариант написания:

while read line; do echo -n "$line "; done < FILE.txt

Perl

Решение на perl, скорость примерно как с sed:

perl -p -e 's/\n/ /' FILE

paste

Решение с paste, скорость примерно как с tr, может заменять только один символ:

paste -s -d ' ' FILE

awk

Решение с awk, скорость примерно как с tr:

awk 1 ORS=' ' FILE

Программа awk состоит из правил, состоящих из условных кодовых блоков, то есть:

условие

Если кодовый блок опущен, используется значение по умолчанию: . Таким образом, 1 всегда интерпретируется как истинное условие, и для каждой строки выполняется print $0.

awk '' FILE

awk ' END ' FILE

awk ' END ' FILE

awk '' FILE