Was ist der einfachste Weg, um alle Wagenrückläufe \raus einer Datei in Unix zu entfernen ?

Ich werde Sie meinen Wagen kehrt zu übernehmen ( CR, "\r", 0x0d) an den Enden der Linien anstatt nur blind innerhalb einer Datei (Sie sie in der Mitte der Saiten für alle kann ich weiß). Verwenden Sie diese Testdatei nur mit einem CRam Ende der ersten Zeile:

$ cat infile
hello
goodbye

$ cat infile | od -c
0000000   h   e   l   l   o  \r  \n   g   o   o   d   b   y   e  \n
0000017

dos2unix ist der richtige Weg, wenn es auf Ihrem System installiert ist:

$ cat infile | dos2unix -U | od -c
0000000   h   e   l   l   o  \n   g   o   o   d   b   y   e  \n
0000016

Wenn dos2unixIhnen aus irgendeinem Grund nichts zur Verfügung steht, sedtun Sie Folgendes:

$ cat infile | sed 's/\r$//' | od -c
0000000   h   e   l   l   o  \n   g   o   o   d   b   y   e  \n
0000016

Wenn sedIhnen aus irgendeinem Grund nichts zur Verfügung steht, edtun Sie dies auf komplizierte Weise:

$ echo ',s/\r\n/\n/
> w !cat
> Q' | ed infile 2>/dev/null | od -c
0000000   h   e   l   l   o  \n   g   o   o   d   b   y   e  \n
0000016

Wenn Sie keines dieser Tools auf Ihrer Box installiert haben, haben Sie größere Probleme als beim Versuch, Dateien zu konvertieren :-)

tr -d '\r' < infile > outfile

Siehe tr (1)

Alte Schule:

tr -d '\r' < filewithcarriagereturns > filewithoutcarriagereturns

Der einfachste Weg unter Linux ist meiner bescheidenen Meinung nach:

sed -i 's/\r$//g' <filename>

Die starken Anführungszeichen um den Substitutionsoperator 's/\r//'sind wesentlich . Ohne sie wird die Shell \rals Escape + r interpretiert und auf eine Ebene reduziert rund alle Kleinbuchstaben entfernt r. Deshalb die Antwort von Rob aus dem Jahr 2009 funktioniert nicht.

Durch Hinzufügen des /gModifikators wird sichergestellt, dass auch mehrere \rentfernt werden und nicht nur der erste.

Es gibt ein Dienstprogramm namens dos2unix , das auf vielen Systemen vorhanden ist und auf den meisten problemlos installiert werden kann.

sed -i s/\r// <filename>oder so; siehe man sedoder die Fülle von Informationen im Internet zur Verwendung von sed.

Eine Sache, auf die hingewiesen werden muss, ist die genaue Bedeutung von "Wagenrücklauf" oben; Wenn Sie wirklich das einzelne Steuerzeichen "Wagenrücklauf" meinen, ist das obige Muster korrekt. Wenn Sie allgemeiner CRLF (Wagenrücklauf und Zeilenvorschub, wie Zeilenvorschübe unter Windows implementiert sind) gemeint haben, möchten Sie wahrscheinlich \r\nstattdessen ersetzen . Bare Line Feeds (Newline) unter Linux / Unix sind \n.

Wenn Sie ein Vi-Benutzer sind, können Sie die Datei öffnen und den Wagenrücklauf entfernen mit:

:%s/\r//g

oder mit

:1,$ s/^M//

Beachten Sie, dass Sie ^ M eingeben sollten, indem Sie Strg-V und dann Strg-M drücken.

Noch einmal eine Lösung ... Weil es immer noch eine gibt:

perl -i -pe 's/\r//' filename

Es ist schön, weil es vorhanden ist und in jeder Unix- / Linux-Variante funktioniert, mit der ich gearbeitet habe.

Jemand anderes empfiehlt dos2unixund ich empfehle es auch sehr. Ich gebe nur mehr Details.

Wenn installiert, fahren Sie mit dem nächsten Schritt fort. Wenn nicht bereits installiert, würde ich empfehlen, es über yumwie folgt zu installieren :

yum install dos2unix

Dann können Sie es wie folgt verwenden:

dos2unix fileIWantToRemoveWindowsReturnsFrom.txt

Wenn Sie ein Betriebssystem (wie OS X) verwenden, das nicht über den dos2unixBefehl verfügt, jedoch über einen Python-Interpreter (Version 2.5+), entspricht dieser Befehl dem folgenden dos2unixBefehl:

python -c "import sys; import fileinput; sys.stdout.writelines(line.replace('\r', '\n') for line in fileinput.input(mode='rU'))"

Dies behandelt sowohl benannte Dateien in der Befehlszeile als auch Pipes und Weiterleitungen wie dos2unix. Wenn Sie diese Zeile zu Ihrer ~ / .bashrc-Datei (oder einer entsprechenden Profildatei für andere Shells) hinzufügen:

alias dos2unix="python -c \"import sys; import fileinput; sys.stdout.writelines(line.replace('\r', '\n') for line in fileinput.input(mode='rU'))\""

... Wenn Sie sich das nächste Mal anmelden (oder source ~/.bashrcin der aktuellen Sitzung ausführen ), können Sie den dos2unixNamen in der Befehlszeile auf dieselbe Weise wie in den anderen Beispielen verwenden.

Hier ist das Ding,

%0dist das Wagenrücklaufzeichen. Damit es mit Unix kompatibel ist. Wir müssen den folgenden Befehl verwenden.

dos2unix fileName.extension fileName.extension

Versuchen Sie dies, um die dos-Datei in eine Unix-Datei zu konvertieren:

fromdos-Datei

Für UNIX ... Ich habe festgestellt, dass dos2unix Unicode-Header aus meiner UTF-8-Datei entfernt hat. Unter Git Bash (Windows) scheint das folgende Skript gut zu funktionieren. Es verwendet sed. Beachten Sie, dass nur Zeilenumbrüche an den Zeilenenden entfernt und Unicode-Header beibehalten werden.

#!/bin/bash

inOutFile="$1"
backupFile="${inOutFile}~"
mv --verbose "$inOutFile" "$backupFile"
sed -e 's/\015$//g' <"$backupFile" >"$inOutFile"

Wenn Sie eine X-Umgebung ausführen und einen geeigneten Editor (Visual Studio-Code) haben, würde ich der Empfehlung folgen:

Visual Studio-Code: Anzeigen von Zeilenenden

Gehen Sie einfach in die untere rechte Ecke Ihres Bildschirms. Der Visual Studio-Code zeigt Ihnen sowohl die Dateicodierung als auch die Konvention zum Zeilenende, gefolgt von der Datei. Mit einem einfachen Klick können Sie dies umschalten.

Verwenden Sie einfach visuellen Code als Ersatz für Notepad ++ in einer Linux-Umgebung, und schon kann es losgehen.

Entfernen \rauf jedem UNIX®-System:

Die meisten vorhandenen Lösungen in dieser Frage sind GNU-spezifisch und funktionieren unter OS X oder BSD nicht. Die folgenden Lösungen sollten auf vielen weiteren UNIX-Systemen und in jeder Shell von tcshbis shfunktionieren und dennoch auch unter GNU / Linux funktionieren.

Getestet unter OS X, OpenBSD und NetBSD in tcshund unter Debian GNU / Linux in bash.

Mit sed:

In tcshauf einem O X, der folgende sedkönnte Schnipsel verwendet wird zusammen mit printf, da weder sednoch echoGriff \rin der speziellen Art und Weise , wie das GNU tut:

sed `printf 's/\r$//g'` input > output

Mit tr:

Eine weitere Option ist tr:

tr -d '\r' < input > output

Unterschied zwischen sedund tr:

Es scheint, dass trdas Fehlen einer nachgestellten Newline in der Eingabedatei erhalten bleibt, während sedunter OS X und NetBSD (jedoch nicht unter OpenBSD oder GNU / Linux) eine nachgestellte Newline ganz am Ende der Datei eingefügt wird, selbst wenn die Eingabe fehlt nachlaufend \roder ganz \nam Ende der Datei.

Testen:

Hier sind einige Beispieltests, mit denen sichergestellt werden kann, dass dies auf Ihrem System funktioniert, indem Sie printfund verwenden hexdump -C. Alternativ kann od -cauch verwendet werden, wenn Ihr System fehlt hexdump:

% printf 'a\r\nb\r\nc' | hexdump -C
00000000  61 0d 0a 62 0d 0a 63                              |a..b..c|
00000007
% printf 'a\r\nb\r\nc' | ( sed `printf 's/\r$//g'` /dev/stdin > /dev/stdout ) | hexdump -C
00000000  61 0a 62 0a 63 0a                                 |a.b.c.|
00000006
% printf 'a\r\nb\r\nc' | ( tr -d '\r' < /dev/stdin > /dev/stdout ) | hexdump -C
00000000  61 0a 62 0a 63                                    |a.b.c|
00000005
% 

Ich habe Python dafür verwendet, hier mein Code;

end1='/home/.../file1.txt'
end2='/home/.../file2.txt'
with open(end1, "rb") as inf:
     with open(end2, "w") as fixed:
        for line in inf:
            line = line.replace("\n", "")
            line = line.replace("\r", "")
            fixed.write(line)

Obwohl es ein älterer Beitrag ist, bin ich kürzlich auf dasselbe Problem gestoßen. Da ich alle Dateien in / tmp / blah_dir / umbenennen musste, da jede Datei in diesem Verzeichnis das nachfolgende Zeichen "/ r" (mit "?" Am Ende der Datei) hatte, konnte ich mir nur eine Skriptmethode vorstellen.

Ich wollte die endgültige Datei mit demselben Namen speichern (ohne ein Zeichen zu verfolgen). Bei sed war das Problem der Ausgabedateiname, den ich brauchte, um etwas anderes zu erwähnen (was ich nicht wollte).

Ich habe andere hier vorgeschlagene Optionen ausprobiert (aufgrund einiger Einschränkungen nicht als dos2unix angesehen), aber nicht funktioniert.

Ich habe es endlich mit "awk" versucht, was funktioniert hat, wo ich "\ r" als Trennzeichen verwendet habe und den ersten Teil genommen habe :

Trick ist:

echo ${filename}|awk -F"\r" '{print $1}'

Unter dem Skript-Snippet, das ich verwendet habe (wobei alle Dateien "\ r" als nachfolgendes Zeichen im Pfad / tmp / blah_dir / hatten), um mein Problem zu beheben:

cd /tmp/blah_dir/
for i in `ls`
  do
    mv   $i     $(echo $i | awk -F"\r" '{print $1}')
done

Hinweis: Dieses Beispiel ist nicht sehr genau, obwohl es meiner Arbeit nahe kommt (Erwähnung hier, um eine bessere Vorstellung davon zu geben, was ich getan habe)

Ich habe dieses Shell-Skript erstellt, um das Zeichen \ r zu entfernen. Es funktioniert in Solaris und Red Hat:

#!/bin/ksh

LOCALPATH=/Any_PATH

for File in `ls ${LOCALPATH}`
do
   ARCACT=${LOCALPATH}/${File}
   od -bc ${ARCACT}|sed -n 'p;n'|sed 's/015/012/g'|awk '{$1=""; print $0}'|sed 's/ /\\/g'|awk '{printf $0;}'>${ARCACT}.TMP
   printf "`cat ${ARCACT}.TMP`"|sed '/^$/d'>${ARCACT}
   rm ${ARCACT}.TMP
done

exit 0

Sie können dies einfach tun:

$ echo $(cat input) > output