Supprimer un retour chariot dans Unix

Quelle est la façon la plus simple de supprimer tous les retours chariot \r à partir d'un fichier sous Unix?

InformationsquelleAutor Aldur | 2009-04-28
  1. 243

    Je vais supposer que vous entendez des retours chariot (CR, "\r", 0x0d) à la se termine de lignes plutôt que de simplement aveuglément dans un fichier (vous pouvez les avoir dans le milieu de cordes pour tout ce que je sais). L'utilisation de ce fichier de test avec un CR à la fin de la première ligne:

    $ cat infile
hello
goodbye

$ cat infile | od -c
0000000   h   e   l   l   o  \r  \n   g   o   o   d   b   y   e  \n
0000017

    dos2unix est le chemin à parcourir s'il est installé sur votre système:

    $ cat infile | dos2unix -U | od -c
0000000   h   e   l   l   o  \n   g   o   o   d   b   y   e  \n
0000016

    Si pour une raison quelconque dos2unix n'est pas disponible pour vous, alors sed va le faire:

    $ cat infile | sed 's/\r$//' | od -c
0000000   h   e   l   l   o  \n   g   o   o   d   b   y   e  \n
0000016

    Si pour une raison quelconque sed n'est pas disponible pour vous, alors ed va le faire, d'une manière compliquée:

    $ echo ',s/\r\n/\n/
> w !cat
> Q' | ed infile 2>/dev/null | od -c
0000000   h   e   l   l   o  \n   g   o   o   d   b   y   e  \n
0000016

    Si vous n'avez pas tout de ces outils est installé sur votre boîte, vous avez plus de problèmes que d'essayer de convertir les fichiers 🙂

    • \r ne fonctionne qu'avec GNU sed, sinon vous pouvez le faire: sed `echo "s/\r//"`
    • Ni sed ni echo reconnaître \r sur MacOs. Dans ce cas seulement printf "\r" semble fonctionner.
    • Ne serait pas le sed exemple pas comme prévu, étant donné que le match expression comprend les \n, qui est pas partie de la chaîne correspondant à l'encontre? En d'autres termes: ne devrait-il pas être sed 's/\r$//'?
    • Pour des précisions sur @steve commentaire: Sur un Mac, utilisez la commande suivante: sed "s/$(printf '\r')\$//"
    • Pour corriger problème sur mac, vous pouvez également préfixe unique-devis sed chaîne avec $ comme suit: sed $'s@\r@@g' |od -c (mais si vous devez le remplacer avec \n vous auriez besoin de s'en échapper)
    • vous êtes correct. J'ai testé sur ma machine linux et au-dessus de la sed exemple ne fonctionne pas. Il doit être: cat pp/index.php | sed -e 's/\r$//' | od -c . @paxdiablo, mettez-vous à jour de votre réponse à la bonne sed expression?
    • Je ne suis pas sûr à 100%, mais pour OS X, à l'aide de CTRL-V + CTRL-M en place de \r ressemble à cela pourrait fonctionner.
    • Comment l'appliquer à un répertoire complet: /questions/11929461/dos2unix-command-on-entire-directory
    • Pour supprimer un retour chariot à partir de tous les fichiers dans un dossier de manière récursive: find . -type f -exec sed -i 's/\r$//' {} \;
    • Certaines versions de dos2unix supprimer unicode en-têtes: attention.
    • Méfiez - vous- dos2unix en fait, écrase le fichier donné lorsqu'il est utilisé avec un seul argument, contrairement à la plupart des commandes Linux. Afin de l'utiliser de manière non destructive dans un pipeline, le fichier que vous voulez convertir que stdin, comme illustré ici.

    InformationsquelleAutor paxdiablo
  2. 216
    tr -d '\r' < infile > outfile

    Voir tr(1)

    • Pas très grande: 1. ne fonctionne pas en place, 2. peut remplacer \r également pas à EOL (qui peut ou peut ne pas être ce que vous voulez...).
    • 1. La plupart des unixy outils de travail de cette façon, et c'est généralement le moyen le plus sûr pour aller les choses, car si vous vis vous toujours l'original. 2. La question est de supprimer les retours à la ligne, de ne pas convertir les fins de ligne. Mais il ya beaucoup d'autres réponses qui pourraient vous servir au mieux.
    • Si votre tr ne prend pas en charge la \r évasion, essayez '\015' ou peut-être un littéral '^M' (dans de nombreuses coquilles sur de nombreux terminaux, ctrl-V ctrl-M va produire un littéral ctrl-M de caractères).
    • C'est ce qui fonctionne sur AIX.
    • Alors, comment fait-on le changer quand vous voulez outfile = infile?
    InformationsquelleAutor Henrik Gustafsson
  3. 36

    De La Vieille École:

    tr -d '\r' < filewithcarriagereturns > filewithoutcarriagereturns
    • Il suffit de ne pas utiliser le même fichier que la destination...
    InformationsquelleAutor plinth
  4. 27

    Il y a un utilitaire appelé dos2unix qui existe sur de nombreux systèmes, et peut être facilement installé sur la plupart des.

    • Il est parfois aussi appelé fromdos (et todos).
    InformationsquelleAutor Emil H
  5. 25

    La façon la plus simple sur Linux est, à mon humble avis,

    sed -i 's/\r$//g' <filename>

    La forte citations autour de la substitution de l'opérateur 's/\r//' sont essentiel. Sans eux, le shell va interpréter \r comme une évasion+r et de le réduire à un simple r, et de supprimer toutes les minuscules r. C'est pourquoi la réponse donnée ci-dessus en 2009 par Rob ne fonctionne pas.

    Et en ajoutant le /g modificateur assure que même plusieurs \r seront supprimés, et pas seulement le premier.

    InformationsquelleAutor wfjm
  6. 7

    sed -i s/\r//<filename> ou somesuch; voir man sed ou la richesse des informations disponibles sur le web concernant l'utilisation de sed.

    Une chose à noter est la signification précise de "retour chariot" dans le ci-dessus; si vous avez vraiment dire le seul caractère de contrôle retour chariot", puis le motif ci-dessus est correcte. Si vous signifiait, plus généralement, CRLF (retour chariot et un saut de ligne, qui est de savoir comment les sauts de ligne sont mis en œuvre sous Windows), alors vous voudrez probablement pour remplacer \r\n à la place. Nu sauts de ligne (newline) sous Linux/Unix sont \n.

    • Je suis en train d'utiliser --> sed 's/\r\n/=/' countryNew.txt > demo.txt ce qui ne fonctionne pas. "tigre", "Lion".
    • sommes-nous en prendre qu'à dire que vous êtes sur un mac? J'ai remarqué Darwin sed semble avoir différentes commandes et les fonctionnalités par défaut de la plupart des versions de Linux...
    • Pour info, le s/\r// ne semble pas supprimer les retours chariot sur OS X, il semble supprimer littérale r caractères à la place. Je ne sais pas pourquoi c'est encore. Peut-être qu'il a quelque chose à voir avec la façon dont la chaîne est cité? Comme solution de contournement, à l'aide de CTRL-V + CTRL-M en place de \r semble fonctionner.
    InformationsquelleAutor Rob
  7. 6

    Si vous êtes un utilisateur de Vi, vous pouvez ouvrir le fichier et de supprimer le retour chariot avec:

    :%s/\r//g

    ou avec 

    :1,$ s/^M//

    Notez que vous devez taper ^M en appuyant sur ctrl-v, puis ctrl-m.

    • Pas génial: si le fichier a CR sur chaque ligne (c'est à dire un bon fichier DOS), vim va le charger avec filetype=dos, et ne pas montrer ^M-s à tous. Se déplacer c'est une tonne de touches, ce qui n'est pas ce que vim est fait pour ;). Je venais de passer pour sed -i, puis `-e 's/\r$//g' pour limiter le déplacement de la CRs à EOL.
    InformationsquelleAutor Alex Giotis
  8. 6

    Une fois de plus une solution... Car il y a toujours un de plus:

    perl -i -pe 's/\r//' filename

    C'est agréable parce que c'est en place et fonctionne dans toutes les saveurs de unix/linux, j'ai travaillé avec.

    InformationsquelleAutor Allan Cano
  9. 3

    Quelqu'un d'autre vous recommandons de dos2unix et je le recommande vivement ainsi. Je suis juste fournir plus de détails.

    S'il est installé, passez à l'étape suivante. Si ce n'est déjà installé, je vous recommande de l'installer via yum comme:

    yum install dos2unix

    Alors vous pouvez l'utiliser comme:

    dos2unix fileIWantToRemoveWindowsReturnsFrom.txt
    InformationsquelleAutor James Oravec
  10. 2

    Voici la chose,

    %0d est le caractère de retour chariot. Pour le rendre compatabile avec Unix. Nous avons besoin d'utiliser la commande ci-dessous.

    dos2unix fileName.extension fileName.extension

    InformationsquelleAutor Sireesh Yarlagadda
  11. 1

    essayez ceci pour convertir fichier dos vers unix fichier:

    fromdos fichier

    InformationsquelleAutor hawston
  12. 1

    Si vous utilisez un système d'exploitation (comme OS X) qui n'ont pas la dos2unix de commande, mais ne disposent d'un interpréteur Python (version 2.5+), cette commande est équivalente à la dos2unix commande:

    python -c "import sys; import fileinput; sys.stdout.writelines(line.replace('\r', '\n') for line in fileinput.input(mode='rU'))"

    Ce gère à la fois les fichiers nommés sur la ligne de commande ainsi que les tubes et redirections, tout comme dos2unix. Si vous ajoutez cette ligne à votre ~/.bashrc fichier (ou l'équivalent fichier de profil pour d'autres shells):

    alias dos2unix="python -c \"import sys; import fileinput; sys.stdout.writelines(line.replace('\r', '\n') for line in fileinput.input(mode='rU'))\""

    ... la prochaine fois que vous vous connectez (ou exécuter source ~/.bashrc dans la session en cours), vous serez en mesure d'utiliser le dos2unix nom sur la ligne de commande de la même manière que dans les autres exemples.

    InformationsquelleAutor Chris Johnson
  13. 1

    Pour UNIX... j'ai remarqué dos2unix retiré Unicode en-têtes de mes fichiers UTF-8. Sous git bash (Windows), le script suivant semble fonctionner bien. Il utilise sed. Remarque il ne supprime transport-retour à la fin des lignes, et préserve Unicode en-têtes.

    #!/bin/bash

inOutFile="$1"
backupFile="${inOutFile}~"
mv --verbose "$inOutFile" "$backupFile"
sed -e 's/5$//g' <"$backupFile" >"$inOutFile"
    InformationsquelleAutor LexieHankins
  14. 1

    Si vous exécutez un X à l'environnement et d'avoir un bon éditeur de code de visual studio), alors je voudrais suivre le reccomendation:

    Le Code de Visual Studio: Comment faire pour afficher les fins de ligne

    Juste aller dans le coin inférieur droit de votre écran, le code de visual studio va vous montrer à la fois l'encodage et à la fin de la ligne convention suivie par le fichier, un juste avec un simple clic, vous pouvez passer autour de.

    Suffit d'utiliser le code visuel que votre remplacement pour notepad++ dans un environnement linux et vous êtes prêt à aller.

    InformationsquelleAutor 99Sono
  15. 0

    J'ai utilisé python pour elle, voici mon code;

    end1='/home/.../file1.txt'
end2='/home/.../file2.txt'
with open(end1, "rb") as inf:
     with open(end2, "w") as fixed:
        for line in inf:
            line = line.replace("\n", "")
            line = line.replace("\r", "")
            fixed.write(line)
    InformationsquelleAutor Raphael
  16. 0

    Si c'est un vieux poste, récemment, j'ai retrouvé avec le même problème. Comme j'avais tous les fichiers à renommer à l'intérieur de /tmp/blah_dir/chaque fois qu'un fichier dans ce répertoire a "/r" de fuite de caractères ( montrant des "?" à la fin du fichier), et le faire façon script a été seulement je pouvais penser.

    Je voulais enregistrer des fichiers avec le même nom (sans fuite n'importe quel caractère).
    Le sed, le problème était le nom de fichier de sortie qui on avait besoin de moi pour parler de quelque chose d'autre ( dont je ne voulais pas).

    J'ai essayé d'autres options comme suggéré ici (pas considérés comme dos2unix en raison de certaines limitations), mais n'a pas fonctionné.

    J'ai essayé avec "awk", enfin, qui a travaillé pour lequel j'ai utilisé "\r" comme délimiteur et pris la première partie:

    truc, c'est:

    echo ${filename}|awk -F"\r" '{print $1}'

    Ci-dessous extrait de script que j'ai utilisé ( où j'ai eu tous les fichier "\r", comme le suiveur de caractères dans le chemin /tmp/blah_dir/) pour résoudre mon problème:

    cd /tmp/blah_dir/
for i in `ls`
  do
    mv   $i     $(echo $i | awk -F"\r" '{print $1}')
done

    Remarque: Cet exemple n'est pas très exacte, si proche de ce que j'ai travaillé (Mentionner ici juste pour donner la meilleure idée de ce que j'ai fait)

    InformationsquelleAutor Ashish K Srivastava
  17. -1

    vous pouvez simplement faire ceci :

    $ echo $(cat input) > output
    • Je ne sais pas pourquoi quelqu'un a donné '-1'. C'est une très bonne réponse (et la seule qui a fonctionné pour moi).
    • Oh, désolé, c'était moi. Attendez, regardez, il n'a pas vraiment de travail pour '\r'!
    • C'est une terrible idée! Complètement d'épaves de tous les espacer dans le fichier et laisse tout le contenu du fichier objet d'une interprétation par le shell. Essayer avec un fichier qui contient une ligne a * b...
    InformationsquelleAutor mma7