如何将DOS/Windows换行符(CRLF)转换为Unix换行符(LF)

如何以编程方式(不使用vi)将DOS/Windows换行符转换为Unix换行符?

dos2unix和unix2dos命令在某些系统上不可用。如何使用sed、awk和tr等命令模拟它们?

当前回答

有趣的是，在Windows上的Git Bash中，sed ""已经做到了:

$ echo -e "abc\r" >tst.txt
$ file tst.txt
tst.txt: ASCII text, with CRLF line terminators
$ sed -i "" tst.txt
$ file tst.txt
tst.txt: ASCII text

我的猜测是，sed在从输入读取行时忽略它们，并且总是将Unix行结束符写入输出。

其他回答

在Bash 4.2及更新版本中，您可以使用类似这样的方法来剥离后面的CR，它只使用Bash内置:

if [[ "${str: -1}" == $'\r' ]]; then
    str="${str:: -1}"
fi

这对我很有效

tr "\r" "\n" < sampledata.csv > sampledata2.csv

有趣的是，在Windows上的Git Bash中，sed ""已经做到了:

$ echo -e "abc\r" >tst.txt
$ file tst.txt
tst.txt: ASCII text, with CRLF line terminators
$ sed -i "" tst.txt
$ file tst.txt
tst.txt: ASCII text

我的猜测是，sed在从输入读取行时忽略它们，并且总是将Unix行结束符写入输出。

这个问题可以用标准工具解决，但对于粗心的人来说，有很多陷阱，我建议您安装flip命令，这是20多年前由《zoo》的作者Rahul Dhesi编写的。它在转换文件格式方面做得很出色，例如，避免了二进制文件的无意破坏，如果您只是到处更改您看到的每个CRLF，这有点太容易了……

你可以使用AWK。将记录分隔符(RS)设置为匹配所有可能的换行符的正则表达式。并将输出记录分隔符(ORS)设置为unix样式的换行符。

awk 'BEGIN{RS="\r|\n|\r\n|\n\r";ORS="\n"}{print}' windows_or_macos.txt > unix.txt

推荐文章