comm或diff时:需要注意Windows/Unix文本结尾的回车符问题
📌 TLDR
用 comm / diff 对比文件前要注意换行符:Windows 是 \r\n、老 Mac 是 \r、Unix 是 \n,而回车不可见,混在一起结果就全错。文中的处理办法是 tr -d "\015" 去掉 0x0D,或先用 strings 只保留可显示字符。
Windows文件系统中的换行符是 \r\n
Apple的文件系统中的换行符是 \r
Unix的文件系统中的换行符是 \n
由于回车都是不可见的,所以comm和diff之前最好先将多个不同来源的文本用换行符处理一下,否则diff出来的结果会差距很大。比较方便的是用系统自带的一些命令行工具:tr(替换)和strings(只打印可显示字符)
tr -d “\015” < A > B
strings A > B
参考文档:在unix上用的去掉windows文件中的换行符(0x0D)的shell
💬 历史评论
以下 4 条评论从旧版 Movable Type 博客迁移而来。 原始评论时间:2002–2016 年。
xLight · 2007-10-22 13:20
我求你一件事呗?
就是:求你别用FeedBurner的统计啦!
每次在Reader里面点击你的文章都gfw掉了,虽然很无奈,但是你怎么也要照顾一下我们吧
qinyf · 2007-10-23 01:12
/r /n应该是\r \n吧……
蓝色的信封 · 2007-10-23 21:31
“比较方面的时用系统自带的”
是否是错字,还是我理解不够?
pig345 · 2007-12-29 10:28
似乎一般的linux发行版里面带有dos2unix/mac2unix/unix2dos。