笔记 by 车东

comm或diff时:需要注意Windows/Unix文本结尾的回车符问题

· 技术笔记|Tech Notes

📌 TLDR

用 comm / diff 对比文件前要注意换行符:Windows 是 \r\n、老 Mac 是 \r、Unix 是 \n,而回车不可见,混在一起结果就全错。文中的处理办法是 tr -d "\015" 去掉 0x0D,或先用 strings 只保留可显示字符。

Windows文件系统中的换行符是 \r\n
Apple的文件系统中的换行符是 \r
Unix的文件系统中的换行符是 \n

由于回车都是不可见的,所以comm和diff之前最好先将多个不同来源的文本用换行符处理一下,否则diff出来的结果会差距很大。比较方便的是用系统自带的一些命令行工具:tr(替换)和strings(只打印可显示字符) tr -d “\015” < A > B
strings A > B

参考文档:在unix上用的去掉windows文件中的换行符(0x0D)的shell

💬 历史评论

以下 4 条评论从旧版 Movable Type 博客迁移而来。 原始评论时间:2002–2016 年。

xLight · 2007-10-22 13:20

我求你一件事呗?

就是:求你别用FeedBurner的统计啦!

每次在Reader里面点击你的文章都gfw掉了,虽然很无奈,但是你怎么也要照顾一下我们吧


qinyf · 2007-10-23 01:12

/r /n应该是\r \n吧……


蓝色的信封 · 2007-10-23 21:31

“比较方面的时用系统自带的”

是否是错字,还是我理解不够?


pig345 · 2007-12-29 10:28

似乎一般的linux发行版里面带有dos2unix/mac2unix/unix2dos。