不同操作系统对文本文件“行结束符”的不同定义
\n是换行，英文是LineFeed，ASCII码是0xA。
\r是回车，英文是Carriage Return ,ASCII码是0xD。
计算机还没有出现之前，有一种叫做电传打字机（Teletype Model33）的玩意，每秒钟可以打10个字符。但是它有一个问题，就是打完一行换行的时候，要用去0.2秒，正好可以打两个字符。要是在这0.2秒里面，又有新的字符传过来，那么这个字符将丢失。
于是，研制人员想了个办法解决这个问题，就是在每行后面加两个表示结束的字符。一个叫做“回车”，告诉打字机把打印头定位在左边界；另一个叫做“换行”，告诉打字机把纸向下移一行。
这就是“换行”和“回车”的来历，从它们的英语名字上也可以看出一二。
后来，计算机发明了，这两个概念也就被般到了计算机上。那时，存储器很贵，一些科学家认为在每行结尾加两个字符太浪费了，加一个就可以。于是，就出现了分歧。
Unix系统里，每行结尾只有“<换行>”，即“\n”；
Windows系统里面，每行结尾是“<换行><回车>”，即“\n\r”；
Mac系统里，每行结尾是“<回车>”，即“\r”。
一个直接后果是，Unix/Mac系统下的文件在Windows里打开的话，所有文字会变成一行；而Windows里的文件在Unix/Mac下打开的话，在每行的结尾可能会多出一个^M符号。
这是根源。
Linux下使用Windows文件
如果在Windows下面编辑的脚本文件，如shell脚本文件，在Linux下面执行失败，会提示多一个^M符号，用VIM打开也会发现增加这个符号。
(注意输入这个^M,这个不是shift+^再加上M,应该是ctrl+v加上ctrl+m)
解决办法：
1. 用VIM打开，设置编码为unix
：set fileformat=unix
然后，保存，结尾unix格式。
2. 使用VIM的替换功能，替换行末的\r符号即可
:%s/^M//g
3. 使用sed来进行批量处理
sed ’s/^M//’ filename > tmp_filename
4. 批量处理（推荐使用）
sudo apt-get install dos2unix
find . * | xargs dos2unix （对当前目录下面的所有文件执行转换格式的命令）
文件编码转换工具enca：
enca -L zh_CN -x UTF-8 file 将文件编码转换为"UTF-8"编码
enca -L zh_CN -x UTF-8 < file1 > file2 假如不想覆盖原文件可以这样
阅读(1706) | 评论(0) | 转发(0) |
