位置:海鸟网 > IT > linux/Unix >

文件行尾奇怪的^M及解决

  现象:

  按照《Unix shell 范例精解》试 sed 例子,用的是书自带光盘里的文件 datafile。但是运行命令(以两个数字结尾的行,将结尾两个数字 ab 替换为 ab.5 )

  > sed 's/[0-9][0-9]$/&.5/' datafile

  却没有输出,其中某一行最后数字是34,把上面 [0-9][0-9]$ 直接换成 34$ 依旧没有输出。 让人一度以为在这个 Ubuntu 上 $ 元字符不能用。但是这是绝对不可能的,这年头那个敢不支持 POSIX的正则表达式。

  继续尝试这个 $元字符,运行例子命令如下(结尾添加 **VACA**):

  > sed '/west/,/east/s/$/**VACA**/' datafile

  输出如下:

  **VACA**t NW Charles Main 3.0 .98 3 34

  **VACA** WE Sharon Gray 5.3 .97 5 23

  **VACA**t SW Lewis Dalsass 2.7 .8 2 18

  **VACA** SO Suan Chin 5.1 .95 4 15

  **VACA**t SE Patricia Hemenway 4.0 .7 4 17

  eastern EA TB Savage 4.4 .84 5 20

  northeast NE AM Main Jr. 5.1 .94 3 13

  north NO Margot Weber 4.5 .89 5 9

  central CT Ann Stephens 5.7 .94 5 13

  觉得 **VACA**t 后的那个 t 很可疑,难道是输出时的覆盖?因为没有替换这个地方阿,再试试

  > sed '/west/,/east/s/$/**VA**/' datafile

  输出如强烈地支持俺地怀疑,如下:

  **VA**est NW Charles Main 3.0 .98 3 34

  **VA**n WE Sharon Gray 5.3 .97 5 23

  **VA**est SW Lewis Dalsass 2.7 .8 2 18

  **VA**rn SO Suan Chin 5.1 .95 4 15

  **VA**ast SE Patricia Hemenway 4.0 .7 4 17

  eastern EA TB Savage 4.4 .84 5 20

  northeast NE AM Main Jr. 5.1 .94 3 13

  north NO Margot Weber 4.5 .89 5 9

  central CT Ann Stephens 5.7 .94 5 13

  于是来个重定向:

  >sed '/west/,/east/s/$/**VA**/' datafile > file

  > vim file

  显示每行尾部都多了一个 ^M,于是手动删除几个 ^M,使呈以下样子:

  northwest NW Charles Main 3.0 .98 3 34**VA** // 手动删除 ^M 以验证

  western WE Sharon Gray 5.3 .97 5 23**VA** // 同上

  southwest SW Lewis Dalsass 2.7 .8 2 18**VA** // 同上

  southern SO Suan Chin 5.1 .95 4 15^M**VA** // 保留 ^M 以对比

  southeast SE Patricia Hemenway 4.0 .7 4 17^M**VA** // 同上

  eastern EA TB Savage 4.4 .84 5 20^M

  northeast NE AM Main Jr. 5.1 .94 3 13^M

  north NO Margot Weber 4.5 .89 5 9^M

  central CT Ann Stephens 5.7 .94 5 13^M

  保存推出后 cat file1, 屏幕显示如下:

  northwest NW Charles Main 3.0 .98 3 34**VA**

  western WE Sharon Gray 5.3 .97 5 23**VA**

  southwest SW Lewis Dalsass 2.7 .8 2 18**VA**

  **VA**rn SO Suan Chin 5.1 .95 4 15

  **VA**ast SE Patricia Hemenway 4.0 .7 4 17

  eastern EA TB Savage 4.4 .84 5 20

  northeast NE AM Main Jr. 5.1 .94 3 13

  north NO Margot Weber 4.5 .89 5 9

  central CT Ann Stephens 5.7 .94 5 13

  证明猜测正确,只是这个 ^M 是什么东西呢?

  原因和解决方法:

  Google 之,得说法如下:

  Linux编辑器vim中删除行尾的^M

  有时候,在 Linux 中使用打开曾在 Windows 中编辑过的文件时,会在行尾看到 ^M 字符。看起来总是感觉很别扭。

  删除方法如下:

  在 Vim 的命令模式中输入 :%s/^M$//g 后,回车即会自动删除该文件中的所有 ^M 字符。

  注意: ^M 要用 Ctrl + v, Ctrl + m 来输入, 用键盘直接敲^和M是不行的! 后面的 $ 代表匹配行尾的内容,最后的 g 则表示每行中匹配到的内容都要置换--全局替换,否则只替换每行中匹配到的第一个。

  又脚本删除方法:

  cat file | col -b > file.1 // 这个可以去掉,但是生成文件里汉字变乱码

  sed -e 's/.$//g' file // 正确

  sed ‘s/^M//' file // 正确,但是 ^M = Ctrl + v, Ctrl + m

  附录:^M 另一个会出现的情况是文件在 windows 和 Linux 系统间通过 Ftp 传送。这是建议方法是:强行设定 ftp 方式为 ascii 方式就可以了啊! 当然也可以通过软件 dos2unix 搞定。// 我没尝试过哈。

  从现象到原因到解决方法如下。备份防遗忘。

  Tue,Jan/26/2010