linux 中 M-BM- 字符的处理

 

001、测试数据

[root@PC1 test]# ls
aa.txt
[root@PC1 test]# cat aa.txt
Qinghai
Qinghai 
shandong
Shanghai
shanxi
[root@PC1 test]# cat -A aa.txt
Qinghai$
QinghaiM-BM- $        ## 异常字符
shandong$
Shanghai$
shanxi$

 

002、特殊字符的处理

[root@PC1 test]# ls
aa.txt
[root@PC1 test]# cat -A aa.txt
Qinghai$
QinghaiM-BM- $
shandong$
Shanghai$
shanxi$
[root@PC1 test]# sed 's/\xc2\xa0/ /g' aa.txt | cat -A    ## 特殊字符处理
Qinghai$
Qinghai $
shandong$
Shanghai$
shanxi$                                                  ## 删除末尾的空格
[root@PC1 test]# sed 's/\xc2\xa0/ /g' aa.txt | sed 's/\s\+$//' | cat -A
Qinghai$
Qinghai$
shandong$
Shanghai$
shanxi$

 

参考：https://blog.csdn.net/qfycc92/article/details/50234727/