2017年11月16日
linux实现文件的去重【转】
摘要： (1)两个文件的交集，并集 1. 取出两个文件的并集(重复的行只保留一份) cat file1 file2 | sort | uniq > file3 2. 取出两个文件的交集(只留下同时存在于两个文件中的文件) cat file1 file2 | sort | uniq -d > file3 3. 阅读全文
posted @ 2017-11-16 17:51 大数据技术宅 阅读(12223) 评论(1) 推荐(2) 编辑