摘要： 方法一、使用awk加判断命令进行去重awk '!x[$0]++' file #注意awk后跟的命令是单引号，而非双引号，否则会认为是字符串上面的意思是首先创建一个 map 叫 x然后用当前行的全文 $0 作为 map 的 key，到 map 中查找相应的 value如果没找到，则整个表达式的值为真， 阅读全文

摘要： 函数语法: pd.merge(left, right, how="inner, on=None, left_on=None, right_on=None, left_index=False, right_index=False, sort=True) 参数解释: left - 数据顿对象。 righ 阅读全文