摘要: 最近在客户现场接到一个任务,需要将全国所有省份的数据进行合并。目录是分层级的,首先是省份目录、然后地级市目录、最里面是区县目录。需要将每个目录中的数据进行合并,然后添加4列数据,并将某一个列的数据进行拆分和处理。总共将近3000张个Excel文件需要处理,如果手工处理的话,估计要搞一个星期才能搞完。为了在规定时间内完成任务,我通过编写python程序实现了这样的功能。 这里我简单分享下单个目录中Excel文件合并的模块。 阅读全文
posted @ 2021-05-27 17:34 业余砖家 阅读(634) 评论(0) 推荐(0) 编辑
摘要: 1. to_csv函数的参数 DataFrame.to_csv(path_or_buf=None, sep=',', na_rep='', float_format=None, columns=None, header=True, index=True, index_label=None, mode 阅读全文
posted @ 2021-05-27 14:33 业余砖家 阅读(8898) 评论(0) 推荐(0) 编辑
摘要: 对于CSV及txt后缀的文本文件,分别使用pandas模块中的read_csv函数和read_table函数 文件类型 函数名称 CSV read_csv() txt read_table() 1. read_table函数的参数 read_table(filepath_or_buffer , se 阅读全文
posted @ 2021-05-27 14:26 业余砖家 阅读(3562) 评论(0) 推荐(0) 编辑