Loading

用Python实现合并多个CSV文件

文件数据量很大(10w+),如手工打开复制粘贴到一个文件,比较费时!因此使用Python脚本自动化实现。

#!usr/bin/python
# -*- coding: utf-8 -*-

本机是2.*版本的python 所以要加上面的注释

import os
import glob
import pandas as pd

需要先下载各模块
python -m pip install wheel python -m pip install pandas

os.chdir("E:/alram/")
extension = 'csv'
all_filenames = [i for i in glob.glob('*.{}'.format(extension))]
#combine all files in the list
combined_csv = pd.concat([pd.read_csv(f,low_memory=False) for f in all_filenames ])
#export to csv
combined_csv.to_csv( "ALARM-20220604.csv", index=False)
posted @ 2022-06-10 11:16  梧桐树211  阅读(978)  评论(0编辑  收藏  举报