pandas一次读取多个csv文件并合成一个csv文件

1. 工作中经常会遇到需要将多个csv文件合并在一起保存成一个csv文件的情况,pandas中有一个concat函数就可以把多个csv文件合并在一起.

示例代码: 

import os
import glob  

# 读取多个csv文件
    all_csv = glob.glob(os.path.join(csv_dir,'server_*'))
    all_data_frames = []
    for csv in all_csv:
        data_frame = pd.read_csv(csv,names=['num1','num2','num3','num4','num5'])  # 添加列标题
        data_frame1 = data_frame.dropna(how='any')   # 去掉NAN值
        all_data_frames.append(data_frame1)
    data_frame_concat = pd.concat(all_data_frames,axis=0,ignore_index=True) # axis = 0 表示数据垂直合并,等于1表示并排合并.
    data_frame_concat.to_csv('server_csvfile.csv',index=False,header=None)
    print('合并完成!')

2. csv文件中没有空值的情况下

import os
import glob  

  all_csv = glob.glob(os.path.join(csv_dir,'sale_*'))
    all_data_frames = []
    for csv in all_csv:
        data_frame = pd.read_csv(csv)  
        all_data_frames.append(data_frame)
    data_frame_concat = pd.concat(all_data_frames,axis=0,ignore_index=True)
    data_frame_concat.to_csv('server_csvfile.csv',index=False)
    print('合并完成!')