spark sql导出数据为excel文件和csv文件
一、利用to_csv函数导出数据为csv文件:
df = spark.sql('''
select * from table;''')
df.toPandas().to_csv('table.csv', index=False)
其中:index=False参数表示在保存时不包括行索引。
二、利用to_excel函数导出数据为excel文件:
df = spark.sql('''
select * from table;''')
df.toPandas().to_excel('table.xlsx', index=False, float_format="%g")
其中:index=False参数表示在保存时不包括行索引。
三、to_csv函数和to_excel函数的区别:
to_csv函数在小数点最后一位为0时,会省略这些0;而to_excel不会
【推荐】国内首个AI IDE,深度理解中文开发场景,立即下载体验Trae
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 【自荐】一款简洁、开源的在线白板工具 Drawnix
· 没有Manus邀请码?试试免邀请码的MGX或者开源的OpenManus吧
· 无需6万激活码!GitHub神秘组织3小时极速复刻Manus,手把手教你使用OpenManus搭建本
· C#/.NET/.NET Core优秀项目和框架2025年2月简报
· DeepSeek在M芯片Mac上本地化部署