spark-sql导出数据为csv
摘要:在spark-sql中进行数据分析之后,对数据进行导出,会被导出到hdfs 首先进入spark本地模式 /export/server/spark/bin/spark-shell 数据存储到dataframe val df = spark.sql("SELECT * FROM table_name W
阅读全文
posted @
2023-03-06 18:45
跨越&尘世
阅读(1139)
推荐(0) 编辑
阅读笔记——《大型网站技术架构:核心原理与技术分析》可用性、可伸缩性、可扩展性
摘要:在制作软件的过程中,引入软甲架构的概念能够很大程度上提高软件质量。今天阅读了李智慧主编的《大型网站技术架构:核心原理与技术分析》部分内容,从软件的高可用性、可伸缩性和可扩展性分享我的读书心得。 一、可用性 可用性一般指的是网站的访问特性,在大型网站架构中,一旦网站出现故障,大量用户将无法访问网站,造
阅读全文
posted @
2023-03-02 19:31
跨越&尘世
阅读(75)
推荐(0) 编辑