10 2024 档案

10.31
摘要：尽管 Spark 相对于 Hadoop 而言具有较大优势，但 Spark 并不能完全替代 Hadoop，Spark 主要用于替代Hadoop中的 MapReduce 计算模型。存储依然可以使用 HDFS，但是中间结果可以存放在内存中；调度可以使用 Spark 内置的，也可以使用更成熟的调度系统 YA 阅读全文
posted @ 2024-10-31 16:50 晨观夕 阅读(16) 评论(0) 推荐(0) 编辑
10.30
摘要：现在已经是校团委新媒体中心副主席 马上申请校级优秀学生干部 阅读全文
posted @ 2024-10-30 16:49 晨观夕 阅读(11) 评论(0) 推荐(0) 编辑
10.29
摘要：9.9 pyspark是一个基于Python的Spark编程接口，可以用于大规模数据处理、机器学习和图形处理等各种场景。Spark是一个开源的大数据处理框架，它提供了一种高效的分布式计算方式。pyspark使得Python程序员可以轻松地利用Spark的功能，开发出分布式的数据处理程序。 pyspa 阅读全文
posted @ 2024-10-29 16:48 晨观夕 阅读(22) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示