摘要: 执行第一个spark程序 普通模式提交任务: 该算法是利用蒙特·卡罗算法求圆周率PI,通过计算机模拟大量的随机数,最终会计算出比较精确的π。 高可用模式提交任务: 在高可用模式下,因为涉及到多个Master,所以对于应用程序的提交就有了一点变化,因为应用程序需要知道当前的Master的IP地址和端口 阅读全文
posted @ 2018-07-19 15:00 ji丶 阅读(504) 评论(0) 推荐(0) 编辑
摘要: Spark概述 什么是Spark (官网:http://spark.apache.org) Spark是一种快速、通用、可扩展的大数据分析引擎,2009年诞生于加州大学伯克利分校AMPLab,2010年开源,2013年6月成为Apache孵化项目,2014年2月成为Apache顶级项目。目前,Spa 阅读全文
posted @ 2018-07-19 14:45 ji丶 阅读(704) 评论(0) 推荐(0) 编辑