2016年7月19日

Java设计模式—责任链模式

摘要: 责任链模式的定义: 使多个对象都有机会处理请求,从而避免了请求的发送者和接受者之间的耦合关系。将这些对象连成一条链,并沿着这条链传递该请求,直到有对象处理它为止。 责任链模式的重点是在“链”上,由一条链去处理相似的请求在链中决定谁来处理这个请求,并返回相应的结果。... 阅读全文

posted @ 2016-07-19 21:45 岚之山 阅读(147) 评论(0) 推荐(0) 编辑

Spark应用(app jar)发布到Hadoop集群的过程

摘要: 记录了Spark,Hadoop集群的开启,关闭,以及Spark应用提交到Hadoop集群的过程,通过web端监控运行状态。1.绝对路径开启集群(每次集群重启,默认配置的hadoop集群中tmp文件被清空所以需要重新format) 我的集群安装位置是/opt/hadoop下,可以根据... 阅读全文

posted @ 2016-07-19 16:13 岚之山 阅读(260) 评论(0) 推荐(0) 编辑

Ubuntu16.04安装Hadoop2.6+Spark1.6+开发实例

摘要: Ubuntu16.04安装Hadoop2.6+Spark1.6,并安装python开发工具Jupyter notebook,通过pyspark测试一个实例,調通整个Spark+hadoop伪分布式开发环境。主要内容:配置root用户,配置Hadoop,Spark环境变量,Hadoo... 阅读全文

posted @ 2016-07-19 13:27 岚之山 阅读(220) 评论(0) 推荐(0) 编辑

Java设计模式—策略模式

摘要: 1、策略模式(Strategy Pattern)是一种比较简单的模式,也叫做政策模式(PolicyPattern)。 定义如下: Define a family of algorithms,encapsulate each one,and make them inter... 阅读全文

posted @ 2016-07-19 10:05 岚之山 阅读(279) 评论(0) 推荐(0) 编辑

导航