摘要：
Spark 集群工作原理 4台机器，1-Spark集群的客户端Driver 2-Master(master节点执行命令的话，久而久之会对磁盘性能产生影响，单独抽出集群客户端节点执行命令是为了让磁盘io的交互不要走master节点) 3-Worker1 4-Worker2 1.在Spark集群客户端提 阅读全文
随笔档案-2018年02月
AngularJs自学心得
2018-02-24 15:18 by helloworld小渣渣, 667 阅读, 收藏,
摘要：
1.angularjs的SEO问题解决方案 我的前端用到angularjs，服务器用到nginx。 大体流程： nginx服务器检测到爬虫访问，跳转到专门的url，此url是angularjs已经渲染过后的页面。非常的简单。 a).首先是angularjs的渲染问题 angular添加一个模块‘se 阅读全文
spark wordcount笔记
2018-02-23 18:09 by helloworld小渣渣, 915 阅读, 收藏,
摘要：
环境： JDK1.8 scala-2.10.4 spark-1.6.0 hadoop-2.7.3 CentOS-7-x86_64-DVD-1511 3台 master hostname hadoop1 slave hostname hadoop2 hadoop3 1.使用scala编写spark w 阅读全文
浙公网安备 33010602011771号