摘要: 工作了两年多了,一直没写过总结。我想,是该写写总结了,看看最近的收获和教训。 我从事大数据开发,是始于2015年,接触的技术也比较有限,从MapReduce开始学起,到HDFS和Hadoop shell命令,到Spark、Hive、Hbase,Sqoop,也算基本入门了,期间还部署了Hadoop集群 阅读全文
posted @ 2017-01-15 16:14 骁枫 阅读(261) 评论(0) 推荐(0) 编辑
摘要: 1、本次Hadoop源码阅读环境使用的阅读工具是idea,Hadoop版本是2.7.3。需要安装的工具包括idea、jdk、maven、protobuf等 2、jdk,使用的版本是1.8版,在jdk官网下载jdk-8u111-macosx-x64.dmg,点击安装,一路next。 3、idea安装, 阅读全文
posted @ 2017-01-15 15:22 骁枫 阅读(3168) 评论(0) 推荐(0) 编辑