2016年11月20日
摘要: 即日起开始spark源码阅读之旅,这个过程是相当痛苦的,也许有大量的看不懂,但是每天一个方法,一点点看,相信总归会有极大地提高的。那么下面开始: 创建sparkConf对象,那么究竟它干了什么了类,从代码层面,我们可以看到我们需要setMaster啊,setAppName啊,set blabla啊。 阅读全文
posted @ 2016-11-20 16:38 松伯 阅读(4274) 评论(2) 推荐(1) 编辑
摘要: 平时用于从生产环境hbase到导出数据到测试环境。 导入数据: 导出数据: 阅读全文
posted @ 2016-11-20 15:04 松伯 阅读(1606) 评论(0) 推荐(0) 编辑