02 2017 档案

使用阿里云的Maven仓库加速Spark编译过程
摘要：前言 在国内编译Spark项目需要从Maven源下载很多依赖包，官方源在国内大环境下的下载速度大家都懂得，那个煎熬啊，简直是浪费生命。 如果你的下载速度很快，你现在就可以无视这篇文章了。 阿里云给国内开发者提供了一个非常的良心的服务：提供了一个国内Maven镜像，可以让我们拜托这种煎熬。 地址信息 阅读全文
posted @ 2017-02-17 08:22 StanZhai 阅读(4217) 评论(3) 推荐(4) 编辑
使用sbt编译Spark子项目
摘要：前言 最近为了解决Spark2.1的Bug，对Spark的源码做了不少修改，需要对修改的代码做编译测试，如果编译整个Spark项目快的话，也得半小时左右，所以基本上是改了哪个子项目就单独对那个项目编译打包。 Spark官方已经给出了如何使用mvn单独编译子项目的方法： 使用mvn单独编译子项目是节约 阅读全文
posted @ 2017-02-15 18:26 StanZhai 阅读(2117) 评论(0) 推荐(1) 编辑
【福利】成为专业程序员路上用到的各种优秀资料、神器及框架
摘要：好东西不是随便收集下，发篇博文，骗些点赞的！积累了5年多的东西，是时候放出来跟大家见见面了。 或许有的园友在14年的时候收藏过我的一篇“工欲善其事、必先利其器”的博文，时隔3年，已经做了N多更新，那篇文章也已被我删除，迁移至GitHub，重新进行管理。 这篇文章，大家可以推荐、收藏，让更多的人在园内 阅读全文
posted @ 2017-02-09 09:22 StanZhai 阅读(23182) 评论(80) 推荐(211) 编辑

点击右上角即可分享
微信分享提示