摘要: 大数据实时处理平台市场上产品众多,本文着重讨论spark与storm的比对,最后结合适用场景进行选型。 大数据实时处理平台市场上产品众多,本文着重讨论spark与storm的比对,最后结合适用场景进行选型。 一、spark与storm的比较 比较点 Storm Spark Streaming 实时计 阅读全文
posted @ 2017-11-17 15:53 信方 阅读(1504) 评论(0) 推荐(0) 编辑
摘要: 1. 到网站 http://idea.lanyus.com/ 获取注册码。 2.填入下面的license server: http://intellij.mandroid.cn/ http://idea.imsxm.com/ http://idea.iteblog.com/key.php 以上方法验 阅读全文
posted @ 2017-11-17 15:47 信方 阅读(187) 评论(0) 推荐(0) 编辑
摘要: CDH大数据平台实施经验总结2016(转载) 2016年负责实施了一个生产环境的大数据平台,用的CDH平台+docker容器的方式,过了快半年了,现在把总结发出来。 1. 平台规划注意事项 1.1 业务数据全部存储在datanode上面,所以datanode的存储空间必须足够大,且每个datanod 阅读全文
posted @ 2017-11-17 15:33 信方 阅读(1901) 评论(0) 推荐(0) 编辑