摘要: http://www.cnblogs.com/jerrylead/archive/2011/03/05/1971867.html 【转载时请注明来源】:http://www.cnblogs.com/jerrylead JerryLead 2011年2月27日 作为一个机器学习初学者,认识有限,表述... 阅读全文
posted @ 2014-04-21 18:24 Django's blog 阅读(251) 评论(0) 推荐(0) 编辑
摘要: http://cn.soulmachine.me//blog/20130617/环境:CentOS 6.4, Hadoop 1.1.2, JDK 1.7, Spark 0.7.2, Scala 2.9.3折腾了几天,终于把Spark 集群安装成功了,其实比hadoop要简单很多,由于网上搜索到的博客... 阅读全文
posted @ 2014-04-21 18:21 Django's blog 阅读(519) 评论(0) 推荐(0) 编辑
摘要: http://www.cnblogs.com/jerrylead/archive/2012/08/13/2636149.htmlHadoop vs Spark性能对比基于Spark-0.4和Hadoop-0.20.21. Kmeans数据:自己产生的三维数据,分别围绕正方形的8个顶点{0, 0, 0... 阅读全文
posted @ 2014-04-21 13:30 Django's blog 阅读(888) 评论(0) 推荐(0) 编辑
摘要: http://blog.csdn.net/whaoxysh/article/details/17755555虚拟机安装我安装的虚拟机版本是VMware Workstation 8.04,自己电脑上安装的有的话直接在虚拟机安装Linux操作系统,没有的话这里有我的一个百度云网盘虚拟机安装共享文件htt... 阅读全文
posted @ 2014-04-21 12:25 Django's blog 阅读(1374) 评论(0) 推荐(0) 编辑
摘要: 转:http://blog.csdn.net/pelick/article/details/9888311Spark概述Spark是一种与 Hadoop 相似的开源集群计算环境,在性能和迭代计算上很有看点,现在是Apache孵化的顶级项目吧。Spark 由加州大学伯克利分校 AMP 实验室(Algo... 阅读全文
posted @ 2014-04-21 12:19 Django's blog 阅读(359) 评论(0) 推荐(0) 编辑
摘要: http://blog.csdn.net/pelick/article/details/11964291Shark简介Shark即Hive on Spark,本质上是通过Hive的HQL解析,把HQL翻译成Spark上的RDD操作,然后通过Hive的metadata获取数据库里的表信息,实际HDFS... 阅读全文
posted @ 2014-04-21 12:17 Django's blog 阅读(581) 评论(0) 推荐(0) 编辑
摘要: http://blog.csdn.net/pelick/article/details/7269670http://zookeeper.apache.org/doc/trunk/javaExample.html官网上文档,API,用例Zookeeper应用简单例子Zookeeper能帮我们作什么事情... 阅读全文
posted @ 2014-04-21 12:14 Django's blog 阅读(436) 评论(0) 推荐(0) 编辑
摘要: http://www.infoq.com/cn/news/2014/04/netease-spark-practice?utm_source=infoq&utm_medium=popular_links_homepage网易的实时计算需求对于大多数的大数据而言,实时性是其所应具备的重要属性,信息的到... 阅读全文
posted @ 2014-04-21 12:04 Django's blog 阅读(969) 评论(0) 推荐(0) 编辑
摘要: http://blog.jobbole.com/65218/本文由伯乐在线-熊崽Kevin翻译自pypix.com。欢迎加入技术翻译小组。转载请参见文章末尾处的要求。数据结构数据结构的概念很好理解,就是用来将数据组织在一起的结构。换句话说,数据结构是用来存储一系列关联数据的东西。在Python中有四... 阅读全文
posted @ 2014-04-21 10:22 Django's blog 阅读(515) 评论(0) 推荐(0) 编辑