随笔分类 -  毕设

摘要:端口 Hadoop集群的各部分一般都会使用到多个端口,有些是daemon之间进行交互之用,有些是用于RPC访问以及HTTP访问。而随着Hadoop周边组件的增多,完全记不住哪个端口对应哪个应用,特收集记录如此,以便查询。这里包含我们使用到的组件:HDFS, YARN, Hbase, Hive, Zo 阅读全文
posted @ 2017-05-16 15:31 jason_zhangz 阅读(189) 评论(0) 推荐(0)
摘要:深入HBase架构解析(二) 前言 这是《深入HBase架构解析(一)》的续,不多废话,继续。。。。 HBase读的实现 通过前文的描述,我们知道在HBase写时,相同Cell(RowKey/ColumnFamily/Column相同)并不保证在一起,甚至删除一个Cell也只是写入一个新的Cell, 阅读全文
posted @ 2017-05-08 19:31 jason_zhangz 阅读(180) 评论(0) 推荐(0)
摘要:深入HBase架构解析(一) 前记 公司内部使用的是MapR版本的Hadoop生态系统,因而从MapR的官网看到了这篇文文章:An In-Depth Look at the HBase Architecture,原本想翻译全文,然而如果翻译就需要各种咬文嚼字,太麻烦,因而本文大部分使用了自己的语言, 阅读全文
posted @ 2017-05-08 19:30 jason_zhangz 阅读(396) 评论(0) 推荐(0)
摘要:1、安装Hadoop开发插件hadoop安装包contrib/目录下有个插件hadoop-0.20.2-eclipse-plugin.jar,拷贝到myeclipse根目录下/dropins目录下。2、 启动myeclipse,打开Perspective:【Window】->【Open Perspe 阅读全文
posted @ 2017-05-06 13:13 jason_zhangz 阅读(381) 评论(0) 推荐(0)