摘要:
通过ChainMapper可以将多个map类合并成一个map任务。下面个这个例子没什么实际意思,但是很好的演示了ChainMapper的作用。源文件100 tom 90101 mary 85102 kate 60map00的结果,过滤掉100的记录101 mary 85102 kate 60map0... 阅读全文
2015年12月24日
摘要:
不定时更新常用好用命令。------------------------------------------------------------------------------------------------------------------------------------------... 阅读全文
2015年12月20日
摘要:
eclipse安装插件或许没有什么多的可讲,但对于刚刚接触eclipse这款IDE的新手来说,可能还是会有点棘手!eclipse安装插件大致三种方法:方法一:自身安装器 使用eclipse的SoftwareUpdates/ Find and install.../search for new ... 阅读全文
2015年12月18日
摘要:
API神命令:apt-get -h >>help.txtapt 1.0.10.2ubuntu1,用于 amd64 体系结构,编译于 Oct 5 2015 15:55:05用法: apt-get [选项] 命令 apt-get [选项] install|remove 软件包1 [软件包2 ...... 阅读全文
摘要:
mapreduce版本:0.2.0之前说明: 该注释为之前学习时找到的一篇,现在只是在入门以后对该注释做了一些修正以及添加。 由于版本问题,该代码并没有在集群环境中运行,只将其做为理解mapreduce的参考吧。 切记,该版本是0.2.0之前的版本,请分辨清楚!正文: package o... 阅读全文
2015年12月17日
摘要:
呵呵呵参考:http://zhangyuefeng1983.blog.163.com/blog/static/1083372520126693524870/ 阅读全文
摘要:
Hbase 的ImmutableBytesWritable类型一般作为RowKey的类型;但也有时候会把值读出来;故有了转化为string一说.ImmutableBytesWritable RowKey;byte[] Temp = RowKey.get();String str = Bytes.to... 阅读全文
摘要:
1.没有主机的路由 1.namenode与datanode之间ping不通了 2.防火墙得关闭: ufw status ufw disabled 2. ssh localhost ssh:connect to host localhost port 22:Con... 阅读全文
摘要:
问题详细: 搭建类hadoop的集群集群环境,查看hadoop dfsadmin -report 也有datanode节点.在master:50070上也有. 然而在eclipse环境上运行mapreduce的程序时,却发现每次都是直接在本地上跑,并没有在集群上运行程序!解决办法: =>map... 阅读全文
2015年12月16日
摘要:
md,出现好几次这种问题,还得上百度?以此为证,再出现这种问题我就不信想不起来怎么解决!!!----清除不存在jar包ok,第二个问题:每个类上有无数个红叉,然而代码并没有问题解决方案:run以下就可以了 阅读全文