随笔分类 -  Hadoop

MapReduce的核心资料索引 [转]
摘要：转自http://prinx.blog.163.com/blog/static/190115275201211128513868/和http://www.cnblogs.com/jie465831735/archive/2013/03/06.html按如下顺序看效果最佳:1. MapReduce S... 阅读全文
posted @ 2015-10-17 22:39 lenbkan 阅读(931) 评论(0) 推荐(0) 编辑
Hadoop家族的各个成员
摘要：官方定义：hadoop是一个开发和运行处理大规模数据的软件平台。核心词语是平台，也就是说我们有大量的数据，又有好几个电脑，我们知道应该把处理数据的任务分解到各个电脑上，但是不知道怎样分配任务，怎样回收结果，hadoop大概就帮助我们做了这件事。1、HDFS我们首先应该考虑的是海量数据怎么保存，怎么管... 阅读全文
posted @ 2015-10-02 07:41 lenbkan 阅读(173) 评论(0) 推荐(0) 编辑
hadoop 2.6 centos 7.1 下的一些操作
摘要：开启hdfs： start-dfs.sh开启yarn： start-yarn.sh查看hdfs：http://ip:50070/查看RM：http://ip:8088/ 阅读全文
posted @ 2015-09-17 09:01 lenbkan 阅读(128) 评论(0) 推荐(0) 编辑
Hadoop 部署过程中的一些问题与解决方案
摘要：环境--> centos7.1 --> jdk1.81.JDK卸载与安装http://blog.csdn.net/czmchen/article/details/410471872.单机部署完成后 远程浏览器访问8088和50070端口 "无法访问"。 解决：说明这2个2端口没有开放，开放即可Cen... 阅读全文
posted @ 2015-09-06 11:14 lenbkan 阅读(213) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示