摘要:
上篇已经搭建好环境,本篇主要测试hadoop中的hdfs和mapreduce功能。 首先填坑:启动环境时发现DataNode启动不了。查看日志 从日志中可以看出,原因是因为datanode的clusterID 和 namenode的clusterID 不匹配。打开hdfs-site.xml里配置的d 阅读全文
摘要:
hadoop的基本概念: Hadoop是一个由Apache基金会所开发的分布式系统基础架构。 用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。 Hadoop实现了一个分布式文件系统(Hadoop Distributed File System),简称HD 阅读全文