摘要: 层层递进-解开hdfs的面纱 1、hdfs是什么?它与普通服务器的文件系统有什么区别?它的特性有什么? 2、hdfs的工作原理是怎样的? 3、每台机器都单独启动有什么弊端?假设有1000台机器需要启动?该怎么解决呢? 4、hdfs配置与使用 5、利用javaApi充当客户端访问hdfs hdfs简介 阅读全文
posted @ 2017-05-06 21:54 码农皮邱 阅读(564) 评论(0) 推荐(0) 编辑
摘要: 简介与环境准备 hadoop的核心是分布式文件系统HDFS以及批处理计算MapReduce。近年,随着大数据、云计算、物联网的兴起,也极大的吸引了我的兴趣,看了网上很多文章,感觉还是云里雾里,很多不必要的配置都在入门教程出现。通过思考总结与相关教程,我想通过简单的方式传递给同样想入门hadoop的同 阅读全文
posted @ 2017-05-06 14:18 码农皮邱 阅读(2603) 评论(8) 推荐(4) 编辑
摘要: 简要说明 该文章目的是基于搭建hadoop的前置文章,当然也可以搭建Linux的入门文章。那我再重复一下安装准备软件。 环境准备: http://pan.baidu.com/s/1dFrHyxV 密码:1e9g(建议自己去官网下环境,要原生原味的,不要二手货) CentOS-Linux系统:Cent 阅读全文
posted @ 2017-05-06 10:21 码农皮邱 阅读(1386) 评论(0) 推荐(0) 编辑