2018年8月3日
摘要: 1.准备Linux环境 1.0先将虚拟机的网络模式选为NAT 1.1修改主机名 vi /etc/sysconfig/network NETWORKING=yes HOSTNAME=itcast ### 1.2修改IP 两种方式: 第一种:通过Linux图形界面进行修改(强烈推荐) 进入Linux图形 阅读全文
posted @ 2018-08-03 11:02 ldsweely 阅读(155) 评论(0) 推荐(0) 编辑
摘要: 一、HADOOP集群搭建 1、集群简介 HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起 HDFS集群: 负责海量数据的存储,集群中的角色主要有 NameNode / DataNode YARN集群: 负责海量数据运算时的资源调度,集群中的角色主要有 阅读全文
posted @ 2018-08-03 10:19 ldsweely 阅读(196) 评论(0) 推荐(0) 编辑
摘要: 1. HADOOP背景介绍 1.1 什么是HADOOP 1.2 HADOOP产生背景 ——分布式文件系统(GFS),可用于处理海量网页的存储 ——分布式计算框架MAPREDUCE,可用于处理海量网页的索引计算问题。 1.3 HADOOP在大数据、云计算中的位置和关系 1.4 国内外HADOOP应用案 阅读全文
posted @ 2018-08-03 10:01 ldsweely 阅读(197) 评论(0) 推荐(0) 编辑