摘要:
一、安装环境及软件版本 1、操作系统centos 6.7 64位 2、配置好服务器的免密码登陆(ssh) 3、安装好jdk,我安装的是jdk-7u80-linux-x64.tar.gz。 4、Hadoop集群角色分配: HDFS集群: hdp01 : DataNode NameNode Second 阅读全文
摘要:
一、Hadoop背景介绍 什么是Hadoop 1. HADOOP是apache旗下的一套开源软件平台 2. HADOOP提供的功能:利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理 3. HADOOP的核心组件有: A. HDFS(分布式文件系统) B. YARN(运算资源调度系统 阅读全文