摘要: 一、安装环境及软件版本 1、操作系统centos 6.7 64位 2、配置好服务器的免密码登陆(ssh) 3、安装好jdk,我安装的是jdk-7u80-linux-x64.tar.gz。 4、Hadoop集群角色分配: HDFS集群: hdp01 : DataNode NameNode Second 阅读全文
posted @ 2019-02-19 19:11 Miles_mjy 阅读(157) 评论(0) 推荐(0) 编辑
摘要: 一、Hadoop背景介绍 什么是Hadoop 1. HADOOP是apache旗下的一套开源软件平台 2. HADOOP提供的功能:利用服务器集群,根据用户的自定义业务逻辑,对海量数据进行分布式处理 3. HADOOP的核心组件有: A. HDFS(分布式文件系统) B. YARN(运算资源调度系统 阅读全文
posted @ 2019-02-19 16:08 Miles_mjy 阅读(118) 评论(0) 推荐(0) 编辑