2018年12月23日
摘要: 上传centOS6.7-hadoop-2.6.4.tar.gz 解压 tar -zxvf centOS6.7-hadoop-2.6.4.tar.gz hadoop相关修改配置 1 修改 /root/apps/hadoop/etc/hadoop 目录下的hadoop-env.sh vi hadoop- 阅读全文
posted @ 2018-12-23 19:10 o_0的园子 阅读(182) 评论(0) 推荐(0) 编辑
摘要: 1 jdk yum install lrzsz 比alt+p上传文件更方便 rz 回车就可以上传文件了,上传是上传到当前目录下 解压上传的jdk tar -zxvf jdk-7u80-linux-x64.tar.gz 配置变量 vi /etc/profile #在文件最后添加 export JAVA_HOME=/root/apps/jdk1.7.0_80 export PATH=$... 阅读全文
posted @ 2018-12-23 18:49 o_0的园子 阅读(332) 评论(0) 推荐(0) 编辑
摘要: 1 在mini1上 ssh-keygen -t rsa 回车——回车——回车 ssh-copy-id root@mini2 yes 密码 hadoop 测试 ssh mini2可以从mini1切换到mini2 退出是exit,从mini2切换回mini1 注意也要给自给机器配置一个 ssh-copy-id root@mini1 阅读全文
posted @ 2018-12-23 18:12 o_0的园子 阅读(418) 评论(0) 推荐(0) 编辑
摘要: vi /etc/hosts 192.168.1.101 itcast 阅读全文
posted @ 2018-12-23 17:53 o_0的园子 阅读(494) 评论(0) 推荐(0) 编辑
摘要: 1.准备Linux环境 1.0先将虚拟机的网络模式选为NAT 1.1修改主机名 vi /etc/sysconfig/network NETWORKING=yes HOSTNAME=itcast ### 1.2修改IP 两种方式: 第一种:通过Linux图形界面进行修改(强烈推荐) 进入Linux图形界面 -> 右键点击右上方的两个小电脑 -> 点击Edit connections -> 选... 阅读全文
posted @ 2018-12-23 17:41 o_0的园子 阅读(217) 评论(0) 推荐(0) 编辑
摘要: 1关闭要克隆的虚拟机 在mini上右键——管理——克隆mini2——完整克隆——克隆完成 2修改MAC地址 右键mini2——设置——网络适配器——高级——MAC地址——生成——确定——确定 3启动mini2 永久修改主机名 vi /etc/sysconfig/network 保存退出 修改ip地址 阅读全文
posted @ 2018-12-23 17:35 o_0的园子 阅读(291) 评论(0) 推荐(0) 编辑
摘要: vi /etc/sysconfig/network-scripts/ifcfg-eth0 修改BOOTPROTO为static 添加IPADDR=192.168.74.100 添加NETMASK=255.255.255.0 添加GATEWAY=192.168.74.2 添加DNS1=192.168. 阅读全文
posted @ 2018-12-23 17:06 o_0的园子 阅读(384) 评论(0) 推荐(0) 编辑
摘要: 4.1 HADOOP集群搭建 4.1.1集群简介 HADOOP集群具体来说包含两个集群:HDFS集群和YARN集群,两者逻辑上分离,但物理上常在一起 HDFS集群: 负责海量数据的存储,集群中的角色主要有 NameNode / DataNode YARN集群: 负责海量数据运算时的资源调度,集群中的角色主要有 ResourceManager /NodeManager (那mapredu... 阅读全文
posted @ 2018-12-23 10:57 o_0的园子 阅读(287) 评论(0) 推荐(0) 编辑