随笔分类 - hadoop
摘要:下面是对hadoop的一些基本测试示例 Hadoop自带测试类简单使用 这个测试类名叫做 hadoop-mapreduce-client-jobclient.jar,位置在 hadoop/share/hadoop/mapreduce/ 目录下 不带任何参数可以获取这个jar的帮助信息 $ yarn
阅读全文
摘要:环境:CentOS 7 JDK: 1.7.0_80 hadoop:2.8.5 hadoop(192.168.56.101) 配置基础环境 1. 测试环境可以直接关闭selinux和防火墙 2. 主机添加hosts记录 # vim /etc/hosts 192.168.56.101 hadoop 3.
阅读全文
摘要:环境:CentOS 7 JDK: 1.7.0_80 hadoop:2.8.5 两台机器:master(192.168.56.101) slave(192.168.56.102) 配置基础环境 1. 测试环境可以直接关闭selinux和防火墙(每个节点) 2. 每台主机添加hosts记录(每个节点)
阅读全文