摘要: 操作系统环境:CentOS release 6.4 (Final)下载基本包:下载地址:http://www.oracle.com/technetwork/topics/linuxx86-64soft-092277.html下载以下三个压缩包:instantclient-basic-linux.x6... 阅读全文
posted @ 2015-03-24 15:32 /HOME/北北 阅读(2288) 评论(0) 推荐(0) 编辑
摘要: 实验环境准备:IP主机名角色133.72.24.201hadoop001master133.72.24.202hadoop002slaveMysql数据库软件版本MySQL-server-5.6.23-1.el6.x86_64操作系统CentOS release 6.4 (Final)内核版本2.6... 阅读全文
posted @ 2015-03-09 14:47 /HOME/北北 阅读(268) 评论(0) 推荐(0) 编辑
摘要: 在虚拟机上做实验,克隆虚拟机,并修改IP地址后,重启网络服务出现下面的错误:[root@hadoop002Desktop]#servicenetworkrestartShuttingdownloopbackinterface: [OK]Bringinguploopbackint... 阅读全文
posted @ 2015-03-06 11:37 /HOME/北北 阅读(1087) 评论(0) 推荐(0) 编辑
摘要: SQOOP是用于对数据进行导入导出的。 (1)把MySQL、Oracle等数据库中的数据导入到HDFS、Hive、HBase中 (2)把HDFS、Hive、HBase中的数据导出到MySQL、Oracle等数据库中 (3)导入导出的事务是以Mapper任务为单位。1、sqoop的安装步骤 1.... 阅读全文
posted @ 2015-02-28 16:55 /HOME/北北 阅读(315) 评论(0) 推荐(0) 编辑
摘要: zookeeper服务器集群规模不小于3个节点,要求各服务器之间系统时间要保持一致。1、解压zookeeper-3.4.5.tar.gz 文件 执行命令:tar -zxvf zookeeper-3.4.5.tar.gz2、重命名文件夹 执行命令:mv zookeeper-3.4.5/ zk3、设... 阅读全文
posted @ 2015-02-28 15:44 /HOME/北北 阅读(200) 评论(0) 推荐(0) 编辑
摘要: 1、Hive 1.1在hadoop生态圈中属于数据仓库的角色。他能够管理hadoop中的数据,同时可以查询hadoop中的数据。 本质上讲,hive是一个SQL解析引擎。Hive可以把SQL查询转换为MapReduce中的job来运行。 hive有一套映射工具,可以把SQL转换为MapReduce中... 阅读全文
posted @ 2015-02-28 15:41 /HOME/北北 阅读(612) 评论(0) 推荐(0) 编辑
摘要: hbase的机群搭建过程集群结构,主节点(hmaster)是hadoop,从节点(region server)是hadoop1和hadoop21、解压缩、重命名、设置环境变量 export HBASE_HOME=/home/hadoop/app/hbase export PATH=.:$HADOO... 阅读全文
posted @ 2015-02-28 15:37 /HOME/北北 阅读(142) 评论(0) 推荐(0) 编辑
摘要: 1:配置静态IP地址重启网卡命令:service network restart验证:ifconfig2:修改主机名称 2.1、修改当前会话中的主机名命令:hostname hadoop 2.2、修改配置文件中的主机名:vi /etc/sysconfig/network验证:重启机器后查看主机名... 阅读全文
posted @ 2015-02-28 15:32 /HOME/北北 阅读(614) 评论(0) 推荐(0) 编辑
摘要: 给hadoop赋予sudo权限进入超级用户模式.也就是输入"su -",系统会让你输入超级用户密码,输入密码后就进入了超级用户模式.添加文件的写权限.也就是输入命令"chmod u+w /etc/sudoers".编辑/etc/sudoers文件.也就是输入命令"vim /etc/sudoers",... 阅读全文
posted @ 2015-02-28 15:30 /HOME/北北 阅读(494) 评论(0) 推荐(0) 编辑
摘要: 集群机器准备机器名机器IP用途hadoop192.168.147.100namenode、secondaryNamenode、JobTracterhadoop1192.168.147.101datanode、tacktracterhadoop2192.168.147.102datanode、tack... 阅读全文
posted @ 2015-02-28 14:57 /HOME/北北 阅读(452) 评论(0) 推荐(0) 编辑