摘要: 所有问题归根到底都是hadoop与hbase的版本不匹配的问题!!! 最后经验证hadoop 2.8.4 hbase 2.0.3 没有问题(但是hbase2.0.3使用的java接口,有些class过时(比如:HbaseAdmin、HTable)没有想要的方法对应,为此暂时使用1.3.2) 在搭hb 阅读全文
posted @ 2018-12-29 15:38 粑粑蓉子 阅读(321) 评论(0) 推荐(0) 编辑
摘要: 段时间没有用Hbase,今天就尝试安装了下Hbase;环境是这样的 Hadoop-2.8.3 Hbase-2.1.0 之前查了官网,这两个版本是目前可以互相匹配的最高的版本,but启动hbase报下面这个错误 好坑,查了半天没找到啥问题,无奈之下扒了下源码,不废话,直接说解决方案 cp $HBASE 阅读全文
posted @ 2018-12-28 17:08 粑粑蓉子 阅读(1595) 评论(0) 推荐(0) 编辑
摘要: 1.上传sqoop 2.安装和配置(搭好集群,几乎不用配置sqoop) 在添加sqoop到环境变量 将数据库连接驱动拷贝到$SQOOP_HOME/lib里3.使用 第一类:数据库中的数据导入到HDFS上 sqoop import --connect jdbc:mysql://192.168.1.10 阅读全文
posted @ 2018-12-27 11:05 粑粑蓉子 阅读(421) 评论(0) 推荐(0) 编辑
摘要: 1.上传zk安装包 2.解压 3.配置(先在一台节点上配置) 3.1添加一个zoo.cfg配置文件 $ZOOKEEPER/conf mv zoo_sample.cfg zoo.cfg 3.2修改配置文件(zoo.cfg) 其中各配置项的含义,解释如下: 1.tickTime:CS通信心跳时间(cli 阅读全文
posted @ 2018-12-26 17:31 粑粑蓉子 阅读(90) 评论(0) 推荐(0) 编辑
摘要: hadoop2.0已经发布了稳定版本了,增加了很多特性,比如HDFS HA、YARN等。 注意:apache提供的hadoop-2.2.0的安装包是在32位操作系统编译的,因为hadoop依赖一些C++的本地库,所以如果在64位的操作上安装hadoop-2.2.0就需要重新在64操作系统上重新编译( 阅读全文
posted @ 2018-12-26 17:23 粑粑蓉子 阅读(141) 评论(0) 推荐(0) 编辑
摘要: 1.准备Linux环境(配置nat方式连接xshell) 在VM的虚拟网络适配器中配置VM8,如图: centos里配置:vim /etc/sysconfig/network-scripts/ifcfg-ens33 修改主机名:-> hostname hadoop01 修改主机名和IP的映射关系: 阅读全文
posted @ 2018-12-26 11:48 粑粑蓉子 阅读(645) 评论(0) 推荐(0) 编辑
摘要: 前言: 安装Maven 3,需要安装jdk1.7及以上版本 具体步骤如下: 1、进入官网:http://maven.apache.org/download.cgi,如下图红框部分 其中: apache-maven-3.5.4-bin.zip是压缩包,解压到安装路径即可 apache-maven-3. 阅读全文
posted @ 2018-12-20 12:00 粑粑蓉子 阅读(7464) 评论(0) 推荐(0) 编辑
摘要: 1、打开hosts所在的目录 2、编辑hosts文件 使用Notepad++或者记事本以管理员身份打开hosts,修改记录格式如下:(格式很重要!!!) 3、遇到权限问题 首先进入Win10系统的hosts文件所在位置,我们直接输入C:\Windows\System32\Drivers\etc后回车 阅读全文
posted @ 2018-12-13 14:43 粑粑蓉子 阅读(4063) 评论(0) 推荐(0) 编辑
摘要: 转载自https://blog.csdn.net/carolcoral/article/details/80984712 阅读全文
posted @ 2018-12-06 11:43 粑粑蓉子 阅读(3896) 评论(0) 推荐(0) 编辑
摘要: 1.单继承时super()和__init__()实现的功能是类似的 使用super()继承时不用显式引用基类。、 2. super不是父类,而是继承顺序的下一个类 在多重继承时会涉及继承顺序,super()相当于返回继承顺序的下一个类,而不是父类,类似于这样的功能: supder和父类没有关联,因此 阅读全文
posted @ 2018-12-04 18:51 粑粑蓉子 阅读(178) 评论(0) 推荐(0) 编辑