摘要：
搭建完全分布式集群 HBase集群建立在hadoop集群基础之上，所以在搭建HBase集群之前需要把Hadoop集群搭建起来，并且要考虑二者的兼容性.现在就以5台机器为例，搭建一个简单的集群. 软件版本：hadoop-2.8.0,hbase-1.3.0,zookeeper-3.4.10 5台机器IP 阅读全文
posted @ 2017-12-14 20:28 红与黑hyh 阅读(127) 评论(0) 推荐(0) 编辑
摘要：
1. Zookeeper服务集群规模不小于三个节点，要求各服务之间系统时间要保持一致。 2. 在m1的usr/local目录下，解压缩zookeeper（执行命令tar –zvxf zookeeper.tar.gz） 3. 设置环境变量 打开/etc/profile文件！内容如下： [html] v 阅读全文
posted @ 2017-12-14 17:41 红与黑hyh 阅读(273) 评论(0) 推荐(0) 编辑
摘要：
文件拷贝，将172.16.1.2中的文件拷贝到本机中 文件夹拷贝，将172.16.1.2中的文件夹others 拷贝到本机 music目录下 阅读全文
posted @ 2017-12-14 16:58 红与黑hyh 阅读(145) 评论(0) 推荐(0) 编辑
摘要：
客户机：172.16.1.2 远程机：172.16.1.3 1、远程机 a、允许root用户通过22端口登录 vi /etc/ssh/sshd_config PORT 22 PermitRootLogin yes b、免去首次访问远程机安全提示（YES/NO） vi /etc/ssh/ssh_con 阅读全文
posted @ 2017-12-14 16:45 红与黑hyh 阅读(214) 评论(0) 推荐(0) 编辑
摘要：
一、环境选择 1，服务器选择 阿里云服务器:入门型(按量付费)操作系统:linux CentOS 6.8Cpu：1核内存：1G硬盘:40Gip:39.108.77.250 2，配置选择 JDK:1.8 （jdk-8u144-linux-x64.tar.gz）Hadoop:2.8.2 (hadoop- 阅读全文
posted @ 2017-12-11 08:38 红与黑hyh 阅读(271) 评论(0) 推荐(0) 编辑
摘要：
集群机器意外断电重启，导致hbase 无法正常启动，抛出reflect invocation异常，可能是正在执行的插入或合并等操作进行到一半时中断，导致部分数据文件不完整格式不正确或在hdfs上block块不完整。 在网上查了一下相关资料，怀疑有可能是关闭前一些未提交的修改所存放的log文件数据写入 阅读全文
posted @ 2017-11-21 10:12 红与黑hyh 阅读(500) 评论(0) 推荐(0) 编辑
摘要：
通常 python 升级后，会带来一系列的出错信息，例如缺少pip、zlib、setuptools等，虽然你已经把python升级到了2.7版本，但是使用的依赖、模块还是旧的，所以要在新的 python 中重新安装。 pip安装 1.下载pip安装包 由于下载pip是基于https协议的，故需要在w 阅读全文
posted @ 2017-11-20 23:02 红与黑hyh 阅读(225) 评论(0) 推荐(0) 编辑
摘要：
1、查看当前python的版本 2、下载Python-2.7.11 3、解压并进入目录 4、编译安装 5、查看安装后版本 6、建立软连接，使系统默认的 python指向 python2.7 7、解决系统 Python 软链接指向 Python2.7 版本后，因为yum是不兼容 Python 2.7的 阅读全文
posted @ 2017-11-20 22:39 红与黑hyh 阅读(229) 评论(0) 推荐(0) 编辑
摘要：
安装phantomjs(Ubuntu版本) 安装Phantomjs(MacOS版本) phantomjs的使用(Ubuntu和MacOS都一样) Pay Attention 解决方案 如按照上述步骤还未解决，请重启终端！ 阅读全文
posted @ 2017-11-19 20:40 红与黑hyh 阅读(869) 评论(0) 推荐(0) 编辑