2017年2月21日
摘要：
一.基本功能: 1.启动hive时报错 解决方案: 将mysql connector java 5.1.6 bin.jar包导入到$HIVE_HOME/lib目录下 2.启动hive时报错: 解决方案: 3.启动hive时报错 解决方案: 4.启动hive时报错 解决方案: 5.操作表数据时(向表中 阅读全文
摘要：
问题1: 报错信息如下: 解决方案： 分配的资源不够，加大内存或者调整代码，尽量避免类似JsonObject这样的大对象过度消耗内存，或者 问题2: 报错信息如下: 解决方案: 问题3: 报错信息如下: 解决方案： 检查native库的版本信息，32bit的版本和64bit的版本在不匹配的机器上会加 阅读全文
摘要：
软件环境: 主机配置: 一共m1, m2, m3这五部机, 每部主机的用户名都为centos 参考资料: 说明: 若在hive1.x中已使用MySQL作为元数据库, 升级到hive2.x时仍想将MySQL作为元数据库则进行以下操作: (以下方法是删除原始在hive1.x中的元数据, 并不是原始数据迁 阅读全文
摘要：
软件环境: 主机配置: 一共m1, m2, m3这五部机, 每部主机的用户名都为centos 集群搭建 (注:Hive只需在一个节点上安装) 1.下载Hive2.1.1安装包 2.解压 3.配置环境变量 4.配置MySQL(注:切换到root用户) 1. 卸载CentOS自带的MySQL 2. 初始 阅读全文
摘要：
软件环境: 主机配置: 一共m1, m2, m3这五部机, 每部主机的用户名都为centos 一.编译Spark源码 参考资料: 1.安装Maven: (Linux下,若使用Spark自带的编译器可跳过此步) 1. 下载Maven安装包 2. 解压Maven到指定位置 3. 编辑/etc/profi 阅读全文
摘要：
软件环境: 主机配置: 一共m1, m2, m3, m4, m5这五部机, 每部主机的用户名都为centos 前期准备 1.配置主机IP: 2.配置主机名: 3.配置主机名和IP的映射关系: 4.关闭防火墙 (1)临时关闭: (2)开机时自动关闭: 搭建步骤： 一.安装配置Zookeeper集群（在 阅读全文