随笔分类 - Hadoop Hive集群搭建(含CentOS和Ubuntu)
摘要:不多说,直接上干货! 问题详情 如下 这个错误的意思是缺少 htrace-core-2.04.jar。 解决办法: 将$HBASE_HOME/lib下的htrace-core-2.04.jar拷贝到$HIVE_HOME/lib 欢迎大家,加入我的微信公众号:大数据躺过的坑 人工智能躺过的坑 同时,大
阅读全文
摘要:不多说,直接上干货! 一般,普通的情况是 全网最详细的hive-site.xml配置文件里添加<name>hive.cli.print.header</name>和<name>hive.cli.print.current.db</name>前后的变化(图文详解) 那,如何添加达到Hive与HBase
阅读全文
摘要:不多说,直接上干货! 比如,你是从hive-default.xml.template,复制一份,改名为hive-site.xml 一般是 得到 而, 得到 欢迎大家,加入我的微信公众号:大数据躺过的坑 人工智能躺过的坑 同时,大家可以关注我的个人博客: http://www.cnblogs.com/
阅读全文
摘要:不多说,直接上干货! 我这里,是借助MySQL,将Hive这个组件的元数据存在MySQL里,命名为hive_metadata。 注意如下: 与 是完全不一样。 以下是链接到Hive里的hive_metadata 以下是链接到Linux里的MySQL 好好的理清和对比学习。 欢迎大家,加入我的微信公众
阅读全文
摘要:不多说,直接上干货! 这个问题,得非 你的hive和hbase是不是同样都是CDH版本,还是一个是apache版本,一个是CDH版本。 问题详情 说明没创建成功。 Hive和HBase同是CDH版本的解决办法 首先通过用下面的命令,重新启动hive ./hive -hiveconf hive.roo
阅读全文
摘要:不多说,直接上干货 问题详情 解决办法 网上查了说改, 也许,你改完之后,依然还是如此。 Caused by: java.lang.NumberFormatException: For input string: "1s"还是这样 我换其他版本,1.0.0没毛病。 归结为,比如你是apache-ha
阅读全文
摘要:不多说,直接上干货! 很多同行,也许都知道,对于我们大数据搭建而言,目前主流,分为Apache 和 Cloudera 和 Ambari。 后两者我不多说,是公司必备和大多数高校科研环境所必须的! 分别,详情见我如下的博客 Cloudera安装搭建部署大数据集群(图文分五大步详解)(博主强烈推荐) A
阅读全文
摘要:Hive 安装依赖 Hadoop 的集群,它是运行在 Hadoop 的基础上。 所以在安装 Hive 之前,保证 Hadoop 集群能够成功运行。 同时,比如我这里的master、slave1和slave2组成的hadoop集群。hive的安装可以安装在任一一个节点上,当然,也可以安装在集群之外,取
阅读全文
摘要:福利 => 每天都推送 欢迎大家,关注微信扫码并加入我的4个微信公众号: 大数据躺过的坑 Java从入门到架构师 人工智能躺过的坑 Java全栈大联盟 每天都有大量的学习视频资料和精彩技术文章推送... 人生不易,唯有努力。 百家号 :九月哥快讯 快手号: jiuyuege 无论是hadoop、sp
阅读全文
摘要:Hive不在主节点上搭建,我这里是在HadoopSlave1上。
阅读全文
摘要:说在前面的话 以下三种情况,最好是在3台集群里做,比如,master、slave1、slave2的master和slave1都安装了hive,将master作为服务端,将slave1作为服务端。 以下,是针对CentOS版本的,若是Ubuntu版本,见我的博客 Ubuntu系统下安装并配置hive-
阅读全文
摘要:说在前面的话 默认情况下,Hive元数据保存在内嵌的Derby数据库中,只能允许一个会话连接,只适合简单的测试。实际生产环境中不使用,为了支持多用户会话, 则需要一个独立的元数据库,使用MySQL作为元数据库,Hive内部对MySQL提供了很好的支持。 在Ubuntu系统下安装并配置hive详细正确
阅读全文
摘要:原文来自: http://blog.csdn.net/songchunhong/article/details/51423823 1.下载Hive安装包apache-hive-1.2.1-bin.tar.gz 2.解压安装包,并移动到要安装的路径下 sudo tar -zxvf apache-hiv
阅读全文
摘要:以下两种方法都可以,推荐用方法一! 如果有误,请见博客 MySQL用户权限(Host,User,Password)管理(mysql.user) 可以自己去增加和删除用户。别怕,zhouls! MySQL用户权限(Host,User,Password)管理(mysql.user) 可以自己去增加和删除
阅读全文
摘要:这几天,无意之间,被这件事情给迷惑,不解!先暂时贴于此,以后再解决! 详细问题如下: 在hive的安装目录下(我这里是 /home/hadoop/app/hive-1.2.1),hive的安装目录的lib下(我这里是/home/hadoop/app/hive-1.2.1/lib)存放了mysql-c
阅读全文
摘要:本人,苦心多时,历经磨难和心血,与大家共同攻克问题难关! 问题一: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask. java.lang.RuntimeException: Unab
阅读全文
摘要:本博文的主要内容是: .复习HA相关 .MySQL数据库 .先在MySQL数据库中建立hive数据库 .hive的配置 以下是Apache Hadoop HA的总结。分为hdfs HA和yarn HA。 以上,是参考《Hadoop海量数据处理 技术详解与项目实战》 强烈建议,先看 Hive的JDBC
阅读全文