Fork me on GitHub

随笔分类 -  hive

摘要:前言 在之前的 "大数据学习系列之七 Hadoop+Spark+Zookeeper+HBase+Hive集群搭建" 中介绍了集群的环境搭建,但是在使用hive进行数据查询的时候会非常的慢,因为hive默认使用的引擎是MapReduce。因此就将spark作为hive的引擎来对hbase进行查询,在成 阅读全文
posted @ 2018-01-20 21:24 虚无境 阅读(6395) 评论(0) 推荐(2) 编辑
摘要:前言 在搭建大数据Hadoop相关的环境时候,遇到很多了很多错误。我是个喜欢做笔记的人,这些错误基本都记载,并且将解决办法也写上了。因此写成博客,希望能够帮助那些搭建大数据环境的人解决问题。 说明 : 遇到的问题以及相应的解决办法是对于个人当时的环境,具体因人而异。如果碰到同样的问题,本博客的方法无 阅读全文
posted @ 2018-01-07 19:47 虚无境 阅读(10475) 评论(0) 推荐(4) 编辑
摘要:引言 在之前的大数据学习系列中,搭建了Hadoop+Spark+HBase+Hive 环境以及一些测试。其实要说的话,我开始学习大数据的时候,搭建的就是集群,并不是单机模式和伪分布式。至于为什么先写单机的搭建,是因为作为个人学习的话,单机已足以,好吧,说实话是自己的电脑不行,使用虚拟机实在太卡了。。 阅读全文
posted @ 2017-12-30 15:47 虚无境 阅读(3343) 评论(4) 推荐(6) 编辑
摘要:引言 在上一篇 "大数据学习系列之四 Hadoop+Hive环境搭建图文详解(单机)" 和之前的 "大数据学习系列之二 HBase环境搭建(单机)" 中成功搭建了Hive和HBase的环境,并进行了相应的测试。本文主要讲的是如何将Hive和HBase进行整合。 Hive和HBase的通信意图 Hiv 阅读全文
posted @ 2017-12-18 18:47 虚无境 阅读(14410) 评论(8) 推荐(7) 编辑
摘要:引言 在 "大数据学习系列之一 Hadoop环境搭建(单机)" 成功的搭建了Hadoop的环境,在 "大数据学习系列之二 HBase环境搭建(单机)" 成功搭建了HBase的环境以及相关使用介绍。本文主要讲解如何搭建Hadoop+Hive的环境。 一、环境准备 1,服务器选择 本地虚拟机 操作系统: 阅读全文
posted @ 2017-12-16 09:33 虚无境 阅读(29572) 评论(8) 推荐(15) 编辑
摘要:版本: Hive2.1 在linux上部署Hive的时候,初始化元数据的时候,出现 HiveSchemaTool:Parsing failed. Reason: Unrecognized option: dbType mysql 的错误,说找不到mysql。 但是我确认mysql 已经安装,并且my 阅读全文
posted @ 2017-12-10 15:48 虚无境 阅读(2290) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示