随笔分类 -  大数据学习之路 / hive

摘要:一、hive的随机抓取策略 可以通过 set hive.fetch.task.conversion查看抓取模式默认是more有以下三种模式 none 所有涉及hdfs的读取查询都走mapreduce任务 mininal 在进行简单的select *,简单的过滤或涉及分区字段的过滤时走mr more 阅读全文
posted @ 2024-11-15 21:15 w我自横刀向天笑 阅读(50) 评论(0) 推荐(0)
摘要:一、shell交互Hive,用命令hive启动一个hive的shell命令行,在命令行中输入sql或者命令来和Hive交互 首先在主节点上启动Hadoop集群,再启动hive元数据服务 启动hadoop start-all.sh 启动hive元数据服务 nohup hive --service me 阅读全文
posted @ 2024-11-10 19:55 w我自横刀向天笑 阅读(102) 评论(0) 推荐(0)
摘要:1、下载安装包 下载hive https://archive.apache.org/dist/hive/ 下载MySQL驱动包 https://mirrors.huaweicloud.com/mysql/Downloads/Connector-J/ 2、上传到Linux并解压 tar -zxvf a 阅读全文
posted @ 2024-11-08 21:52 w我自横刀向天笑 阅读(210) 评论(0) 推荐(0)