摘要: 一. 常用hive引擎 自带的mr引擎,不需要额外配置 hive on spark 在hive的搭建博客中已经进行了hive on spark的配置 https://www.cnblogs.com/lebaishi/p/15693708.html hive on tez 基于内存计算的引擎 二. 配 阅读全文
posted @ 2021-12-16 18:20 乐百事 阅读(446) 评论(0) 推荐(0) 编辑
摘要: 事件背景: 早上的时候elk都是正常的,结果下午发现从10点之后很多索引的日志都收不到了,只有极个别索引有日志刷新. 日志有三种接入方式: 1. filebeat-->logstash-->es 2. rsyslog-->logstash-->es 3. filebeat-->kafka-->log 阅读全文
posted @ 2021-12-16 17:31 乐百事 阅读(874) 评论(0) 推荐(0) 编辑
摘要: 1.官网下载安装包: http://mirrors.hust.edu.cn/apache/sqoop/1.4.6/ 2.安装sqoop 上传安装包并解压 上传安装包 sqoop-1.4.6.bin__hadoop-2.0.4-alpha.tar.gz 到服务器上,进入安装包所在的路径执行解压命令: 阅读全文
posted @ 2021-12-16 14:30 乐百事 阅读(37) 评论(0) 推荐(0) 编辑