Navicat远程连接Linux的MySQL服务Error10061的解决方案
摘要：Navicat远程连接Linux的MySQL服务Error10061的解决方案 文章目录 Navicat远程连接Linux的MySQL服务Error10061的解决方案写在前面解决方法 写在前面 Linux：Ubuntu Kylin16.04MySQL: 5.7.33 解决方法 原因：关于Error
阅读全文
posted @
2022-10-29 05:30
WHYBIGDATA
阅读(80)
推荐(0) 编辑
Hive命令使用记录
摘要：Hive命令使用记录 文章目录 Hive命令使用记录操作一些常用的Bash Shell 命令：操作HDFS 平台相关的命令：查看当前使用的数据库创建表的时候通过location 指定数据存储位置， 加载数据隐式类型转换的规则如下 操作一些常用的Bash Shell 命令： hive>紧跟一个"!"
阅读全文
posted @
2022-10-24 15:41
WHYBIGDATA
阅读(20)
推荐(0) 编辑
数仓采集通道的设计
摘要：数仓采集通道的设计 文章目录 数仓采集通道的设计写在前面方案一：方案二：方案三：最终方案 写在前面 离线和实时数仓共用一套数据采集通道系统数据采集存储到HDFS上完全分布式（三台节点） 方案一： (node01)Flume（TailDir Source） + Kafka Channel + HDFS
阅读全文
posted @
2022-10-17 05:30
WHYBIGDATA
阅读(37)
推荐(0) 编辑
Arrays.stream().boxed()的使用
摘要：Arrays.stream().boxed()的使用 文章目录 Arrays.stream().boxed()的使用0. 写在前面1. Arrays.stream()的使用算法：代码：输出结果： 2. boxed()的使用boxed()方法实现在原始类型「primitives」和盒式类型「boxed
阅读全文
posted @
2022-10-09 05:30
WHYBIGDATA
阅读(271)
推荐(0) 编辑
Flume中 File Channel 的优化
摘要：Flume中 File Channel 的优化 文章目录 Flume中 File Channel 的优化@[toc]File Channel 的特点File Channel 的优化索引索引备份 Flume官方优化设计概述（Overview）设计（Design）FileChannel的实现（Imple
阅读全文
posted @
2022-10-08 05:30
WHYBIGDATA
阅读(17)
推荐(0) 编辑
关于Hadoop集群物理及虚拟内存的检测的设置说明
摘要：关于Hadoop集群物理及虚拟内存的检测的设置说明 文章目录 关于Hadoop集群物理及虚拟内存的检测的设置说明写在前面正文不能关闭对物理内存的检测关闭对虚拟内存的检测 参考 写在前面 Linux：CentOS7.5Java：JDK8Hadoop：Hadoop3.1.3场景：离线数仓集群搭建 正文
阅读全文
posted @
2022-10-07 05:30
WHYBIGDATA
阅读(55)
推荐(0) 编辑
Linux好用的管道命令
摘要：Linux好用的管道命令 文章目录 Linux好用的管道命令1. 选取命令grepcut「分割」 2. 排序命令sortwcuniq 3. 划分命令 split4. 参数代换xargs5. 数据处理工具awk 6. sed工具7. 参考 1. 选取命令 grep 用法 grep [-acinv] [
阅读全文
posted @
2022-10-02 05:30
WHYBIGDATA
阅读(347)
推荐(0) 编辑
