摘要: 1. 2. 阅读全文
posted @ 2020-04-29 09:05 时光剑客 阅读(566) 评论(0) 推荐(0) 编辑
摘要: C:\Windows\System32\drivers\etc 阅读全文
posted @ 2020-04-22 15:21 时光剑客 阅读(1011) 评论(0) 推荐(1) 编辑
摘要: sparkDriver 4040 sparkMaster 8080 spark历史服务 18080 阅读全文
posted @ 2020-02-27 00:40 时光剑客 阅读(74) 评论(0) 推荐(0) 编辑
摘要: ![](https://img2018.cnblogs.com/blog/1869085/202002/1869085-20200226232150990-1305340637.png) 阅读全文
posted @ 2020-02-26 23:22 时光剑客 阅读(67) 评论(0) 推荐(0) 编辑
摘要: MongoDB(单节点)环境配置 // 通过WGET下载Linux版本的MongoDB [bigdata@linux ~]$ wget https://fastdl.mongodb.org/linux/mongodb linux x86_64 rhel62 3.4.3.tgz // 将压缩包解压到指 阅读全文
posted @ 2020-02-20 15:29 时光剑客 阅读(404) 评论(0) 推荐(0) 编辑
摘要: // 快速排序:它的基本思想是:通过一趟排序将要排序的数据分割成独立的两部分,其中一部分的所有数据都比另外一部分的所有数据都要小, // 然后再按此方法对这两部分数据分别进行快速排序,整个排序过程可以递归进行,以此达到整个数据变成有序序列。 阅读全文
posted @ 2020-02-17 14:23 时光剑客 阅读(124) 评论(0) 推荐(0) 编辑
摘要: / @ClassName TestApi 一. DDL 0. 判断表是否存在 1. 创建表 Create 2. 删除表 disable drop 3. 创建命名空间 Create NameSpace 二. DML 1. 添加数据 put 2. 查询(get) 3. 查询(scan) 4. 删除数据 阅读全文
posted @ 2020-02-17 13:24 时光剑客 阅读(143) 评论(0) 推荐(0) 编辑
摘要: 最近在spark读取kafka消息时,每次读取都会从kafka最新的offset读取。但是如果数据丢失,如果在使用Kafka来分发消息,在数据处理的过程中可能会出现处理程序出异常或者是其它的错误,会造成数据丢失或不一致。这个时候你也许会想要通过kafka把数据从新处理一遍,或者指定kafka的off 阅读全文
posted @ 2020-02-16 21:39 时光剑客 阅读(998) 评论(0) 推荐(0) 编辑
摘要: follower故障 follower发生故障后会被临时踢出ISR,待该follower恢复后,follower会读取本地磁盘记录的上次的HW,并将log文件高于HW的部分截取掉,从HW开始向leader进行同步。等该follower的LEO大于等于该Partition的HW,即follower追上 阅读全文
posted @ 2020-02-16 20:48 时光剑客 阅读(389) 评论(0) 推荐(0) 编辑
摘要: Ctrl+Z:撤销 Ctrl+Shift+Z:重做 Ctrl+X:剪贴 Ctrl+C:复制 Ctrl+V:粘贴 Ctrl+Y:删除当前行 Ctrl+D:复制当前行 Ctrl+Shift+J:将选中的行合并成一行 Ctrl+N:查找类文件 Ctrl+Shift+N:查找文件 Ctrl+G:定位到文件某 阅读全文
posted @ 2020-02-14 21:00 时光剑客 阅读(138) 评论(0) 推荐(0) 编辑