大数据技术 - 随笔分类 - 小勇DW3

storm是如何保证at least once语义的?

摘要：正文前先来一波福利推荐：福利一：百万年薪架构师视频，该视频可以学到很多东西，是本人花钱买的VIP课程，学习消化了一年，为了支持一下女朋友公众号也方便大家学习，共享给大家。福利二：毕业答辩以及工作上各种答辩，平时积累了不少精品PPT，现在共享给大家，大大小小加起来有几千套，总有适合你的一款，很阅读全文

posted @ 2019-12-10 17:53 小勇DW3 阅读(416) 评论(0) 推荐(0) 编辑

线上Storm的worker，executor，task参数调优篇

摘要：正文前先来一波福利推荐：福利一：百万年薪架构师视频，该视频可以学到很多东西，是本人花钱买的VIP课程，学习消化了一年，为了支持一下女朋友公众号也方便大家学习，共享给大家。福利二：毕业答辩以及工作上各种答辩，平时积累了不少精品PPT，现在共享给大家，大大小小加起来有几千套，总有适合你的一款，很阅读全文

posted @ 2019-11-22 15:25 小勇DW3 阅读(1380) 评论(0) 推荐(0) 编辑

StormUI各参数详解

摘要：正文前先来一波福利推荐：福利一：百万年薪架构师视频，该视频可以学到很多东西，是本人花钱买的VIP课程，学习消化了一年，为了支持一下女朋友公众号也方便大家学习，共享给大家。福利二：毕业答辩以及工作上各种答辩，平时积累了不少精品PPT，现在共享给大家，大大小小加起来有几千套，总有适合你的一款，很阅读全文

posted @ 2019-11-22 10:26 小勇DW3 阅读(275) 评论(0) 推荐(0) 编辑

Spark2.0学习记录

摘要：正文前先来一波福利推荐：福利一：百万年薪架构师视频，该视频可以学到很多东西，是本人花钱买的VIP课程，学习消化了一年，为了支持一下女朋友公众号也方便大家学习，共享给大家。福利二：毕业答辩以及工作上各种答辩，平时积累了不少精品PPT，现在共享给大家，大大小小加起来有几千套，总有适合你的一款，很阅读全文

posted @ 2019-07-13 12:56 小勇DW3 阅读(189) 评论(0) 推荐(0) 编辑

rowkey散列和预分区设计解决hbase热点问题(数据倾斜)

摘要：Hbase的表会被划分为1....n个Region,被托管在RegionServer中。Region二个重要的属性：Startkey与EndKey表示这个Region维护的rowkey的范围，当我们要读写数据时，如果rowkey落在某个start-end key范围内，那么就会定位到目标region 阅读全文

posted @ 2019-07-05 09:34 小勇DW3 阅读(718) 评论(0) 推荐(0) 编辑

Flume原理分析与使用案例

摘要：正文前先来一波福利推荐：福利一：百万年薪架构师视频，该视频可以学到很多东西，是本人花钱买的VIP课程，学习消化了一年，为了支持一下女朋友公众号也方便大家学习，共享给大家。福利二：毕业答辩以及工作上各种答辩，平时积累了不少精品PPT，现在共享给大家，大大小小加起来有几千套，总有适合你的一款，很阅读全文

posted @ 2019-05-13 11:45 小勇DW3 阅读(343) 评论(0) 推荐(0) 编辑

Windows环境下安装Hadoop+Hive的使用案例

摘要：正文前先来一波福利推荐：福利一：百万年薪架构师视频，该视频可以学到很多东西，是本人花钱买的VIP课程，学习消化了一年，为了支持一下女朋友公众号也方便大家学习，共享给大家。福利二：毕业答辩以及工作上各种答辩，平时积累了不少精品PPT，现在共享给大家，大大小小加起来有几千套，总有适合你的一款，很阅读全文

posted @ 2019-05-09 12:40 小勇DW3 阅读(1533) 评论(0) 推荐(0) 编辑

基于hadoop的离线分析大数据工具Hive的架构图

摘要：一、Hadoop理论 Hadoop是一个专为离线和大规模数据分析而设计的，并不适合那种对几个记录随机读写的在线事务处理模式。 Hadoop=HDFS（文件系统，数据存储技术相关）+ Mapreduce（数据处理）一、HDFS部分： Hadoop的数据来源可以是任何形式，在处理半结构化和非结构化数据阅读全文

posted @ 2019-04-26 15:40 小勇DW3 阅读(2581) 评论(0) 推荐(0) 编辑

海量数据，大数据处理技术--分布式数据库【Hbase】

摘要：正文前先来一波福利推荐：福利一：百万年薪架构师视频，该视频可以学到很多东西，是本人花钱买的VIP课程，学习消化了一年，为了支持一下女朋友公众号也方便大家学习，共享给大家。福利二：毕业答辩以及工作上各种答辩，平时积累了不少精品PPT，现在共享给大家，大大小小加起来有几千套，总有适合你的一款，很阅读全文

posted @ 2019-04-13 12:14 小勇DW3 阅读(693) 评论(0) 推荐(0) 编辑

亿级流量场景下，大型架构设计实现【2】---storm篇

摘要：正文前先来一波福利推荐：福利一：百万年薪架构师视频，该视频可以学到很多东西，是本人花钱买的VIP课程，学习消化了一年，为了支持一下女朋友公众号也方便大家学习，共享给大家。福利二：毕业答辩以及工作上各种答辩，平时积累了不少精品PPT，现在共享给大家，大大小小加起来有几千套，总有适合你的一款，很阅读全文

posted @ 2019-03-17 11:31 小勇DW3 阅读(703) 评论(0) 推荐(0) 编辑

随笔分类 - 大数据技术