随笔分类 - 大数据/Flink

摘要：需要解决实际问题：乱序阅读全文

posted @ 2019-03-09 17:56 江东邮差阅读(653) 评论(0) 推荐(0) 编辑

摘要：一般情况下，开发大数据处理程序，我们希望能够在本地编写代码并调试通过，能够在本地进行数据测试，然后在生产环境去跑“大”数据。一、nc工具配置windows的nc端口，在网上下载nc.exe(https://eternallybored.org/misc/netcat/) 使用命令开始nc制定端口阅读全文

posted @ 2019-02-26 00:22 江东邮差阅读(5332) 评论(0) 推荐(0) 编辑

Apache Flink系列（1）-概述

摘要：一、设计思想及介绍基本思想：“一切数据都是流，批是流的特例” 1.Micro Batching 模式在Micro-Batching模式的架构实现上就有一个自然流数据流入系统进行攒批的过程，这在一定程度上就增加了延时。具体如下示意图： 2.Native Streaming 模式 Native St 阅读全文

posted @ 2018-12-18 20:45 江东邮差阅读(541) 评论(0) 推荐(0) 编辑