小白啊小白，Fighting

2021年1月4日

摘要：知识点：一致性：https://ci.apache.org/projects/flink/flink-docs-release-1.11/dev/connectors/guarantees.html env.setStateBackend( new FsStateBackend("hdfs://u 阅读全文

posted @ 2021-01-04 10:48 小白啊小白，Fighting 阅读(973) 评论(0) 推荐(0) 编辑

Flink状态之OperatorState

摘要：知识点： Flink 为算子状态(operator state)提供三种基本数据结构：  列表状态（List state）: 将状态表示为一组数据的列表。  联合列表状态（Union list state）: 也将状态表示为数据的列表。它与常规列表状态的区别在于，在发生故障时，或者从保存点（s 阅读全文

posted @ 2021-01-04 10:47 小白啊小白，Fighting 阅读(2104) 评论(0) 推荐(0) 编辑

Flink状态之AggregateState

摘要： 1、主类 package com.example.demo.flink; import com.example.demo.flink.impl.CountAverageWithAggregateState; import com.example.demo.flink.impl.CountAverag 阅读全文

posted @ 2021-01-04 10:45 小白啊小白，Fighting 阅读(876) 评论(0) 推荐(0) 编辑

Flink状态之ReduceState

摘要： 1、主类 package com.example.demo.flink; import com.example.demo.flink.impl.CountAverageWithMapState; import com.example.demo.flink.impl.CountAverageWithR 阅读全文

posted @ 2021-01-04 10:43 小白啊小白，Fighting 阅读(1013) 评论(0) 推荐(0) 编辑

Flink状态之MapState

摘要： 1、主类 package com.example.demo.flink; import com.example.demo.flink.impl.CountAverageWithMapState; import com.example.demo.flink.impl.CountAverageWithV 阅读全文

posted @ 2021-01-04 10:41 小白啊小白，Fighting 阅读(6792) 评论(0) 推荐(0) 编辑

Flink状态之KeyedListState

摘要： 1、主类 package com.example.demo.flink; import com.example.demo.flink.impl.CountAverageWithListState; import com.example.demo.flink.impl.CountAverageWith 阅读全文

posted @ 2021-01-04 10:39 小白啊小白，Fighting 阅读(936) 评论(0) 推荐(0) 编辑

Flink状态之KeyedVauleState

摘要： 1、主类 package com.example.demo.flink; import com.example.demo.flink.impl.CountAverageWithValueState; import org.apache.flink.api.common.functions.FlatM 阅读全文

posted @ 2021-01-04 10:38 小白啊小白，Fighting 阅读(322) 评论(0) 推荐(0) 编辑

2020年12月30日

Flink执行job两种方式

摘要： 1、直接执行方式 #! /bin/bash #首先启动nc # nc -lk 5000 （注意，请在另一个窗口启动） #执行flink任务 ../bin/flink run demo.jar -d & 2、指定checkpoint点执行 #! /bin/bash #首先启动nc # nc -lk 5 阅读全文

posted @ 2020-12-30 14:11 小白啊小白，Fighting 阅读(1564) 评论(0) 推荐(0) 编辑

2020年12月29日

Idea打包flink的job

摘要： 1、pom.xml指定入口文件 <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema- 阅读全文

posted @ 2020-12-29 17:16 小白啊小白，Fighting 阅读(785) 评论(0) 推荐(0) 编辑

显示Flink界面三种方式

摘要： idea方式一： a）添加flink-dist包 b)代码 import com.example.demo.flink.impl.SplitWordFunction; import org.apache.flink.api.java.tuple.Tuple2; import org.apache.f 阅读全文

posted @ 2020-12-29 15:49 小白啊小白，Fighting 阅读(1536) 评论(0) 推荐(0) 编辑

小白

公告