Xiaohu_BigData

2025年2月26日

Flink1.18 Sink - 到JDBC 使用新依赖【因返回值是sinkFunction, 故目前只支持addSink使用, 1.18版本不支持sinkTo】

摘要：自行修改对应数据库参数和配置 package com.xiaohu.sink; import org.apache.flink.api.common.functions.MapFunction; import org.apache.flink.connector.jdbc.JdbcConnectio 阅读全文

posted @ 2025-02-26 20:44 Xiaohu_BigData 阅读(170) 评论(0) 推荐(0)

Flink1.18 Sink - 到Kafka自定义序列化类新版本写法sinkTo的使用

摘要： package com.xiaohu.sink; import org.apache.flink.api.common.serialization.SimpleStringSchema; import org.apache.flink.connector.base.DeliveryGuarantee 阅读全文

posted @ 2025-02-26 20:42 Xiaohu_BigData 阅读(97) 评论(0) 推荐(0)

Flink1.18 Sink - 到Kafka 新版本写法sinkTo的使用

摘要： package com.xiaohu.sink; import com.xiaohu.bean.WaterSensor; import org.apache.flink.api.common.functions.MapFunction; import org.apache.flink.api.com 阅读全文

posted @ 2025-02-26 20:42 Xiaohu_BigData 阅读(220) 评论(0) 推荐(0)

Flink1.18 Sink - 到文件新版本写法sinkToFile

摘要： package com.xiaohu.sink; import org.apache.flink.api.common.eventtime.WatermarkStrategy; import org.apache.flink.api.common.serialization.SimpleString 阅读全文

posted @ 2025-02-26 20:40 Xiaohu_BigData 阅读(110) 评论(0) 推荐(0)

Flink1.18 Transfrom - 合流【Connect 两个流数据进行关联】

摘要： package com.xiaohu.transfrom.streamtranform; import org.apache.flink.api.java.tuple.Tuple2; import org.apache.flink.api.java.tuple.Tuple3; import org. 阅读全文

posted @ 2025-02-26 20:37 Xiaohu_BigData 阅读(75) 评论(0) 推荐(0)

Flink1.18 Transfrom - 合流【Connect, 并行度为1的情况】

摘要： package com.xiaohu.transfrom.streamtranform; import org.apache.flink.streaming.api.datastream.ConnectedStreams; import org.apache.flink.streaming.api. 阅读全文

posted @ 2025-02-26 20:36 Xiaohu_BigData 阅读(38) 评论(0) 推荐(0)

Flink1.18 Transfrom - 合流【Union】

摘要： package com.xiaohu.transfrom.streamtranform; import org.apache.flink.streaming.api.datastream.DataStream; import org.apache.flink.streaming.api.datast 阅读全文

posted @ 2025-02-26 20:35 Xiaohu_BigData 阅读(23) 评论(0) 推荐(0)

Flink1.18 Transfrom - 分流【侧输出流 ProcessFunction】

摘要： package com.xiaohu.transfrom.streamtranform; import com.xiaohu.bean.WaterSensor; import com.xiaohu.transfrom.MyPartitioner; import org.apache.flink.ap 阅读全文

posted @ 2025-02-26 20:35 Xiaohu_BigData 阅读(61) 评论(0) 推荐(0)

Flink1.18 Transfrom - 分流【Filter】

摘要： package com.xiaohu.transfrom.streamtranform; import com.xiaohu.transfrom.MyPartitioner; import org.apache.flink.api.java.functions.KeySelector; import 阅读全文

posted @ 2025-02-26 20:33 Xiaohu_BigData 阅读(29) 评论(0) 推荐(0)

Flink1.18 Transfrom - CustomPartition自定义分区器

摘要：自定义分区类，实现Partitioner接口 package com.xiaohu.transfrom; import org.apache.flink.api.common.functions.Partitioner; public class MyPartitioner implements P 阅读全文

posted @ 2025-02-26 20:32 Xiaohu_BigData 阅读(68) 评论(0) 推荐(0)

公告