摘要：
对于连接kafka， 常见安全协议组合： PLAINTEXT: 不加密，不认证 SSL: 仅TLS加密 SASL_PLAINTEXT: SASL认证，不加密 SASL_SSL: SASL认证+TLS加密（最安全） 1. PLAINTEXT (不加密，不认证) java 复制 下载 Propertie 阅读全文
posted @ 2025-05-29 14:57
---江北
阅读(61)
评论(0)
推荐(0)
摘要：
import org.apache.spark.sql.Dataset; import org.apache.spark.sql.Row; import org.apache.spark.sql.SparkSession; import java.util.Arrays; public class 阅读全文
posted @ 2025-05-22 22:39
---江北
阅读(23)
评论(0)
推荐(0)
摘要：
Flink 的 Kafka 连接器 API 经历了多次重要变更，以下是主要版本变更及不同版本的使用方式： 您是否必须使用最新Flink特性？├─ 是 → 考虑升级Java环境└─ 否 → ├─ 项目是否需要长期支持(LTS) → 选择1.13.6 └─ 项目需要较新功能 → 选择1.15.4 主要版 阅读全文
posted @ 2025-05-22 16:01
---江北
阅读(113)
评论(0)
推荐(0)
该文被密码保护。 阅读全文
posted @ 2025-05-22 15:02
---江北
阅读(0)
评论(0)
推荐(0)
摘要：
CREATE TEMPORARY TABLE odps_sink ( id INT, len INT, content VARCHAR, ds VARCHAR --需要显式声明动态分区列。 ) WITH ( 'connector' = 'odps', 'endpoint' = '<yourEndpo 阅读全文
posted @ 2025-05-20 22:11
---江北
阅读(30)
评论(0)
推荐(0)
摘要：
常用的应用模式(application模式： 推荐使用这种方式，用户的代码是在jobmanager解析的，而不是在客户端解析的 bin/flink run-application -t yarn-application -c wordcount.flink_wc_socket flink_flink 阅读全文
posted @ 2025-05-14 10:15
---江北
阅读(71)
评论(0)
推荐(0)
摘要：
依赖： <!-- MySQL Connector --> <dependency> <groupId>mysql</groupId> <artifactId>mysql-connector-java</artifactId> <version>8.0.28</version> </dependenc 阅读全文
posted @ 2025-05-13 15:55
---江北
阅读(31)
评论(0)
推荐(0)
摘要：
项目目录结构： src/main/java/├── com.yourcompany.flink/│ ├── config/ # 配置相关类│ │ ├── FlinkConfig.java # Flink 环境配置│ │ └── KafkaConfig.java # Kafka 配置(如果使用)│ │ 阅读全文
posted @ 2025-05-06 11:03
---江北
阅读(29)
评论(0)
推荐(0)
摘要：
核心点：项目构建、依赖管理、【更新】：源码关联 依赖的scope的含义： 构建： clean：清理 compile：编译 test：运行测试 package：打包 打包fat-jar的插件：maven-shade-plugin 示例： <build> <sourceDirectory>src/mai 阅读全文
posted @ 2025-04-30 14:20
---江北
阅读(34)
评论(0)
推荐(0)
浙公网安备 33010602011771号