sunny123456

  博客园 :: 首页 :: 博问 :: 闪存 :: 新随笔 :: 联系 :: 订阅 订阅 :: 管理 ::
上一页 1 ··· 18 19 20 21 22 23 24 25 26 ··· 183 下一页

2024年4月2日

摘要: 【超好用的工具库】hutool-all工具库的基本使用 简介(可不看): hutool-all是一个Java工具库,提供了许多实用的工具类和方法,用于简化Java开发过程中的常见任务。它包含了各种模块,涵盖了字符串操作、日期时间处理、加密解密、文件操作、网络通信、图片处理等多个领域。hutool-a 阅读全文
posted @ 2024-04-02 19:31 sunny123456 阅读(1307) 评论(0) 推荐(0)

摘要: 搜索Maven相关依赖jar包(特别推荐)https://mvnrepository.com/ 根据maven查询jar包的步骤如下: 打开Maven仓库中央库的网站https://mvnrepository.com/在搜索框中输入你需要查询的jar包的名称,例如:hutool-all点击搜索按钮, 阅读全文
posted @ 2024-04-02 12:59 sunny123456 阅读(225) 评论(0) 推荐(0)

摘要: Java里如何查找第三方包/依赖的api文档 众所周知,要查找第三方包的api介绍说明,在golang里,直接去这个网站搜索即可:https://pkg.go.dev/​pkg.go.dev/ 在Python里则是去PyPi:PyPI · The Python Package Index (详细方法 阅读全文
posted @ 2024-04-02 12:58 sunny123456 阅读(93) 评论(0) 推荐(0)

2024年3月28日

摘要: Apache Flink 简介 前言 计算引擎 大数据计算引擎分为离线计算和实时计算,离线计算就是我们通常说的批计算,代表是Hadoop MapReduce、Hive等大数据技术。实时计算也被称作流计算,代表是Storm、Spark Streaming、Flink等大数据技术。 计算引擎也在不断更新 阅读全文
posted @ 2024-03-28 12:57 sunny123456 阅读(47) 评论(0) 推荐(0)

2024年3月27日

摘要: 大数据开发之CDH使用搭建大数据平台 1、CDH介绍 它是Cloudera公司提供的一种大数据平台解决方案。CDH的全称是Cloudera’s Distribution including Apache Hadoop,它是一个开放源代码的大数据平台,基于Apache Hadoop和其他相关的开源技术 阅读全文
posted @ 2024-03-27 19:48 sunny123456 阅读(346) 评论(0) 推荐(0)

摘要: Flink-运行时架构介绍 文章目录 Flink 运行时架构系统架构整体架构作业管理器(JobManager)任务管理器(TaskManager) 作业提交流程高层级抽象视角独立模式(Standalone)YARN 集群 数据流图(Dataflow Graph)并行度(Parallelism)算子链 阅读全文
posted @ 2024-03-27 19:42 sunny123456 阅读(95) 评论(0) 推荐(0)

摘要: flink dtach 提交模式 在Flink中,dtach是一个用于启动Flink作业的工具,它允许用户在后台运行Flink作业,并且在用户登出会话后,作业将继续运行。 Flink支持两种提交作业的方式:通过CLI(命令行接口)和通过编程接口。 通过CLI提交作业: 在命令行中,你可以使用flin 阅读全文
posted @ 2024-03-27 19:41 sunny123456 阅读(146) 评论(0) 推荐(0)

2024年3月26日

摘要: 在Flink 1.11中,assignTimestampsAndWatermarks方法已经被新的方法assignTimestamps和assignWatermarks所替代。这是为了更好地将时间戳和水位线的定义分离开来 以下是使用新API的示例代码: import org.apache.flink 阅读全文
posted @ 2024-03-26 10:54 sunny123456 阅读(213) 评论(0) 推荐(0)

2024年3月25日

摘要: Flink: Function And Rich Function , 对比 Function ,Rich functions还提供了这些方法:open、close、getRuntimeContext 和 setRuntimeContext 序言 了解了Flink提供的算子,那我们就可以自定义算子了 阅读全文
posted @ 2024-03-25 19:53 sunny123456 阅读(212) 评论(0) 推荐(0)

摘要: Flink 流数据处理 基于Flink1.12.0版本 MapFunction 只适用于一对一的转换,而 FlatMapFunction中可以一对多,或者多对一 序言 基于官网教程整理的一个教程。基于Flink1.12.0版本。 目前该版本的Flink支持的source与sink如下所示 参考资料: 阅读全文
posted @ 2024-03-25 19:49 sunny123456 阅读(119) 评论(0) 推荐(0)

上一页 1 ··· 18 19 20 21 22 23 24 25 26 ··· 183 下一页