会员
周边
众包
新闻
博问
闪存
赞助商
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
moon__light
博客园
首页
新随笔
联系
订阅
管理
随笔 - 126
文章 - 0
评论 - 9
阅读 -
13万
随笔分类 -
Kafka
Kafka 机制和 Kafka-Stream
摘要:目录Kafka 优势高吞吐量原因零拷贝反压消息文件topic 的 delete 和 compact 机制数据清除策略消息内容Partition、Key、有序数据GroupZooKeeper 作用和不足Kafka Stream 优势和不足Kafka Stream 配置 group id 和线程数量Ka
阅读全文
posted @
2023-12-17 01:00
moon~light
阅读(323)
评论(0)
推荐(0)
编辑
公告
昵称:
moon~light
园龄:
5年1个月
粉丝:
4
关注:
0
+加关注
<
2025年3月
>
日
一
二
三
四
五
六
23
24
25
26
27
28
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
1
2
3
4
5
搜索
常用链接
我的随笔
我的评论
我的参与
最新评论
我的标签
我的标签
Python
(1)
积分与排名
积分 - 105174
排名 - 14716
随笔分类
Cassandra(1)
CICD(1)
Cloud(1)
Distributed & BigData(3)
Docker(11)
ElasticSearch(1)
Flink(5)
git(1)
go(1)
Hadoop(2)
HBase & Phoenix(4)
IoT(2)
Java(21)
Kafka(1)
Keycloak(1)
MachineLearning(36)
Postgres(3)
Python(10)
Redis(4)
Spark(14)
Ubuntu(6)
Web(2)
Windows(1)
更多
随笔档案
2024年9月(1)
2023年12月(5)
2022年12月(2)
2022年11月(4)
2022年9月(1)
2022年2月(1)
2022年1月(7)
2021年9月(1)
2021年8月(3)
2021年7月(2)
2021年4月(1)
2021年3月(3)
2021年1月(9)
2020年12月(11)
2020年11月(5)
2020年10月(4)
2020年9月(6)
2020年7月(2)
2020年6月(2)
2020年5月(10)
2020年4月(9)
2020年3月(21)
2020年2月(13)
2020年1月(3)
更多
阅读排行榜
1. Spark on K8S (Kubernetes Native)(13441)
2. Keycloak 的简单使用(11613)
3. K8S 设置 Pod 使用 host 网络、配置 DNS(6175)
4. Kubernetes:通过 minikube 安装单机测试环境(4959)
5. Spark on K8S - Operator(3739)
评论排行榜
1. Spark on K8S - Client Mode(4)
2. Keycloak 的简单使用(2)
3. Spark on K8S - Operator(1)
4. K8S 的 Service 类型(1)
5. Docker 安装和使用(1)
推荐排行榜
1. Quarkus 入门(1)
2. K8S 的 Service 类型(1)
3. Spark on K8S (Kubernetes Native)(1)
4. Kubernetes:通过 minikube 安装单机测试环境(1)
5. python 获取调用栈和行号(1)
最新评论
1. Re:Spark on K8S - Operator
message: Back-off pulling image "gcr.io/spark-operator/spark-operator:latest" reason: ImagePullBackO...
--Evan17
2. Re:Spark on K8S - Client Mode
@haozhang2016 如果你说的定义指 Dockerfile 的话,可以去官网把 spark 包下载下来后,在 kubernetes 目录下,就有...
--moon~light
3. Re:Spark on K8S - Client Mode
@风云力 对的,以前都是用 YARN 当集群,但现在其他很多服务都是用 K8S,继续用 YARN 不利于资源的统一管理和调度,并且浪费额外的人力物力去维护 YARN 集群,现在把 K8S 作为 Spa...
--moon~light
4. Re:Spark on K8S - Client Mode
您好,可以贴一下 image spark-py:2.4.6 的定义吗? 我也在试 spark on k8s 的client mode, 一直有个“WARN TaskSchedulerImpl: Ini...
--haozhang2016
5. Re:Spark on K8S - Client Mode
你的场景,感觉 spark 集群本身就在k8s。
--风云力
点击右上角即可分享