摘要: 目前实现的 Kafka 表,内部默认只会有一个消费者,这样会比较浪费资源并且性能达不到性能要求。一开始我们可以通过增大消费者的个数来增大消费能力,但社区的实现一开始是由一个线程去管理多个的消费者,多个的消费者各自解析输入数据并生成的 Input Stream 之后,会由一个 Union Stream 阅读全文
posted @ 2022-07-05 14:26 shan_zhayidian 阅读(643) 评论(0) 推荐(0) 编辑
摘要: 1、单独杀掉指定任务 yarn队列阻塞了,kill掉阻塞任务 yarn application -kill application_1653456817054_0239 2、杀掉全部ACCEPTED 任务 for i in ' yarn application -list | grep -w ACC 阅读全文
posted @ 2022-07-05 14:09 shan_zhayidian 阅读(1126) 评论(0) 推荐(0) 编辑