摘要: 1、你要切换到yarn-cluster或者yarn-client模式,很简单,将我们之前用于提交spark应用程序的spark-submit脚本,加上--master参数,设置为yarn-cluster,或yarn-client,即可。如果你没设置,那么,就是standalone模式。2、yarn集 阅读全文
posted @ 2019-09-19 17:36 hulifang 阅读(2587) 评论(1) 推荐(0) 编辑
摘要: 首先acks参数,是在kafkaProducer,也就是在生产者客户端里设置的也就是说,你往kafka写东西的时候,就可以设置这个参数。 这个参数实际上有三种值可以设置,分别是0,1,和all. 第一种选择是把参数设置成0 我的kafkaProducer在客户端,只要把消息发送出去,不管那条数据有没 阅读全文
posted @ 2019-09-19 16:57 hulifang 阅读(11272) 评论(1) 推荐(3) 编辑