10 2019 档案

摘要:1、遇到的问题:上测试环境,上次描述的鸟问题又出现了,就是生产者发3条数据,我这边只能收到1条数据。 2、问题解决: (1)去控制台看我的消费者启动情况,貌似没什么问题 , (2)去测试服务器里看日志信息:只有入库的那条是真的接收到了,其余压根就没有接收到,排除入库过程的代码问题。到此,问题只锁定在 阅读全文
posted @ 2019-10-15 15:06 guoyu1 阅读(22585) 评论(2) 推荐(1) 编辑
摘要:一、在idea中调试spark程序-配置windows上的 spark local模式 spark程序大致有如下运行模式: standalone模式:spark自带的模式 spark on yarn:利用hadoop yarn来做集群的资源管理 local模式:主要在测试的时候使用, 这三个模式先大 阅读全文
posted @ 2019-10-13 23:22 guoyu1 阅读(1261) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示