摘要: ①点对点模式 该种模式就是消费者会自动消费消息,消息收到之后会向消息队列进行确认收到消息,然后将该数据进行删除。 ②发布/订阅模式 可以有多个的topic,topic在英语中有主题的意思,这里就这样理解就行。类似于前文中的多个topic,例如浏览,点赞,收藏,评论等等。 多个消费者在进行数据的消费之 阅读全文
posted @ 2023-01-03 13:30 程序员hg 阅读(98) 评论(0) 推荐(0) 编辑
摘要: kafka拥有与其他几个消息队列同样的本事: ①缓冲/削峰:控制和优化数据经过系统的速度,解决生产消息和消费消息的处理速度不一致的情况。 应用场景:双十一秒杀活动,将用户消息写入消息队列中,我们的服务再来进行慢慢处理,这样也不会将我们的服务进行压垮,对于三高系统的来说一般都会采用这种消息中间件。 例 阅读全文
posted @ 2023-01-03 13:23 程序员hg 阅读(2) 评论(0) 推荐(0) 编辑
摘要: 类似于京东商城这种电商系统,一般会在前端页面进行埋点记录仪用户的行为数据,包括浏览、点赞、收藏、评论等。这些行为会被记录到日志服务器中,使用Flume进行采集,然后传入Hadoop中。 Flume采集的数据,在日常中一般是小于每秒100M的,Hadoop的上传速度一般也是每秒100M左右,但是一旦出 阅读全文
posted @ 2023-01-03 13:04 程序员hg 阅读(20) 评论(0) 推荐(0) 编辑