实时人群计算——设想

实时人群计算——设想#


目的###

  • 做到实时人群打标

技术###

  • spark streaming

  • 在前段创建一些判断条件,例如订单访问次数等,以此为依据创建人群。
  • spark streaming 周期从mysql拉取新创建的人群
  • 以batch进来的人为key,从kv存储中拉取当前人的信息
  • 把获取的数据与创建的人群规则一一匹配,判断是否满足条件
  • 满足条件的交给下一节点批量写入kv完成打标签服务
posted @ 2016-01-19 18:36  逸新  阅读(505)  评论(0编辑  收藏  举报