几种不同的推荐引擎比较
摘要：
以前也用了一些推荐算法写过一些应用，最近用上了网易云音乐，于是便想写篇推荐引擎的文章。 一.推荐引擎 主动发现用户当前或潜在需求，并主动推送信息给用户的信息网络。挖掘用户的喜好和需求，主动向用户推荐其感兴趣或者需要的对象。 二.推荐引擎的分类 1.基于人口统计学的推荐 根据... 阅读全文
posted @ 2015-05-11 18:25 毛小娃 阅读(178) 评论(0) 推荐(0) 编辑
spark-submit常用参数
摘要：
yarn模式默认启动2个executor，无论你有多少的worker节点 standalone模式每个worker一个executor，无法修改executor的数量 partition是RDD中的一个dataset，一般默认都是2个 executor中的task数量由partition... 阅读全文
posted @ 2015-05-11 15:01 毛小娃 阅读(878) 评论(0) 推荐(0) 编辑
