会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
天生自然
Powered by
博客园
博客园
|
首页
|
新随笔
|
联系
|
订阅
|
管理
2020年1月9日
吴裕雄--天生自然HADOOP操作实验学习笔记:协同过滤算法
摘要: 实验目的 初步认识推荐系统 学会用mapreduce实现复杂的算法 学会系统过滤算法的基本步骤 实验原理 前面我们说过了qq的好友推荐,其实推荐算法是所有机器学习算法中最重要、最基础、最复杂的算法,一个推荐系统的架构,需要综合考虑离线计算、实时计算。需要用到的技术可能还有Flume、Kafka、Re
阅读全文
posted @ 2020-01-09 10:39 吴裕雄
阅读(495)
评论(0)
推荐(0)
编辑
吴裕雄--天生自然HADOOP操作实验学习笔记:pagerank算法
摘要: 实验目的 了解PageRank算法 学会用mapreduce解决实际的复杂计算问题 实验原理 1.pagerank算法简介 PageRank,即网页排名,又称网页级别、Google左侧排名或佩奇排名。 pagerank是Google排名运算法则(排名公式)的一部分,pagerank是Google用于
阅读全文
posted @ 2020-01-09 01:09 吴裕雄
阅读(370)
评论(0)
推荐(0)
编辑
吴裕雄--天生自然HADOOP操作实验学习笔记:qq好友推荐算法
摘要: 实验目的 初步认识图计算的知识点 复习mapreduce的知识点,复习自定义排序分组的方法 学会设计mapreduce程序解决实际问题 实验原理 QQ好友推荐算法是所有推荐算法中思路最简单的,我们利用的思想就是好友的好友很有可能是自己的好友,而共同好友越多,说明两个人认识的可能性越大。其实这个想法属
阅读全文
posted @ 2020-01-09 00:53 吴裕雄
阅读(838)
评论(0)
推荐(0)
编辑
吴裕雄--天生自然HADOOP操作实验学习笔记:Wor的Count程序的编写
摘要: 实验目的 理解mapreduce的工作原理 理解Partitioner的书写方法 理解GroupingComparator的书写方法 实验原理 我们已经学习了hadoop的大部分基础知识,剩下的就是利用hadoop解决实际的业务问题。首先我们回顾一下mapreduce的工作过程: 数据通过Input
阅读全文
posted @ 2020-01-09 00:43 吴裕雄
阅读(214)
评论(0)
推荐(0)
编辑