futurehau

导航

 

2016年11月22日

摘要: 接水问题 Container With Most Water Given n non-negative integers a1, a2, ..., an, where each represents a point at coordinate (i, ai). n vertical lines ar 阅读全文
posted @ 2016-11-22 15:22 futurehau 阅读(500) 评论(0) 推荐(0) 编辑
 

2016年11月19日

摘要: 拉格朗日乘子法最小值转化为对偶函数最大值问题在SVM部分有很重要的作用,今天详细听了邹博老师凸优化课程关于这部分的讲解,做一个小小的总结。 一、知识铺垫 1. 保凸算子 凸函数的非负加权和 : 凸函数与仿射函数的复合: 凸函数的逐点最大值、逐点上确界: 第一个和第二个直接使用定义还是挺简单的,因为后 阅读全文
posted @ 2016-11-19 00:07 futurehau 阅读(3780) 评论(0) 推荐(0) 编辑
 

2016年11月16日

摘要: 推荐系统我们都很熟悉,淘宝推荐用户可能感兴趣的产品,搜索引擎帮助用户发现可能感兴趣的东西,这些都是推荐系统的内容。接下来讲述一个电影推荐的项目。 一、电影推荐系统中的算法 User Collaborative Filtering (User CF) Item Collaborative Filter 阅读全文
posted @ 2016-11-16 15:16 futurehau 阅读(775) 评论(0) 推荐(0) 编辑
 

2016年11月14日

摘要: 另一篇介绍的很好的博客:http://blog.jobbole.com/71431/ 一、什么是PageRank PageRank 是对搜索引擎的搜索网页进行排序的算法。 过去的排序算法是比如使用网页名字,关键词出现的次数,人工等方法,但是这种方法一方面搜索结果不准确,另一方面搜索结果容易被人为因素 阅读全文
posted @ 2016-11-14 18:00 futurehau 阅读(3945) 评论(0) 推荐(0) 编辑
 

2016年11月11日

摘要: 1.设置文件读入分隔符 默认按行读入; 按句子读入 : conf1.set("textinputformat.record.delimiter", "."); 2.set up 方法 此方法被MapReduce框架仅且执行一次,在执行Map任务前,进行相关变量或者资源的集中初始化工作。 若是将资源初 阅读全文
posted @ 2016-11-11 23:18 futurehau 阅读(209) 评论(0) 推荐(0) 编辑
 
摘要: 以下教程来自九章算法。 1.How to install Docker https://bupt.quip.com/YehSAR4qnGqB 2.How to set up hadoop environment https://bupt.quip.com/85VvAGqcb0Lg 3.Setup L 阅读全文
posted @ 2016-11-11 00:33 futurehau 阅读(378) 评论(0) 推荐(0) 编辑
 

2016年11月10日

摘要: Two kind of database architectures: Master slave model High consistency Simpler design Single master node is not robust Peer peer model Distributes re 阅读全文
posted @ 2016-11-10 17:49 futurehau 阅读(170) 评论(0) 推荐(0) 编辑
 
摘要: 这个项目就九章算法大数据课程的一个项目。主要分为两步: 第一步是 offline 建立 数据库 我们用两个map reduce 的data pipline 来实现。 第二步是 online显示把数据里面数据读出来显示。 如果实际运用中 第一步 mapreduce 一般数据一天之内更新不会太多 所以m 阅读全文
posted @ 2016-11-10 15:32 futurehau 阅读(676) 评论(0) 推荐(0) 编辑
 

2016年11月7日

摘要: 大纲 TopK on single node TopK on multiple nodes Realtime topK with low QPS Realtime topK with high QPS Approx TopK MapReduce 一、TopK on single node 从几个关于 阅读全文
posted @ 2016-11-07 22:56 futurehau 阅读(640) 评论(0) 推荐(0) 编辑
 

2016年11月1日

摘要: 1 设置ssh免密码登陆 由于每次启动服务都要输入密码,为了避免以后麻烦,这里首先设置ssh免密码登陆 首先关闭防火墙 setup调出防火墙配置工具,enter进入filewall configuration 按空格关闭。出来service iptables status,如果显示service i 阅读全文
posted @ 2016-11-01 20:21 futurehau 阅读(204) 评论(0) 推荐(0) 编辑