2017年6月12日
集体智慧编程--第1章 集体智慧导言
摘要： 1.什么是集体智慧 集体智慧通常是指为了创造新的想法，而将一群人的行为、偏好或思想结合在一起。 完成这项工作的最基础的方法便是使用调查问卷或普查。从一大群人中搜索的答案可以使我们得到关于群主的统计结论：组中的个体成员将会被忽视。 从独立的数据提供者那里得到新的结论，是集体智慧所真正关注的。 2.什么 阅读全文
posted @ 2017-06-12 19:22 笨笨鸟 阅读(159) 评论(0) 推荐(0) 编辑
集体智慧编程--第2章 提供推荐
摘要： 本章将告诉你如何构筑一个系统，用以寻找具有相同品味的人，并根据他人的喜好自动给出推荐。 协作型过滤 一个协同型过滤算法通常的做法是对一群人进行搜索，从中找出与我们品味相近的一群人。算法会对这些人所偏爱的其他内容进行考查，并将它们组合起来构造出一个经过排名的推荐列表。 搜索偏好 我们要做的第一件事情， 阅读全文
posted @ 2017-06-12 19:16 笨笨鸟 阅读(182) 评论(0) 推荐(0) 编辑
2017年6月9日
windows环境下安装Anaconda（Python）
摘要： 参考网址：http://www.jianshu.com/p/169403f7e40c http://blog.csdn.net/qq_26898461/article/details/51488326 1.Anaconda基础 1.1什么是Anaconda Anaconda是一个用于科学计算的Pyt 阅读全文
posted @ 2017-06-09 16:47 笨笨鸟 阅读(23066) 评论(0) 推荐(0) 编辑
2017年6月1日
Hadoop 2.5.2 环境搭建
摘要： Hadoop 生态环境主要有hadoop 、zookeeper、hbase、hive 等构成 1.搭建Java环境 2.搭建hadoop环境，搭建成功后运行/sbin/start all.sh即可启动所有hadoop相关服务，启动成功后有相应的进程，通过jps命令查看 3.如果需要可以进一步搭建zo 阅读全文
posted @ 2017-06-01 14:33 笨笨鸟 阅读(354) 评论(4) 推荐(1) 编辑
2017年5月4日
词袋BoW
摘要： 词袋BoW（Bag of words），在信息检索中，BoW假定对于一个文本，忽略其词序和语法，句法，将其仅仅看做是一个词集合，或者说是词的一个组合，文本中每个词的出现都是独立的，不依赖于其他词 是否出现，或者说当这篇文章的作者在任意一个位置选择一个词汇都不受前面句子的影响而独立选择的。 Bag o 阅读全文
posted @ 2017-05-04 19:38 笨笨鸟 阅读(525) 评论(0) 推荐(0) 编辑
2017年4月27日
PyCharm-解决中文乱码的问题
摘要： 在用Pycharm运行Python程序时，出现如下的情况： 由图中可以知道是中文乱码，解决方案如下： 打开file—— setting—— Editor—— File Encodings 设置如下： 点击OK即可。再次运行刚才的程序，可以看到已经不出现乱码了 阅读全文
posted @ 2017-04-27 14:39 笨笨鸟 阅读(1519) 评论(0) 推荐(0) 编辑
2017年4月26日
Python——进程
摘要： 1.multiprocessing multiprocessing模块就是跨平台版本的多进程模块。在Windows环境下创建进程可以使用multiprocessing模块。multiprocessing模块提供了一个Process类来代表一个进程对象。 创建子进程时，只需要传入一个执行函数和函数的参 阅读全文
posted @ 2017-04-26 21:22 笨笨鸟 阅读(209) 评论(0) 推荐(0) 编辑
Huber loss
摘要： 统计学中，Huber损失是用于鲁棒回归的损失函数，与平方误差损失相比，对数据中的游离点较不敏感。 也有时使用分类的变体。 1.定义 胡伯损失函数描述估计方法F招致的惩罚。Huber（1964）通过分段定义了损失函数。 当a的值较小时，该函数为二次函数，当a的值较大时，该函数为线性函数，当|a|=de 阅读全文
posted @ 2017-04-26 17:54 笨笨鸟 阅读(5096) 评论(0) 推荐(0) 编辑
点互信息PMI
摘要： 点互信息PMI（Pointwise Mutual Information）这个指标用来衡量两个事件之间的相关性，公式如下： p(f)和p(e)分别代表事件f和事件e发生的概率，p(f,e)代表时间f和事件e同时发生的概率。 如果f和e不相关则p(f,e)=p(f).p(e)。二者相关性越大，则p(f 阅读全文
posted @ 2017-04-26 10:05 笨笨鸟 阅读(1990) 评论(0) 推荐(0) 编辑
2017年4月18日
正确率、召回率、F值
摘要： 转载：http://blog.chinaunix.net/uid 23028928 id 2567754.html 正确率、召回率和F值是在鱼龙混杂的环境中，选出目标的重要评价指标。 不妨看看这些指标的定义先： 正确率 = 正确识别的个体总数 / 识别出的个体总数 召回率 = 正确识别的个体总数 / 阅读全文
posted @ 2017-04-18 13:17 笨笨鸟 阅读(560) 评论(0) 推荐(0) 编辑