摘要: 所谓学习问题,是指观察由n个样本组成的集合,并根据这些数据来预测未知数据的性质。 学习任务(一个二分类问题): 区分一个普通的互联网检索Query是否具有某个垂直领域的意图。假设现在有一个O2O领域的垂直搜索引擎,专门为用户提供团购、优惠券的检索;同时存在一个通用的搜索引擎,比如百度,通用搜索引擎希 阅读全文
posted @ 2016-12-22 21:24 Django's blog 阅读(858) 评论(0) 推荐(1) 编辑
摘要: 摘要: 在机器学习中常用到各种距离或者相似度,今天在看美团推荐系统重排序的文章时看到了loglikelihood ratio 相似度,特总结起来。以后有时间再把常用的相似度或者距离梳理到一篇文章。 背景: 记录loglikelihood ratio 相似度概念 总结: 在mahout中,loglik 阅读全文
posted @ 2016-12-22 20:58 Django's blog 阅读(1070) 评论(0) 推荐(0) 编辑
摘要: http://tech.meituan.com/mt-mlinaction-how-to-ml.html 前言 随着大数据时代的到来,机器学习成为解决问题的一种重要且关键的工具。不管是工业界还是学术界,机器学习都是一个炙手可热的方向,但是学术界和工业界对机器学习的研究各有侧重,学术界侧重于对机器学习 阅读全文
posted @ 2016-12-22 20:53 Django's blog 阅读(233) 评论(0) 推荐(0) 编辑
摘要: http://www.jianshu.com/p/ab697790090f 特征选择与特征学习 在机器学习的具体实践任务中,选择一组具有代表性的特征用于构建模型是非常重要的问题。特征选择通常选择与类别相关性强、且特征彼此间相关性弱的特征子集,具体特征选择算法通过定义合适的子集评价函数来体现。在现实世 阅读全文
posted @ 2016-12-22 17:55 Django's blog 阅读(753) 评论(0) 推荐(0) 编辑
摘要: http://www.letiantian.me/2015-03-31-bayes-classifier-for-text/ 2015-03-31 本文介绍如何使用scikit-learn工具包下的贝叶斯工具进行文本分类。 生成数据集 数据集是有8个分类的文本数据集,使用了结巴分词对每个文本分词,每 阅读全文
posted @ 2016-12-22 14:56 Django's blog 阅读(779) 评论(0) 推荐(0) 编辑
摘要: http://blog.csdn.net/w5310335/article/details/48972587 使用GBDT选取特征 2015-03-31 本文介绍如何使用scikit-learn的GBDT工具进行特征选取。 为什麽选取特征 有些特征意义不大,删除后不影响效果,甚至可能提升效果。 关于 阅读全文
posted @ 2016-12-22 14:55 Django's blog 阅读(1184) 评论(0) 推荐(0) 编辑
摘要: http://blog.csdn.net/w5310335/article/details/48972587 使用GBDT选取特征 2015-03-31 本文介绍如何使用scikit-learn的GBDT工具进行特征选取。 为什麽选取特征 有些特征意义不大,删除后不影响效果,甚至可能提升效果。 关于 阅读全文
posted @ 2016-12-22 14:52 Django's blog 阅读(685) 评论(0) 推荐(0) 编辑
摘要: http://blog.csdn.net/superzrx/article/details/47073847 安装 SCIKIT-LEARN是一个基于Python/numpy/scipy的机器学习库 windows下最简单的安装方式是使用winpython进行安装 WinPython地址 GBDT使 阅读全文
posted @ 2016-12-22 14:38 Django's blog 阅读(1490) 评论(0) 推荐(0) 编辑
摘要: http://www.52ml.net/1917.html 主题模型LDA(latent dirichlet allocation)的应用还是很广泛的,之前我自己在检索、图像分类、文本分类、用户评论的主题词抽取等都用过,做feature、降维等。例如可以用主题维度来表示原来的字典维度,大大的降低了文 阅读全文
posted @ 2016-12-22 12:07 Django's blog 阅读(785) 评论(0) 推荐(0) 编辑
摘要: http://weblab.com.cityu.edu.hk/blog/luheng/2011/06/24/%E7%94%A8gibbslda%E5%81%9Atopic-modeling/#comment-87 Topic Modeling是一种文本挖掘的方法。将文本视作一个由许多许多词组成的数据 阅读全文
posted @ 2016-12-22 12:02 Django's blog 阅读(781) 评论(0) 推荐(0) 编辑