随笔分类 -  Machine Learning

摘要:首先介绍Attention机制: 转自:http://blog.csdn.net/malefactor/article/details/50550211 上面讲的是Soft Attention Model,所谓Soft,意思是在求注意力分配概率分布的时候,对于输入句子X中任意一个单词都给出个概率,是 阅读全文
posted @ 2016-12-21 21:24 Shiyu_Huang 阅读(479) 评论(0) 推荐(0) 编辑
摘要:后向传播公式:http://blog.csdn.net/yunpiao123456/article/details/52526907 历史沿袭: 人物关系: 感知器(Perceptrons) : 参考《统计学习方法》李航著中的第二章 感知机是二分类线模型。于1957年由Rosenblatt提出。是神 阅读全文
posted @ 2016-12-21 20:40 Shiyu_Huang 阅读(1342) 评论(0) 推荐(0) 编辑
摘要:Kingma, Diederik P., and Max Welling. "Auto-encoding variational bayes." arXiv preprint arXiv:1312.6114 (2013). 论文的理论推导见:https://zhuanlan.zhihu.com/p/ 阅读全文
posted @ 2016-12-21 20:39 Shiyu_Huang 阅读(133617) 评论(6) 推荐(10) 编辑
摘要:转自:http://www.tuicool.com/articles/RV3m6n 对于矩阵分解的梯度下降推导参考如下: 阅读全文
posted @ 2016-12-21 20:32 Shiyu_Huang 阅读(2776) 评论(0) 推荐(0) 编辑
摘要:LSTM 由Hochreiter & Schmidhuber (1997)提出 LSTM结构: 转自:http://www.jianshu.com/p/9dc9f41f0b29 作者图画的很好,讲解也浅显易懂(感觉其实大部分神经网络只要不讲向后传播,只说网络结构和向前传播,加上合理的文字描述,就很容 阅读全文
posted @ 2016-12-20 20:28 Shiyu_Huang 阅读(351) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2016-12-07 14:04 Shiyu_Huang 阅读(397) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2016-12-06 14:35 Shiyu_Huang 阅读(329) 评论(0) 推荐(0) 编辑
摘要: 阅读全文
posted @ 2016-12-05 20:52 Shiyu_Huang 阅读(391) 评论(0) 推荐(0) 编辑
摘要:附录(http://blog.csdn.net/jlei_apple/article/details/8168856): 阅读全文
posted @ 2016-12-05 16:12 Shiyu_Huang 阅读(186) 评论(0) 推荐(0) 编辑
摘要:线性可分支持向量机学习的最优化问题: 常用核函数: KKT条件: 习题: 阅读全文
posted @ 2016-12-04 19:18 Shiyu_Huang 阅读(204) 评论(0) 推荐(0) 编辑
摘要:三个步骤:特征选择,决策树的生成和决策树的修剪。 , (Li, Hang, and Naoki Abe. "Generalizing case frames using a thesaurus and the MDL principle." Computational linguistics 24. 阅读全文
posted @ 2016-12-02 16:05 Shiyu_Huang 阅读(458) 评论(0) 推荐(0) 编辑
摘要:极大似然估计: 先验概率的贝叶斯估计是: 阅读全文
posted @ 2016-12-02 16:01 Shiyu_Huang 阅读(179) 评论(0) 推荐(0) 编辑
摘要:k近邻算法(KNN): 三要素:k值的选择,距离的度量和分类决策规则 KMeans算法,是一种无监督学习聚类方法: 通过上述过程可以看出,和EM算法非常类似。一个简单例子, k=2: 畸变函数(distortion function): 时间复杂度:O(tKmn),其中,t为迭代次数,K为簇的数目, 阅读全文
posted @ 2016-12-02 15:04 Shiyu_Huang 阅读(1972) 评论(0) 推荐(0) 编辑
摘要:组要组成部分:监督学习(supervised learning),非监督学习(unsupervised learning),半监督学习(semi-supervised learning),强化学习(reinforcement learning)。 三要素:模型(model),策略(strategy) 阅读全文
posted @ 2016-11-30 20:11 Shiyu_Huang 阅读(2834) 评论(0) 推荐(1) 编辑
摘要:1.Visually Indicated Sounds 网址:http://vis.csail.mit.edu/ 通过视频预测敲打的声音 2.AI Porn Video Editor 代码网址:https://github.com/ryanjay0/miles-deep 色情视频分类器 3.A Ne 阅读全文
posted @ 2016-11-26 16:14 Shiyu_Huang 阅读(293) 评论(0) 推荐(0) 编辑
摘要:precision是tp/(tp+fp),检索结果中正确的比例 recall是tp/(tp+fn),所有需要被检索出来的比例 1、真实情况:恶性,检查结果:恶性,这种情况就叫做:true positve,姑且称为真阳性吧。(够倒霉的) 2、真实情况:良性,检查结果:恶性,这种情况就叫做:false 阅读全文
posted @ 2016-07-22 04:42 Shiyu_Huang 阅读(248) 评论(0) 推荐(0) 编辑

点击右上角即可分享
微信分享提示