Shiyu_Huang - 博客园

2016年12月9日

摘要： Beta分布：二项式分布（Binomial distribution）：多项式分布： Beta分布： Beta分布是二项式分布的共轭先验（conjugate prior） Dirichlet Distribution: 共轭先验可以使得先验分布和后验分布的形式相同如果先验分布和似然函数可以使得阅读全文

posted @ 2016-12-09 15:06 Shiyu_Huang 阅读(732) 评论(0) 推荐(0) 编辑

采样方法(Sampling Methods)

摘要： 1.基本采样算法（Basic Sampling Algorithms） 1.1.标准概率分布(Standard distributions) 1.2.拒绝采样(Rejection sampling) 1.3.可调节的拒绝采样(Adaptive rejection sampling) 1.4.重要采样阅读全文

posted @ 2016-12-09 14:11 Shiyu_Huang 阅读(1806) 评论(0) 推荐(0) 编辑

近似推断(Approximate Inference)

摘要： 1.变分推断（Variational Inference） 1.1.分解概率分布(Factorized distributions) 1.2.分解近似的性质（Properties of factorized approximations） 1.3.例子：一元高斯分布（Example: The uni 阅读全文

posted @ 2016-12-09 10:53 Shiyu_Huang 阅读(1220) 评论(0) 推荐(0) 编辑

LDA(Latent Dirichlet Allocation)

摘要： LDA包含隐藏的主题。但是我们为什么要用隐藏主题，自己定义主题不好吗？有两方面原因： 1.我们不知道自己的定义的主题是否符合规模。如果对每个单词都定以个主题，粒度就太细，没有多样性。如果以大方向（如NBA)为一个主题，那么就太大太空，用户很难一下找到自己喜欢的东西。 2.基于上述理由，我们就想：那么阅读全文

posted @ 2016-12-09 09:40 Shiyu_Huang 阅读(1974) 评论(0) 推荐(0) 编辑

2016年12月8日

概率图常见模型

摘要： 1.朴素贝叶斯分类器（NBs：Naive Bayes）贝叶斯网络： 2.最大熵模型（MEM：Maximum Entropy Model） 3.隐马尔可夫模型（HMM：Hidden Markov Models） 4.最大熵马尔可夫模型（MEMM：Maximum Entropy Markov Mode 阅读全文

posted @ 2016-12-08 21:01 Shiyu_Huang 阅读(543) 评论(0) 推荐(0) 编辑

第七章概率图模型理论在计算机视觉中的应用

摘要：阅读全文

posted @ 2016-12-08 20:34 Shiyu_Huang 阅读(437) 评论(0) 推荐(0) 编辑

第六章概率图模型的新型学习方法

摘要：主动学习方法增量学习阅读全文

posted @ 2016-12-08 19:36 Shiyu_Huang 阅读(336) 评论(0) 推荐(0) 编辑

第五章无向概率图模型学习

摘要：马尔科夫随机场（Markov Random Fields, MRFs） MRFs与Gibbs分布等价。条件随机场（Conditional Random Fields, CRFs）： CRFs的训练方法：迭代梯度法（Iterative Scaling）和L-BFGS 迭代梯度法包括：GIS(Gene 阅读全文

posted @ 2016-12-08 19:33 Shiyu_Huang 阅读(764) 评论(0) 推荐(0) 编辑

第四章不完整数据集下的有向概率图模型的学习

摘要：参数估计：主要有EM算法和Gibbs采样 EM算法： Gibbs采样：阅读全文

posted @ 2016-12-08 19:06 Shiyu_Huang 阅读(232) 评论(0) 推荐(0) 编辑

第三章完整数据集下有向概率图模型的学习

摘要：概率图模型建模分为三种：专家建模，数据建模，知识库建模。结构学习：（1）基于评分搜索的结构学习： a.评分函数所谓超参数，就是机器学习模型里面的框架参数，比如聚类方法里面类的个数，或者话题模型里面话题的个数等等，都称为超参数。它们跟训练过程中学习的参数（权重）是不一样的，通常是手工设定，不断试阅读全文

posted @ 2016-12-08 18:54 Shiyu_Huang 阅读(404) 评论(0) 推荐(0) 编辑

第二章概率图模型的基本原理

摘要：分为有向概率图模型(Directed Probabilistic Graphical Model)，无向概率图模型(Undirected Probabilistic Graphical Model)，混合概率图模型(Mixed Probabilistic Graphical Model)。有向概率阅读全文

posted @ 2016-12-08 17:06 Shiyu_Huang 阅读(1361) 评论(0) 推荐(0) 编辑

第一章概率图模型基础知识

摘要：阅读全文

posted @ 2016-12-08 13:09 Shiyu_Huang 阅读(249) 评论(0) 推荐(0) 编辑

2016年12月7日

The Properties of Posterior of Topic Model

摘要： 1.Tang, Jian, et al. "Understanding the Limiting Factors of Topic Modeling via Posterior Contraction Analysis." ICML. 2014. This is the best paper of 阅读全文

posted @ 2016-12-07 20:30 Shiyu_Huang 阅读(248) 评论(0) 推荐(0) 编辑

京东阅读PDF导出

摘要：适用平台:windows 需要软件：FastStone Capture(截图软件)，TinyTask(操作录制软件) 1.打开京东阅读 2.设置截图软件（1）设置截图区域（FastStone Capture可以重复上次上次截图区域）这里需要在设置里面设置相应的快捷键（2）设置自动保存到指定文件阅读全文

posted @ 2016-12-07 18:07 Shiyu_Huang 阅读(13714) 评论(1) 推荐(0) 编辑

条件随机场（Conditional random field,CRF）

摘要：阅读全文

posted @ 2016-12-07 14:04 Shiyu_Huang 阅读(395) 评论(0) 推荐(0) 编辑

2016年12月6日

第一章集合与点集

摘要：韦达定理（Vieta theorem）：上限集相当于集合列后面部分的并，下限集相当于集合列后面部分的交。（四）集合的直积 1.3 映射与基数（一）映射第二情况出现的原因是：举个极端例子，可能A与B不相交，但它们都映射到同一个集合C，那么就会出现被包含的情况。（二）基数对上述极限用取ln加阅读全文

posted @ 2016-12-06 19:02 Shiyu_Huang 阅读(584) 评论(0) 推荐(0) 编辑

隐马尔科夫模型(hidden Markov model, HMM)

摘要：阅读全文

posted @ 2016-12-06 14:35 Shiyu_Huang 阅读(328) 评论(0) 推荐(0) 编辑

Differential Geometry之第十章极小曲面

摘要：第十章、极小曲面 1.极小图 Animation showing the deformation of a helicoid into a catenoid. Animation of Scherk's first and second surface transforming into each 阅读全文

posted @ 2016-12-06 11:38 Shiyu_Huang 阅读(3010) 评论(0) 推荐(1) 编辑

Differential Geometry之第九章常平均曲率曲面

摘要：第九章、常平均曲率曲面 1.Hopf微分与Hopf定理等温坐标系(isothermal coordinate system)曲面上的一种特殊坐标系.若曲面的第一基本形式I在坐标系(u,v)下可以写成则称((u,v)为曲面的等温坐标系.当曲面上选择等温坐标系((u ,v)时，它建立了从曲面到平面的阅读全文

posted @ 2016-12-06 10:49 Shiyu_Huang 阅读(1199) 评论(0) 推荐(0) 编辑

Differential Geometry之第八章常Gauss曲率曲面

摘要：第八章、常Gauss曲率曲面 1.常正Gauss曲率曲面 2.常负Gauss曲率曲面与Sine-Gordon方程 3.Hilbert定理 4.Backlund变换 4.1.线汇与焦曲面 4.2.Backlund变换阅读全文

posted @ 2016-12-06 10:13 Shiyu_Huang 阅读(523) 评论(0) 推荐(0) 编辑

2016年12月5日

EM算法(expectation maximization algorithm)

摘要：阅读全文

posted @ 2016-12-05 20:52 Shiyu_Huang 阅读(389) 评论(0) 推荐(0) 编辑

AdaBoost算法

摘要：附录（http://blog.csdn.net/jlei_apple/article/details/8168856）：阅读全文

posted @ 2016-12-05 16:12 Shiyu_Huang 阅读(184) 评论(0) 推荐(0) 编辑

Differential Geometry之第七章曲面的若干整体性质

摘要： 1.曲面的整体描述 2.整体的Gauss-Bonnet公式 2.1.曲面的三角剖分 2.2.Gauss-Bonnet公式 = 2.3.Gauss-Bonnet定理的应用 2.3.1.切向量场的指数定理 2.3.2.Jacobi定理 3.紧致曲面的Gauss映射 3.1.紧致曲面的绝对全曲率 3.2. 阅读全文

posted @ 2016-12-05 14:26 Shiyu_Huang 阅读(580) 评论(0) 推荐(0) 编辑

2016年12月4日

支持向量机(support vector machine)

摘要：线性可分支持向量机学习的最优化问题：常用核函数： KKT条件：习题：阅读全文

posted @ 2016-12-04 19:18 Shiyu_Huang 阅读(202) 评论(0) 推荐(0) 编辑

Differential Geometry之第六章平面曲线的整体性质

摘要：第六章、平面曲线的整体性质 1.平面的闭曲线 1.1.切线的旋转指数定理 1.2.等周不等式与圆的几何特性，其中 2.平面的凸曲线支撑函数： 2.1.Minkowski问题 2.2.四顶点定理阅读全文

posted @ 2016-12-04 10:32 Shiyu_Huang 阅读(595) 评论(0) 推荐(0) 编辑

2016年12月3日

球盒问题

摘要： n相同球放入m个相同盒子，允许空盒的情况。这个问题和分拆函数（partition function）有关，似乎没有解析解。可以通过递归求解，代码为： #include <iostream> using namespace std; int f(int n, int m){if(m == 1 || n 阅读全文

posted @ 2016-12-03 09:47 Shiyu_Huang 阅读(730) 评论(0) 推荐(0) 编辑

2016年12月2日

逻辑斯特回归（logistic regression）与最大熵模型(maximum entropy model)

摘要：阅读全文

posted @ 2016-12-02 22:15 Shiyu_Huang 阅读(650) 评论(0) 推荐(0) 编辑

决策树（decision tree）

摘要：三个步骤：特征选择，决策树的生成和决策树的修剪。 , (Li, Hang, and Naoki Abe. "Generalizing case frames using a thesaurus and the MDL principle." Computational linguistics 24. 阅读全文

posted @ 2016-12-02 16:05 Shiyu_Huang 阅读(451) 评论(0) 推荐(0) 编辑

朴素贝叶斯法

摘要：极大似然估计：先验概率的贝叶斯估计是：阅读全文

posted @ 2016-12-02 16:01 Shiyu_Huang 阅读(178) 评论(0) 推荐(0) 编辑

k近邻法(KNN)和KMeans算法

摘要： k近邻算法（KNN）：三要素：k值的选择，距离的度量和分类决策规则 KMeans算法，是一种无监督学习聚类方法：通过上述过程可以看出，和EM算法非常类似。一个简单例子, k=2: 畸变函数（distortion function）: 时间复杂度：O(tKmn)，其中，t为迭代次数，K为簇的数目，阅读全文

posted @ 2016-12-02 15:04 Shiyu_Huang 阅读(1944) 评论(0) 推荐(0) 编辑

Differential Geometry之第五章曲面的内蕴几何学

摘要：第五章、曲面的内蕴几何学 1.曲面的等距变换 2.曲面的协变微分协变微分： 3.测地曲率与测地线 4.测地坐标系 4.1.测地平行坐标系 4.2.测地极坐标系和法坐标系 5.Gauss-Bonnet公式格林公式： 6.曲面的Laplace算子 stokes公式： 7.Riemann度量 7.1. 阅读全文

posted @ 2016-12-02 10:22 Shiyu_Huang 阅读(793) 评论(0) 推荐(0) 编辑

2016年12月1日

Differential Geometry之第四章标架与曲面论的基本定理

摘要：第四章、标架与曲面论的基本定理 1.活动标架 2.自然标架的运动方程爱因斯坦求和约定（Einstein summation convention） 3.曲面的结构方程 4.曲面的存在唯一性定理 5.正交活动标架 6.曲面的结构方程（外微分法） 6.1.外微分形式 6.2.曲面的结构方程 6.3.E 阅读全文

posted @ 2016-12-01 10:49 Shiyu_Huang 阅读(1723) 评论(0) 推荐(0) 编辑

2016年11月30日

统计机器学习(statistical machine learning)

摘要：组要组成部分：监督学习(supervised learning)，非监督学习(unsupervised learning)，半监督学习(semi-supervised learning)，强化学习(reinforcement learning)。三要素：模型（model），策略(strategy) 阅读全文

posted @ 2016-11-30 20:11 Shiyu_Huang 阅读(2772) 评论(0) 推荐(1) 编辑

Differential Geometry之第三章曲面的局部理论

摘要：第三章、曲面的局部理论 1.曲面的概念 1.1.曲面的概念 1.2.切平面与法向 2.曲面的第一基本形式 3.曲面的第二基本形式正定矩阵：一个n阶的实对称矩阵M是正定的的条件是当且仅当对于所有的非零实系数向量z，都有zTMz> 0。其中zT表示z的转置。正定矩阵在合同变换下可化为标准型，即对角阅读全文

posted @ 2016-11-30 10:59 Shiyu_Huang 阅读(1105) 评论(0) 推荐(0) 编辑

2016年11月29日

Differential Geometry之第二章曲线的局部理论

摘要：第二章、曲线的局部理论 2.1 曲线的概念关于非正则曲线的讨论：，这是个非正则点（尖点），且它是非正则曲线。直观上，间断点，孤立点，结点（交叉点），尖点是非正则点。有记载说：当同一条曲线用不同参数方程表示时，可能出现同一曲线在一种参数表示下是正则曲线，在另一种参数表示下是非正则曲线。举个简阅读全文

posted @ 2016-11-29 11:37 Shiyu_Huang 阅读(905) 评论(0) 推荐(0) 编辑

各个会议期刊时间

摘要： 1.SIGGRAPH（ACM SIGGRAPH Annual Conference）论文提交时间：1月中旬会议时间：8月初 2.SIGKDD(ACM Knowledge Discovery and Data Mining) 论文提交时间：2月中旬会议时间：8月中旬 3.ICML(Interna 阅读全文

posted @ 2016-11-29 11:23 Shiyu_Huang 阅读(2294) 评论(0) 推荐(0) 编辑

2016年11月28日

Differential Geometry之第一章欧式空间

摘要：书籍：《微分几何》彭家贵局部微分几何第一章、欧式空间 1.1向量空间（1）向量空间 a.向量空间是集合，集合中的元素需要定义加法和乘法运算。向量空间和n维数组空间R^n不是同一个概念。 b.欧式向量空间是向量空间的子集，满足有限维，还需要定义内积。同理，n维欧式向量空间与n维内积空间R^n也不阅读全文

posted @ 2016-11-28 19:04 Shiyu_Huang 阅读(1475) 评论(0) 推荐(0) 编辑

2016年11月26日

论文写作

摘要： 0.工作要做得好。 1.要像写高中作文，有理有据，组织严密，不可堆砌字数，不可记流水账。 2.论文思想来源分析，原因分析，数据分析，方法论分析，局限性分析可以让读者觉得你的论文更有思想深度。可能原始工作没有过多的这些思考，但是在研究后期，论文写作时，需要花一些时间去思考这些问题。 3.最基本的要求是阅读全文

posted @ 2016-11-26 17:06 Shiyu_Huang 阅读(208) 评论(0) 推荐(0) 编辑

Interesting Applications in Machine Learning and Computer Vision

摘要： 1.Visually Indicated Sounds 网址：http://vis.csail.mit.edu/ 通过视频预测敲打的声音 2.AI Porn Video Editor 代码网址：https://github.com/ryanjay0/miles-deep 色情视频分类器 3.A Ne 阅读全文

posted @ 2016-11-26 16:14 Shiyu_Huang 阅读(290) 评论(0) 推荐(0) 编辑

2016年11月19日

latex之设置字体大小

摘要： \tiny\scriptsize\footnotesize\small\normalsize\large\Large\LARGE\huge\Huge 阅读全文

posted @ 2016-11-19 13:36 Shiyu_Huang 阅读(2172) 评论(0) 推荐(0) 编辑

黄世宇@智谱AI，OpenRL Lab负责人，强化学习，LLM，通用人工智能[OpenRL][知乎][GitHub][Linkedin]如果你对人工智能前沿感兴趣，欢迎联系并加入我们！

黄世宇@智谱AI，OpenRL Lab负责人，强化学习，LLM，通用人工智能
[OpenRL][知乎][GitHub][Linkedin]
如果你对人工智能前沿感兴趣，欢迎联系并加入我们！