摘要：
马尔可夫不等式 若随机变量$X$只取非负值，则任意$a>0$，有$P(X>=a)<=\frac{E(X)}{a}$ 该不等式的证明主要是利用对期望概念的理解，根据下图的计算过程走就是了。 该不等式对随机变量的信息利用不够全面，只使用了期望进行计算，所以计算出来的概率上界比较宽松。 据此推出的切比雪夫 阅读全文
摘要：
条件概率定义 对条件概率的定义最初起源于离散事件，事件A和事件B的发生之间存在什么关系。在事件A发生的情况下，有多大的概率事件B可以发生？ 从上边的图片分析，就是当我知道自己在右边紫色的圈中，我同样还有粉色成分的概率是多少？ 注意这个前提，我在紫色圈中。这是一个已知的信息，借用参考链接2中的一句话： 阅读全文
摘要：
统计学是一门怎样的学科 重新梳理一遍自己对统计、概率、随机过程等的理解 数学本身是一门用数字刻画世界的语言，用给定的公理进行推理得到新的结果。本质就是类比 探索 寻找和发现。 将一种东西转化为使用数字表示，通过数字之间的运算得到规律，再返回到实践中去指导了解和探索。 那么概率实际上就是对样本空间中的 阅读全文
摘要：
前言 在目前涉及到的构建目标策略时都包含了最大化操作，总是选择最大的那个（贪心策略，例如Q-learning、Sarsa等）。这些算法在估计值的基础上进行最大化可以被看做隐式地对最大值进行估计，例如真值为0，但估计有正有负 直接选择最大化处理，估计出来的真值一定是正的。这就可以被称为最大化偏差【将估 阅读全文
摘要：
注：本节内容是对Sutton的《Reinforcement Learning：An introduction》第八章的理解整理~ 这里是前两节 如何从统一视角来考虑一系列强化学习方法？ 稍微整理一下之前分享整理的强化学习思路： 具备完整的环境模型，我们使用贝尔曼方程（解方程或仿真求解）得到状态函数， 阅读全文
摘要：
参考链接：https://post.smzdm.com/p/avwgw69m/ 看到一篇关于提升工作效率的Excel公式分享文章，简单做点总结，保证自己以后还能看到。 公式1：判断是否为数字 使用 =ISNUMBER() 简记 isnumber 是不是数字？ 公式2：数字取整 使用 =INT() 简 阅读全文
摘要：
复合泊松过程 这个例子介绍了某种链式反应，或层叠过程模型。原电子在电厂加速后，碰撞极板，产生次级电子。在多极电子倍增管里，每个次级电子撞击另外的极板，因此可以产生多个三级电子，这个过程按照此模式可以连狙几个阶段。Woodward（1948）考虑如下的模型：单一电子冲击极板后产生的电子数是随机的，特别 阅读全文
摘要：
卷积定义 卷积理解 卷积是两个变量在某范围内相乘后求和的结果。 离散情况下是数列相乘再求和 连续情况下是函数相乘再积分 卷积是两个函数的运算方式，就是一种满足一些条件（交换律、分配率、结合律、数乘结合律、平移特性、微分特性、积分特性等）的算子。【用一种方式将两个函数联系到一起】 从形式上讲，就是先对 阅读全文
摘要：
主要参考的是Github上的一个项目：https://github.com/jackfrued/Python-100-Days 文章主要是对该项目中的内容进行学习 穿插一点自己的学习想法等内容~ 堆排序科普 上一次听到这个词语还是自己看《我的第一本算法书》的时候嘞 那首先介绍一下什么是堆排序 堆排序 阅读全文
摘要：
主要参考的是Github上的一个项目：https://github.com/jackfrued/Python-100-Days 文章主要是对该项目中的内容进行学习 穿插一点自己的学习想法等内容~ 嵌套列表 names = ['关羽', '张飞', '赵云', '马超', '黄忠'] courses 阅读全文