摘要： 1.简介：Kaggle是一个数据建模和数据分析竞赛的平台。企业和研究者可在其上发布数据，统计学者和数据挖掘专家可在其上进行竞赛，通过“众包”的形式以产生最好的模型。Kaggle可以分为Competitions竞赛、Datasets数据集以及Kernel内核三个子平台、配套的Forum论坛模块以及供各 阅读全文

摘要： 在强化学习（二）马尔科夫决策过程(MDP)中，我们讨论了用马尔科夫假设来简化强化学习模型的复杂度，这一篇我们在马尔科夫假设和贝尔曼方程的基础上讨论使用动态规划(Dynamic Programming, DP)来求解强化学习的问题。动态规划这一篇对应Sutton书的第四章和UCL强化学习课程的第三讲。 阅读全文

摘要： 在《Cortex-M3 Devices Generic User Guide.pdf》中介绍了异常入栈和出栈的情况，详见2.3 Exception model。Cortex-M3内核的寄存器如下。 异常发生时，入栈的寄存器是R0~R3+R12+PC+LR+SP。为啥袒护R0‐R3以及R12呢， R4 阅读全文