摘要：
常用方法包括： 观察值函数的变化：在训练过程中，可以观察值函数的变化情况，如果值函数的变化趋势逐渐变缓，最终基本不再变化，可以认为值函数已经收敛。 判断动作状态值函数的变化：在 Q-learning 等算法中，动作价值函数可以表示为每个状态下每个动作的价值。可以通过计算每个状态下所有动作价值函数的差 阅读全文
摘要：
一直对这个问题很好奇，感觉这个涉及数据存储的方式和规划，听起来就很有意思。所有面向对象的语言应当都有可变对象和不可变对象。 概念 Python中一切皆对象，每个对象都有自己的id，type和value。 id：一个对象被创建后，需要在内存中存储，这个地址就是 id 值。 type：和 id 一样，当 阅读全文
摘要：
对象 要存储一个对象需要包括id（标识，对象一旦创建 id永不改变，在内存中的位置）、type（类型，当前对象的类型，决定其功能）和value（值，存储的具体值） 根据其值能否更改进行分类，可分为 可变对象和不可变对象。可变对象的特点在于当对象本身改变时它的地址不会改变。可变对象不会改变对象引用，而 阅读全文
摘要：
前言 看别人的代码，自己的代码，大牛的代码，网上博客的代码。仅实现功能时感觉良好，自己脑袋清楚时感觉良好。 需要改动自己的代码时，a piece of shit；看别人的代码，更是无从下手。 所以很想知道到底怎样才能写出来优秀的代码？如果有人对这个问题感兴趣，希望能稍稍提示一下我这个小菜鸡。 这篇文 阅读全文
摘要：
在运算过程中，得到的经验和模型都是算法的重要结果。直接把数据输入到对应的地方保证了各个模块之间的隔离。 numpy数组保存 numpy的强大之处有目共睹 .npy numpy.save("filename.npy", a) numpy.load("filename") 二进制文件 a.tofile( 阅读全文
摘要：
torchvision.transforms模块定义了一组可组合的、类似函数的对象，可作为参数传递到TorchVision模块的数据集，在数据加载之后，在 getitem()返回之前对数据进行变换。 个人整理并不完善，这一章看起来也有点费劲需要再多看几遍-_- 如果有人看到并且对此感兴趣的话，一定要 阅读全文
摘要：
记录一些简单的功能方便及时调出来看，并附上一些参考链接，这样就不用总是重复查了...... 多学一个就多补充一个。 一天到晚都在遇见奇奇怪怪的事情 统计数组中指定元素数量 参考链接：https://www.ilovematlab.cn/thread-67367-1-1.html 数据存储 转换为 . 阅读全文
摘要：
真不巧，蓝牙鼠标快没电了，手头又没有充电线，赶紧记录一下鼠标要是不能用的时候咋办 参考链接 https://jingyan.baidu.com/article/86f4a73e2d2fe477d7526963.html 真是妙啊，点开控制面板，搜索改变鼠标的工作方式，上边的操作足够满足你的需求 诸如 阅读全文
摘要：
类库 在C#语言中，开发者通常按钮一定规则将一类具有相似功能的代码封装在同一个.dll(动态链接库)文件中，以便管理、维护及重用，这个文件项目即为C#的类库，类库定义了应用程序调用的类型和方法。 具体步骤包括 创建解决方案（可作为一个或多个项目的容器，即可以向同一个解决方案添加一个或多个其他相关项目 阅读全文
摘要：
类、记录和结构的访问 直接在命名空间中声明的类、记录和结构(换句话说，不嵌套在其他类或结构中)可以是pub1ic，也可以是internal。如果没有指定访问修饰符，则默认为internal。 与类成员相同，所有类型也都具有可访问性级别。 该级别可以控制是否可以从你的程序集或其他程序集中的其他代码中使 阅读全文