03 2023 档案
摘要：前言 总是会有一些领域里的常识，以这个标签来记录我学到的“常识”。 能量单位：焦耳 一焦耳等于 1N 的力在对应力的方向上移动1米所做的功，也等于 1W 的功率在1秒内所做的功。 1千瓦时就是1度。 参考链接：https://baijiahao.baidu.com/s?id=173885587665
阅读全文
摘要：常用方法包括： 观察值函数的变化：在训练过程中，可以观察值函数的变化情况，如果值函数的变化趋势逐渐变缓，最终基本不再变化，可以认为值函数已经收敛。 判断动作状态值函数的变化：在 Q-learning 等算法中，动作价值函数可以表示为每个状态下每个动作的价值。可以通过计算每个状态下所有动作价值函数的差
阅读全文
摘要：一直对这个问题很好奇，感觉这个涉及数据存储的方式和规划，听起来就很有意思。所有面向对象的语言应当都有可变对象和不可变对象。 概念 Python中一切皆对象，每个对象都有自己的id，type和value。 id：一个对象被创建后，需要在内存中存储，这个地址就是 id 值。 type：和 id 一样，当
阅读全文
摘要：对象 要存储一个对象需要包括id（标识，对象一旦创建 id永不改变，在内存中的位置）、type（类型，当前对象的类型，决定其功能）和value（值，存储的具体值） 根据其值能否更改进行分类，可分为 可变对象和不可变对象。可变对象的特点在于当对象本身改变时它的地址不会改变。可变对象不会改变对象引用，而
阅读全文
摘要：前言 看别人的代码，自己的代码，大牛的代码，网上博客的代码。仅实现功能时感觉良好，自己脑袋清楚时感觉良好。 需要改动自己的代码时，a piece of shit；看别人的代码，更是无从下手。 所以很想知道到底怎样才能写出来优秀的代码？如果有人对这个问题感兴趣，希望能稍稍提示一下我这个小菜鸡。 这篇文
阅读全文
摘要：在运算过程中，得到的经验和模型都是算法的重要结果。直接把数据输入到对应的地方保证了各个模块之间的隔离。 numpy数组保存 numpy的强大之处有目共睹 .npy numpy.save("filename.npy", a) numpy.load("filename") 二进制文件 a.tofile(
阅读全文
