随笔分类 - Pyhton
摘要：Pytorch大批量流式数据IterableDataset实现（包括shuffle操作） 对于小批量数，可以完全载入内存的数据集来说，我们一般的实践是通过定义 torch.utils.data.Dataset 这个类类实现，但是对于好几TB甚至更大的数量来说，我们显然无法直接加载到内存，因此我们需要
阅读全文
摘要：Django 用户状态管理 背景 网站是一个前后端分离的方式，但是需要用户登录，由于网站是没有外部侵入第三方的风险，所以不用考虑 CSRF 攻击，因此直接从中间件关掉 CSRF 就可以了。 具体操作； setting.py 文件, 注释 csrf 那一行 MIDDLEWARE = [ 'django
阅读全文
摘要：安装报错的地址下载安装包, 例如: rdkit 包 conda install --use-local rdkit.tar.gz 成功后, 会在conda文件夹的pkgs子文件夹出现相应压缩包以及解压后的文件夹. 这一步只是将包进行安装 (装到site-packages), 可以在python进行i
阅读全文
摘要：进度条工具 - tqdm 命令行集成工具 - fire 彩色输出工具 - rich
阅读全文
摘要：x = torch.tensor([0, 1, 2, 3]).float().view(4, 1)def test_assign(x): # 赋值操作 x_expand = x.expand(-1, 3) x_repeat = x.repeat(1, 3) x_expand[:, 1] = torc
阅读全文
摘要："torchfurnace" torchfurnace 是一个集快速训练模型，日志管理，模型checkpoints管理，tensorboard可视化, I/O 加速，模型大小统计于一身的工具包。 使用这个工具包可以快速构建一个深度学习训练，不需要自己写各种训练逻辑，对于已经定义好的模型也不需要修改，
阅读全文
摘要：解决 pip 安装包，空间不足 "参考链接" 由于 /tmp 目录空间不足，手动指定一个 tmp 目录，本文指定为 下面的 tmp 文件夹 仅当前终端有效 永久生效
阅读全文
摘要：自动化脚本： 根据需要修改文件中的 python 版本号，即可。 python 目录为：/etc/python3.7.1 虚拟目录为: /home/.pyenv/myenv 激活虚拟环境：source /home/.pyenvs/myenv/bin/activate 查看python 版本: pyt
阅读全文
摘要：原理是 python 解释器寻找 模块的顺序决定，不细说 简略来讲就是 在 IDE中运行，会自动帮你把项目根目录添加到 PYTHONPATH 中，但是在 cmd 运行需要自己添加。 解决方法： 1. 在报错的 py 文件最上方，添加 2. 在系统环境变量添加 项目根目录，这个对于 大型项目共享路径较
阅读全文
摘要：1. pip install pyinstaller 2. 切换目录到 .py 文件夹，并且 一定要将第三方库复制到这个文件夹 3. 运行 pyinstaller -F -i my.ico xxx.py 4. 生成的 EXE 在 dist 文件夹
阅读全文
摘要：Django 1.11.9 文件路径：site-packages\django\db\backends\mysql\base.py–class DatabaseWrapper _data_types = { ‘AutoField’: ‘integer AUTO_INCREMENT’, ‘BigAut
阅读全文
摘要：Win 上使用 pip install 安装出错 使用 wheel 安装 pip install wheel 下载 编译包 http://www.lfd.uci.edu/~gohlke/pythonlibs/ 在下载文件所在目录使用 pip install xxx.whl 原文： http://bl
阅读全文
