12 2020 档案

PyTorch消除训练瓶颈 提速技巧
摘要：【GiantPandaCV导读】训练大型的数据集的速度受很多因素影响，由于数据集比较大，每个优化带来的时间提升就不可小觑。硬件方面，CPU、内存大小、GPU、机械硬盘orSSD存储等都会有一定的影响。软件实现方面，PyTorch本身的DataLoader有时候会不够用，需要额外操作，比如使用混合精度 阅读全文
posted @ 2020-12-28 08:24 pprp 阅读(6895) 评论(0) 推荐(0) 编辑
一周内如何复习思政类课程
摘要：大概查了一下，没有这方面的总结，所以我结合不久前刚考过的中特课程，总结一下这个复习过程中所用到的策略。 手机 不要看手机，不要看手机，不要看手机，到了图书馆以后，要把手机放到书包里，复习的过程中，不要拿出来看时间。需要时间的话就看手表，否则一不小心就开始刷手机，这是复习的大忌。一般复习的时候都剩余时 阅读全文
posted @ 2020-12-21 09:32 pprp 阅读(698) 评论(0) 推荐(0) 编辑
【论文阅读】Mixed Precision Training
摘要：【GiantPandaCV导语】混合精度是一个非常简单并且实用的技术，由百度和谷歌联合发表于ICLR2018，可以让模型以半精度的方式训练模型，既能够降低显存占用，又可以保持精度。这篇文章不是最先提出使用更低精度来进行训练，但是其影响力比较深远，很多现在的方案都是基于这篇文章设计的。 1. 摘要 提 阅读全文
posted @ 2020-12-20 22:03 pprp 阅读(1002) 评论(0) 推荐(0) 编辑
PyTorch Lightning工具学习
摘要：【GiantPandaCV导语】Pytorch Lightning是在Pytorch基础上进行封装的库，为了让用户能够脱离PyTorch一些繁琐的细节，专注于核心代码的构建，提供了许多实用工具，可以让实验更加高效。本文将介绍安装方法、设计逻辑、转化的例子等内容。 PyTorch Lightning中 阅读全文
posted @ 2020-12-08 10:45 pprp 阅读(7287) 评论(1) 推荐(1) 编辑

点击右上角即可分享
微信分享提示
❄