随笔 - 165,  文章 - 0,  评论 - 4,  阅读 - 18023

一.问题
如果在使用colab时遇到卡在第一个epoch且step一动不动的情况,大概率是因为需要读取的数据集路径在你的谷歌网盘下,这样就需要联网读取数据到你的云端虚拟电脑中,会导致在第一个epoch异常缓慢甚至卡住。
二.解决办法
将数据集压缩后上传至谷歌云盘,在训练时使用linux指令将数据集直接解压到云端虚拟硬盘的/content路径下。注意修改代码中的有关路径。
三.示例代码

!pip install pyunpack
!pip install patool
from pyunpack import Archive
Archive('/content/drive/MyDrive/asr-seq2seq/data/data_aishell.rar').extractall('/content')

ps:我的数据集压缩包格式为rar,其他类型压缩包解压指令请自行百度

posted on   孜孜不倦fly  阅读(397)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· winform 绘制太阳,地球,月球 运作规律
· TypeScript + Deepseek 打造卜卦网站:技术与玄学的结合
· AI 智能体引爆开源社区「GitHub 热点速览」
· Manus的开源复刻OpenManus初探
· 写一个简单的SQL生成工具

< 2025年3月 >
23 24 25 26 27 28 1
2 3 4 5 6 7 8
9 10 11 12 13 14 15
16 17 18 19 20 21 22
23 24 25 26 27 28 29
30 31 1 2 3 4 5
点击右上角即可分享
微信分享提示