2024年9月29日
Hugging Face + JuiceFS：多用户多节点环境下提升模型加载效率
摘要： Hugging Face 的 Transformers 是一个功能强大的机器学习框架，提供了一系列 API 和工具，用于预训练模型的下载和训练。为了避免重复下载，提高训练效率，Transformers 会自动下载和缓存模型的权重、词表等资源，默认存储在 ~/.cache/huggingface/hu 阅读全文
posted @ 2024-09-29 14:22 JuiceFS 阅读(328) 评论(1) 推荐(0) 编辑