Huggingface模型下载
借助git lfs下载
代码直接下载
- 需要开启代理
- jupyter有可能不支持,需要切换到终端里面执行代码下载
- 下载的模型目录会自动保存在 ~/.cache/huggingface/hub
from transformers import BertTokenizer, BertModel
tokenizer = BertTokenizer.from_pretrained("bert-base-uncased")
model = BertModel.from_pretrained("bert-base-uncased")
- 指定下载目录
custom_cache_dir = "/path/to/your/custom/cache/directory"
model = BertModel.from_pretrained("bert-base-uncased", cache_dir=custom_cache_dir)
ModelScope模型下载
from modelscope import snapshot_download
model_dir=snapshot_download("qwen/Qwen1.5-MoE-A2.7B-Chat-GPTQ-Int4")
数据下载
【推荐】编程新体验,更懂你的AI,立即体验豆包MarsCode编程助手
【推荐】凌霞软件回馈社区,博客园 & 1Panel & Halo 联合会员上线
【推荐】抖音旗下AI助手豆包,你的智能百科全书,全免费不限次数
【推荐】博客园社区专享云产品让利特惠,阿里云新客6.5折上折
【推荐】轻量又高性能的 SSH 工具 IShell:AI 加持,快人一步
· 微软正式发布.NET 10 Preview 1:开启下一代开发框架新篇章
· 没有源码,如何修改代码逻辑?
· NetPad:一个.NET开源、跨平台的C#编辑器
· PowerShell开发游戏 · 打蜜蜂
· 凌晨三点救火实录:Java内存泄漏的七个神坑,你至少踩过三个!