会员
周边
众包
新闻
博问
闪存
赞助商
所有博客
当前博客
我的博客
我的园子
账号设置
简洁模式
...
退出登录
注册
登录
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
365/24/60
博客园
首页
新随笔
订阅
管理
2024年3月4日
LLM训练bug
摘要: LLM 编码: tokenizer = AutoTokenizer.from_pretrained(modelpath) text="你好" tokenizer.tokenize(text) # 直接编码 chat_text = tokenizer.apply_chat_template(text,
阅读全文
posted @ 2024-03-04 20:10 365/24/60
阅读(33)
评论(0)
推荐(0)
编辑