会员
众包
新闻
博问
闪存
赞助商
HarmonyOS
Chat2DB
所有博客
当前博客
我的博客
我的园子
账号设置
会员中心
简洁模式
...
退出登录
注册
登录
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
Coding Poineer
365/24/60
博客园
首页
新随笔
订阅
管理
2024年3月4日
LLM训练bug
摘要: LLM 编码: tokenizer = AutoTokenizer.from_pretrained(modelpath) text="你好" tokenizer.tokenize(text) # 直接编码 chat_text = tokenizer.apply_chat_template(text,
阅读全文
posted @ 2024-03-04 20:10 365/24/60
阅读(79)
评论(0)
推荐(0)