Langchain-Chatchat 接入 glm4

llm的接入: https://blog.csdn.net/orientharp/article/details/139884688

embedding模型的接入: https://inference.readthedocs.io/zh-cn/latest/models/builtin/embedding/bge-large-zh-v1.5.html    ,  模型注册仿照llm的模型注册;

 

langchain的接入:https://github.com/chatchat-space/Langchain-Chatchat?tab=readme-ov-file

 

chatchat 模型接入:(自定义模型的话不用这种方式)

llm:chatchat-config model --default_llm_model qwen2-instruct

embedding:  同上

 

初始化:

chatchat-kb -r

. 启动项目

chatchat -a
 
xinference 相关指令:
https://inference.readthedocs.io/zh-cn/latest/getting_started/using_xinference.html
posted @   小丑_jk  阅读(202)  评论(0编辑  收藏  举报
相关博文:
阅读排行:
· 震惊!C++程序真的从main开始吗?99%的程序员都答错了
· 【硬核科普】Trae如何「偷看」你的代码?零基础破解AI编程运行原理
· 单元测试从入门到精通
· 上周热点回顾(3.3-3.9)
· winform 绘制太阳,地球,月球 运作规律
点击右上角即可分享
微信分享提示