Open WebUI部署本身的大模型
相关代码地点见文末1. 概述
Text Generation WebUI 是一个基于网页的界面,提供利用不同语言模型(如Transformers、Llama、ExLlamav2等)举行文本生成的功能。该软件支持以下主要功能:
[*]模型加载:支持从多种框架加载单个或多个LoRA。
[*]LoRA微调:在支持的加载器上举行低秩适配微调,优化大语言模型。
[*]多模态支持:处理文本、图像等多种输入模式。
[*]困惑度评估:评估模型生成文本的复杂度。
https://i-blog.csdnimg.cn/direct/b06f1589c97848a1bf4d64d4af3f95b3.png
2.聊天界面
https://i-blog.csdnimg.cn/direct/d7c18b5819d84145955bf33795bff249.png
Chat Tab 是 Text Generation WebUI 中用于多轮对话的焦点界面,提供了多种与模型互动
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页:
[1]