论坛
潜水/灌水快乐,沉淀知识,认识更多同行。
ToB圈子
加入IT圈,遇到更多同好之人。
朋友圈
看朋友圈动态,了解ToB世界。
ToB门户
了解全球最新的ToB事件
博客
Blog
排行榜
Ranklist
文库
业界最专业的IT文库,上传资料也可以赚钱
下载
分享
Share
导读
Guide
相册
Album
记录
Doing
搜索
本版
文章
帖子
ToB圈子
用户
免费入驻
产品入驻
解决方案入驻
公司入驻
案例入驻
登录
·
注册
只需一步,快速开始
账号登录
立即注册
找回密码
用户名
Email
自动登录
找回密码
密码
登录
立即注册
首页
找靠谱产品
找解决方案
找靠谱公司
找案例
找对的人
专家智库
悬赏任务
圈子
SAAS
ToB企服应用市场:ToB评测及商务社交产业平台
»
论坛
›
软件与程序人生
›
前端开发
›
Ollama 本地部署 DeepSeek R1 及 Python 运行 open-webu ...
Ollama 本地部署 DeepSeek R1 及 Python 运行 open-webui 界面(windows) ...
麻花痒
金牌会员
|
2025-2-14 12:39:51
|
显示全部楼层
|
阅读模式
楼主
主题
903
|
帖子
903
|
积分
2709
DeepSeek R1 + ollama + open-webui 本地部署(windows)
DeepSeek-R1本地部署配置要求
Github地点:https://github.com/deepseek-ai/DeepSeek-R1?tab=readme-ov-file
模型规模最低 GPU 显存推荐 GPU 型号纯 CPU 内存需求适用场景1.5B4GBRTX 30508GB个人学习7B、8B16GBRTX 409032GB小型项目14B24GBA5000 x264GB专业应用32B48GBA100 40GB x2128GB企业级服务70B80GBA100 80GB x4256GB高性能计算671B640GB+H100 集群不可行超算/云计算
扩展:
上面代表的是什么含义,首先我们知道671B的模型才是底子模型,别的的1.5B、7B、8B等都是蒸馏模型,因此Qwen代表是通义千问模型蒸馏的,Llama是通过Llama模型蒸馏的
DeepSeek-R1 + ollama + open-webui本地部署
1.本次使用的操作系统,以及环境配置
操作系统:windows11
CPU: i7-11800H
内存:16GB
GPU:RTX3050ti 4G显存
2.安装ollama
ollama是一个支持在windows、linux和macos上本地运行的大模型工具
官方网址:Release v0.5.7 · ollama/ollama · GitHub
配置环境变量
测试是否安装成功,cmd下令行输入ollama
3.通过ollama 安装 DeepSeek-R1 8B模型
下载模型网址:deepseek-r1
在下令行输入:ollama run deepseek-r1:8b,即可下载相应模型,速率会慢一点
在下令行输入:ollama list,即可查看已经下载好的模型
在下令行输入:ollama run deepseek-r1:8b,运行下载好的模型
4.安装open-webui,前端对话式网页工具
1)安装node.js
这里我是通过nvm仓库管理node,参考链接:使用nvm管理node多版本(安装、卸载nvm,配置环境变量,更换npm淘宝镜像)_node 版本管理-CSDN博客
官网下载nvm包:https://github.com/coreybutler/nvm-windows/releases
在安装目次下配置路径和下载镜像,setting.txt新增两行下令
node_mirror: https://npmmirror.com/mirrors/node/
npm_mirror: https://npmmirror.com/mirrors/npm/
复制代码
在cmd输入下令行,测试是否安装成功:nvm --version
使用 nvm 安装 node 版本,这里我使用的是node.js 20.12.2版本
在cmd输入下令行:nvm install 20.12.2
对应的npm为10.5.0
2)使用anaconda 创建用于open-weibu的虚拟环境
参考链接:https://blog.csdn.net/xianfianpan/article/details/143441456
conda create -n ollama python=3.11
conda activate ollama
复制代码
安装 open-webui
pip install open-webui
复制代码
启动下令,出现Open-Webui界面i
open-webui serve
复制代码
这里需要留意的是,本地访问http://0.0.0.0:8080会出现无法毗连,要换成http://localhost:8080或者http://127.0.0.1:8080
5**. ollama + open-webui *
+ DeepSeek R1 8B模型使用技巧*
**
左侧的工作空间,可以将文件上传到知识库中,为模型提供检索材料
deepseek-r1:8b 是通过ollama下载的模型,可以选择多个模型
links
https://www.cnblogs.com/REN-Murphy/p/18702762
效果演示
ollama run deepseek-r1:1.5b
复制代码
open-webui serve
复制代码
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
本帖子中包含更多资源
您需要
登录
才可以下载或查看,没有账号?
立即注册
x
回复
使用道具
举报
0 个回复
倒序浏览
返回列表
快速回复
高级模式
B
Color
Image
Link
Quote
Code
Smilies
您需要登录后才可以回帖
登录
or
立即注册
本版积分规则
发表回复
回帖并转播
回帖后跳转到最后一页
发新帖
回复
麻花痒
金牌会员
这个人很懒什么都没写!
楼主热帖
【SQL server速成之路】——身份验证及 ...
我今年12岁了,我喜欢打游戏,怎么能成 ...
2022年安装Kali Linux最详细过程,以及 ...
kubectl使用技巧:如何更方便地操作多 ...
密码学奇妙之旅、02 混合加密系统、AES ...
容器开发运维人员的 Linux 操作机配置 ...
Redis哨兵
Redis安装,主从复制、哨兵模式、集群 ...
Java基本语法
CS50-Python实验3,4
标签云
挺好的
服务器
快速回复
返回顶部
返回列表