ollama摆设deepseek实操记载

[复制链接]
发表于 2025-11-3 16:27:09 | 显示全部楼层 |阅读模式
1. 安装 ollama


1.1 下载并安装

官网 https://ollama.com/
Linux安装下令  https://ollama.com/download/linux
  1. curl -fsSL https://ollama.com/install.sh | sh
复制代码



安装乐成截图




3. 开放外网访问


  1. 1、首先停止ollama服务:systemctl stop ollama
  2. 2、修改ollama的service文件:/etc/systemd/system/ollama.service
  3. 在[Service]下边增加一行:Environment="OLLAMA_HOST=0.0.0.0:8080",端口根据实际情况修改
  4. 3、重载daemon文件 systemctl daemon-reload
  5. 4、启动ollama服务 systemctl start ollama
  6. Ollama在windows环境中如何支持通过IP来访问接口
  7. 1、首先停止ollama服务的允许。由于windows下安装的ollama不是一个标准的windows service,所以只能直接杀掉两个ollama进程。
  8. 2、为当前windows系统添加环境变量:电脑-属性-高级系统设置-环境变量
  9. 变量:OLLAMA_HOST,值:0.0.0.0:11434
  10. 3、关掉已打开的命令行窗口,打开新命令行,用ollama serve或者ollama start来启动ollama服务,此时ollama服务在启动时将读取环境变量中的OLLAMA_HOST,支持IP端口访问
复制代码

4. 修改模子存储位置


  1. Windows环境
  2. 环境变量-系统变量-新建
  3. 变量名:OLLAMA_MODELS
  4. 变量值:D:\Ollama
  5. Linux环境默认存储路径为: /usr/share/ollama/.ollama/models
  6. 假如我要将下载存储路径修改为 /data/ollama
  7. #步骤一:创建目录 sudo mkdir /data/ollama
  8. #步骤二:将目标路径的所属用户和组改为root
  9. sudo chown -R ollama:ollama /data/ollama
  10. #步骤三:将其文件权限更换为777
  11. sudo chmod -R 777 /data/ollama
  12. #步骤四:打开ollama.service文件
  13. sudo vi /etc/systemd/system/ollama.service
  14. #步骤五:进行修改并添加环境(注意路径要改成自己设置的, 其它的默认, 此处仅添加了 Environment="OLLAMA_MODELS=/data/ollama"
  15. Environment="OLLAMA_HOST=0.0.0.0:11434")
  16. [Unit]
  17. Description=Ollama Service
  18. After=network-online.target
  19. [Service]
  20. ExecStart=/usr/local/bin/ollama serve
  21. User=ollama
  22. Group=ollama
  23. Restart=always
  24. RestartSec=3
  25. Environment="PATH=/home/hum/.local/bin:/home/hum/anaconda3/bin:/home/hum/anaconda3/condabin:/home/hum/anaconda3/bin:/usr/local/sbin:/usr/local/bi
  26. n:/usr/sbin:/usr/bin:/sbin:/bin:/usr/games:/usr/local/games:/snap/bin"
  27. Environment="OLLAMA_MODELS=/data/ollama"
  28. Environment="OLLAMA_HOST=0.0.0.0:11434"
  29. [Install]
  30. WantedBy=default.target
  31. #步骤六:
  32. 重载daemon文件 sudo systemctl daemon-reload
  33. 启动ollama服务 sudo systemctl start ollama
复制代码


2. 摆设deepseek模子   deepseek-r1:1.5b


  1. ollama run deepseek-r1:1.5b
复制代码
显得比力弱





3. 当地摆设 chatbox 接入 ollama


Chatbox AI: Your AI Copilot, Best AI Client on any device, Free Download



4. 使用





5. 配景进程将别的几个版本下载下来


  1. cd /data/ollama
  2. nohup ollama pull deepseek-r1:671b > d0.log 2>&1 &
  3. nohup ollama pull deepseek-r1:14b > d14.log 2>&1 &
  4. nohup ollama pull deepseek-r1:32b > d32.log 2>&1 &
  5. nohup ollama pull deepseek-r1:70b > d70.log 2>&1 &
复制代码


免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。

本帖子中包含更多资源

您需要 登录 才可以下载或查看,没有账号?立即注册

×
回复

使用道具 举报

登录后关闭弹窗

登录参与点评抽奖  加入IT实名职场社区
去登录
快速回复 返回顶部 返回列表