铁佛 发表于 2025-3-6 15:59:44

Ollama +Docker+OpenWebUI

1 Ollama

1.1 下载Ollama

https://ollama.com/download
1.2 运行llama3

$ ollama run llama3
pulling manifest
pulling 00e1317cbf74... 100% ▕████████████████████████████████████████████████████████████████████████████████████▏ 4.7 GB
pulling 4fa551d4f938... 100% ▕████████████████████████████████████████████████████████████████████████████████████▏12 KB
pulling 8ab4849b038c... 100% ▕████████████████████████████████████████████████████████████████████████████████████▏254 B
pulling 577073ffcc6c... 100% ▕████████████████████████████████████████████████████████████████████████████████████▏110 B
pulling ad1518640c43... 100% ▕████████████████████████████████████████████████████████████████████████████████████▏483 B
verifying sha256 digest
writing manifest
removing any unused layers
success
如有需要运行其他大语言模子,访问 https://ollama.com/library
例如要更换为 gemma https://ollama.com/library/gemma ,将运行下令更换为 ollama run gemma。
如果要退出,使用以下下令 /bye。
2 Docker

https://www.docker.com/products/docker-desktop/
下载安装Docker,注册一个Docker账号。
3 WebUI

https://github.com/open-webui/open-webui
# If Ollama is on your computer, use this command:
$ docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main
4 查看Containers

https://i-blog.csdnimg.cn/blog_migrate/93ff31666fa3463dbeaae85b6b5e1d98.png
5 本地访问



[*]http://localhost:3000/
[*]创建账号
[*]Select a model -> llama3:latest
https://i-blog.csdnimg.cn/blog_migrate/eb1f3bac326b51ee09da866ee6e7833f.png
https://i-blog.csdnimg.cn/blog_migrate/ea560da3b8e0128e2068eee59e24955c.png

免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页: [1]
查看完整版本: Ollama +Docker+OpenWebUI