ToB企服应用市场:ToB评测及商务社交产业平台

标题: 设置Ollama在局域网中访问的方法（Ubuntu） [打印本页]

作者: 钜形不锈钢水箱 时间: 2024-6-20 18:40
标题: 设置Ollama在局域网中访问的方法（Ubuntu）
趁着Llama3的热度试了一下Ollama，果然部署推理大模子很有用。一个现实的需求是，如果我们要在局域网中访问Ollama上大模子的服务，应该怎么办呢？参考了一下其他博客的方法
例如：一分钱不花！手把手教你部署Google最强开源AI大模子Gemma教程_windows "ollama_host=0.0.0.0:11434" ollama serve-CSDN博客
也不是很麻烦：
首先打开Ollama的设置文件

sudo gedit /etc/systemd/system/ollama.service

复制代码

在[Service]下面加上：

Environment="OLLAMA_HOST=0.0.0.0:11434"

复制代码

其次设置防火墙，打开端口。Ollama的默认端口是11434，以是直接输入：

sudo ufw allow 11434/tcp

复制代码

再重启之后，就可以通过http在局域网中访问了：
http://192.168.1.XX:11434
可以看到：

Ollama is running

复制代码

就可以通过局域网或者另一台机子上的LangChain调用了。就简单记载这么多。

免责声明：如果侵犯了您的权益，请联系站长，我们会及时删除侵权内容，谢谢合作！更多信息从访问主页：qidao123.com:ToB企服之家，中国第一个企服评测及商务社交产业平台。

欢迎光临 ToB企服应用市场:ToB评测及商务社交产业平台 (https://dis.qidao123.com/)