安装 ollama

进入ollama官网:https://ollama.com/

根据自己的系统选择安装
在这里插入图片描述

安装完成后,在终端输入以下命令,检查Ollama版本:

ollama --version

我是Ubuntu系统,NVIDIA 3070 8G显存 16G运行内存,全用cpu也行,运行内存要大一些

在这里插入图片描述

安装deepseek

点击models即可进入模型列表,比如我们选择deepseek-r1

在这里插入图片描述
可以选择不同的模型,我选择了 8b的模型
在终端输入:

ollama run deepseek-r1:8b

即可自动下载模型

下载前期比较快,后面会慢,耐心等即可

下载完后会自动进入对话框

下载一次后面就不需要再下载了

安装open-webui

pip install open-webui
即可安装,安装失败的话就创建个虚拟环境,再pip装

安装后输入 open-webui serve

会出现Open-Webui界面:

在这里插入图片描述

在Windows浏览器中输入你的服务器ip的网址:http://your_ip:8080
即可打开界面

每次进入界面时都比较慢(主要看你服务器性能),等待一会即可。第一次进入会让你注册,注册一个即可

在这里插入图片描述

进入后会有你的模型列表,选择对应的

在这里插入图片描述
这里除了deepseek,其他模型也都是在ollama官网下载的。

llama3.2-vision是图片理解的模型(感觉不好用)

后面就可以输入内容玩了。

下载chatbox

chatbox要比open webui快很多

官网:https://chatboxai.app/zh

进不去就直接百度chatbox下载,下载安装好后

在设置里,这样选择,记得修改你的ip,端口不用改
在这里插入图片描述

然后在对话框就可以愉快的对话了

在这里插入图片描述

Logo

欢迎加入DeepSeek 技术社区。在这里,你可以找到志同道合的朋友,共同探索AI技术的奥秘。

更多推荐