Windows搭建Docker+Ollama+Open-WebUI部署DeepSeek本地模型

CPUOS2010 已于 2025-01-29 23:30:20 修改

阅读量5.2k 收藏 40

点赞数 7

分类专栏： AI大模型 文章标签： windows docker 容器 AI编程

于 2025-01-29 23:27:57 首次发布

版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。

本文链接： https://blog.csdn.net/CPUOS2010/article/details/145396003

版权

AI大模型 专栏收录该内容

1 篇文章

订阅专栏

Windows搭建Docker+Ollama+Open-WebUI部署DeepSeek本地模型

本文将详细介绍如何在 Windows 系统 上安装和使用 Docker+Ollama + Open-WebUI，这三个强大的工具将帮助您轻松管理和运行大型语言模型DeepSeek。Ollama 简化了模型的下载与部署，而 Open-WebUI 则提供了一个直观的图形用户界面，使用户能够更方便地与模型进行交互。

步骤 1：安装 Docker

（1）下载 Docker Desktop

1. 访问 Docker 官方网站。
2. 点击“Download for Windows”按钮，下载 Docker Desktop 安装程序。
   

（2）安装 Docker Desktop

1. 双击下载的安装程序，按照提示完成安装。
2. 安装完成后，启动 Docker Desktop。

（3）启用 WSL 2 后端(可选)

如果你使用的是 Windows 10 或更高版本，建议启用 WSL 2 后端以提高性能。

1. 打开 Docker Desktop，进入“Settings” -> “General”，勾选“Use the WSL 2 based engine”。
2. 进入“Resources” -> “WSL Integration”，启用你的 WSL 发行版。

（4）验证 Docker 安装

打开命令提示符或 PowerShell，输入以下命令：

docker --version

步骤 2：安装 Ollama

（1）下载 Ollama

1. 访问 Ollama 官方网站 或 GitHub 仓库，下载适用于 Windows 的 Ollama 安装程序。
   

2. 按照提示完成安装。

（2）验证 Ollama 安装

打开命令提示符或 PowerShell，输入以下命令：

ollama --version

如果显示 Ollama 版本信息，说明安装成功。

（3）下载 DeepSeek-V3 模型

在CMD命令提示符使用以下命令下载 DeepSeek-V3 模型：

ollama run deepseek-v3

等待模型下载完成。

（4）验证模型是否可用

使用以下命令测试模型：

ollama run deepseek-v3 "你好，DeepSeek-V3！"

如果模型返回响应，说明模型加载成功。

步骤 3：安装 Open WebUI

（1）拉取 Open WebUI Docker 镜像

Open WebUI 是一个用于与大模型交互的 Web 界面。使用以下命令拉取 Open WebUI 镜像：

docker pull ghcr.io/open-webui/open-webui:main

（2）运行 Open WebUI 容器

使用以下命令启动 Open WebUI 容器，并连接到 Ollama：

docker run -d -p 3000:8080 --add-host=host.docker.internal:host-gateway -v open-webui:/app/backend/data --name open-webui --restart always ghcr.io/open-webui/open-webui:main

解释：

• -d：后台运行容器。
• -p 3000:8080：将容器的 8080 端口映射到主机的 3000 端口。
• --add-host=host.docker.internal:host-gateway：添加主机映射，使容器能够访问主机服务。
• -v open-webui:/app/backend/data：将 Open WebUI 的数据目录挂载到 Docker 卷 open-webui。
• --name open-webui：为容器命名。
• --restart always：设置容器始终自动重启。
• ghcr.io/open-webui/open-webui:main：使用的 Docker 镜像。

（3）验证 Open WebUI 是否运行

打开浏览器，访问 http://localhost:3000。 如果看到 Open WebUI 的登录界面，说明运行成功。

http://localhost:3000

步骤 4：通过 Open WebUI 使用 DeepSeek-V3 大模型

（1）登录 Open WebUI

首次访问 Open WebUI 时，需要创建一个账户。

1. 输入用户名和密码，完成注册并登录。

（2）连接到 Ollama

在 Open WebUI 界面中，进入设置页面。

1. 在“Ollama API URL”字段中输入 http://host.docker.internal:11434，然后保存设置。

（3）选择 DeepSeek-V3 模型

在 Open WebUI 界面中，找到模型选择菜单。

1. 选择 DeepSeek-V3 作为当前使用的模型。

（4）与模型交互

在输入框中输入问题或指令，例如：

你好，DeepSeek-V3！你能帮我写一段代码吗？

点击“发送”按钮，等待模型生成回复。

步骤 5：停止和删除容器

（1）停止容器

如果需要停止容器，可以使用以下命令：

docker stop open-webui

（2）删除容器

如果需要删除容器，可以使用以下命令：

docker rm open-webui