[deepin exploration] deepin UOS AI无缝接入 DeepSeek-R1 模型!离线、在线都支持!
Tofloor
poster avatar
deepin小助手
Super Moderator
OM
2025-02-07 18:10
Author

image.png

DeepSeek 大模型自发布以来吸引了众多用户关注,为了让 deepin 用户更好地体验这一前沿技术,UOS AI 现已适配接入 DeepSeek-R1 端侧模型!无需忍受服务器崩溃,两步即可在本地独享DeepSeek-R1模型带来的震撼体验。

本次,我们为大家提供了「离线部署」和「在线接入」两种方式在UOS AI 中使用 DeepSeek-R1 模型,大家可根据自身设备及网络环境等情况自行选择:

  • 方法一:使用 deepin 官方适配的 UOS AI DeepSeek-R1 1.5B 模型离线部署
  • 方法二:使用 UOS AI的自定义模型接口在线接入DeepSeek-R1 API

注:离线部署方式仅支持 deepin 23、deepin 25 Preview系统使用;在线接入方式支持 UOS V20、deepin 20.9、deepin 23、deepin 25 Preview系统使用。

方法一:UOS AI 离线部署DeepSeek-R1 1.5B 模型

Step 1:更新 UOS AI 及向量化模型插件

若您正在使用deepin 23,可从应用商店更新 UOS AI 至最新版。

image.jpeg

注:若您是首次在 deepin 中下载使用 UOS AI,根据界面提示「勾选用户使用协议-免费领取试用账号」后即可直接进入 UOS AI 全新版本。

若您正在使用 deepin 25 Preview,请通过以下命令升级 UOS AI 至最新版,应用商店稍晚些时候更新。

sudo apt update
sudo apt install uos-ai deepin-modelhub uos-ai-rag

更新完成后,打开 UOS AI 的「设置」选项,在「模型配置-本地模型」中选择「向量化模型插件-安装/更新」,在自动跳转到应用商店界面后,点击安装/更新即可。

image (1).png

Step 2:安装 DeepSeek-R1 模型 GGUF 版本

UOS AI 的模型后端驱动框架是基于 llama.cpp,大家可直接在魔搭社区找到 DeepSeek-R1 的 GGUF 版本。

这里我们将以最通用且便捷的 1.5B 模型为例,其模型大小适中,对硬件配置要求不高,仅需 CPU 即可实现流畅推理。(若您正在使用 CUDA 推理,可以等后续 deepin 系统更新 CUDA 版本的推理后端框架)。

已适配 UOS AI 的 DeepSeek-R1 1.5B 模型的下载地址如下:

百度网盘: https://pan.baidu.com/s/1-786vFU4dunpdproiOHdbQ?pwd=zxxw
123网盘:https://www.123865.com/s/XXsfjv-Jjcph (备用链接:https://www.123684.com/s/XXsfjv-Jjcph
夸克网盘:https://pan.quark.cn/s/edbf721fefaf

将模型文件下载完成后,打开文件管理器,直接进入如下目录:

/home/用户名/.local/share/deepin-modelhub/models   #其中用户名替换为自己的计算机用户名

注:若没有 deepin-modelhub 文件夹以及下面的 models 文件夹,可以自己手动创建该文件夹。

进入 models 文件夹,将下载完成的模型文件夹解压后,直接复制到刚刚创建的文件夹路径中,注意检查路径不要有多的名称。模型完整路径如下:

/home/用户名/.local/share/deepin-modelhub/models/DeepSeek-R1-1.5B/gguf   #其中用户名替换为自己的计算机用户名

image (2).png

经过上述步骤,再次打开 UOS AI 界面,即可手动切换使用 DeepSeek-R1-1.5B 模型。

image (3).png

以下是一个简单的DeepSeek-R1 运行示例:

image.gif

方法二:UOS AI 在线接入 DeepSeek-R1 API

Step 1:获取 API key

访问 DeepSeek 官网(https://www.deepseek.com/),注册/登录账号后,创建并获取API key。若由于服务器压力等问题无法访问以上页面,也可以访问其他渠道获取 API key。

image (4).png

本文将以硅基流动(https://siliconflow.cn/zh-cn/)为例,在注册/登录账号后,前往 API 密钥管理页面,创建并获取 API key。

image (5).png

Step 2:在 UOS AI 中接入 DeepSeek-R1 在线模型

打开 UOS AI 的「设置」选项,在「模型配置」中选择「在线模型-添加」,进入UOS AI的添加模型界面。

image (6).png

完成添加窗口中的内容填写,并点击确定即可,本例中使用到的信息参考如下:

账号名称:自定义
模型类型:自定义
API Key:粘贴 Step 1中所复制的 API 密钥
模型名:deepseek-ai/DeepSeek-R1
请求地址:https://api.siliconflow.cn/v1/chat/completions

截图_选择区域_20250207175641.png

填写完毕并提交确认后,即可在UOS AI中选择 DeepSeek-R1 模型进行使用。

截图_uos-ai-assistant_20250207174950.png

理论上只要你在硅基流动账户中的余额够用,其模型仓库的所有模型都可以通过上述方法在UOS AI中配置调用,只需在上述配置方法中的模型名处填写对应的完整模型名称即可(如上图所示),其它不变。

截图_选择区域_20250207142123.png

需要注意的是,在线大模型受网络及用户访问量影响,偶尔可能会出现访问慢、超时或无法访问的情况,建议多次尝试即可。

在线模型由于当前适配问题,DeepSeek深度思考的内容与对话内容尚未分开,但这并不影响正常使用,UOS AI 团队会在后续更新中尽快优化体验。

最后感谢社区用户「陈正勇」提供的在线配置参考~大家在体验过程中有任何建议或问题,欢迎在评论区留言,或前往deepin社区论坛讨论交流,优质反馈将有机会获得deepin官方周边礼品噢!

以用为本.png

Reply Favorite View the author
All Replies
2 / 6
To page
152******14
deepin
2025-02-08 12:18
#21
It has been deleted!
鲜衣怒马
deepin
2025-02-08 14:56
#22

随便问个简单问题都这样,看来还是得上更好的CPU+显卡
image.png

Reply View the author
🎶
deepin
2025-02-08 15:26
#23

微信图片_2025-02-08_152307_507.png按教程来的,怎么回事呢?

Reply View the author
预见方能遇见
deepin
2025-02-08 15:32
#24

如何训练DeepSeek呢,想把他训练成投资理财一类的助手。

Reply View the author
135******99
deepin
2025-02-08 15:46
#25

方法一按步骤添加后,最后一 步没有出现deepseek-R1

Reply View the author
鲜衣怒马
deepin
2025-02-08 16:09
#26
预见方能遇见

如何训练DeepSeek呢,想把他训练成投资理财一类的助手。

你问问它怎么训练它啊

Reply View the author
Meister
deepin
2025-02-08 16:22
#27
xuqi

/home/用户名/.local/share/deepin-modelhub/models

可能是解压模型文件路径没配置对,就会有这类的报错,可以检查试试看~

我查找.local文件夹找不到啊,自己设置了个local文件夹按步骤操作,无法启用。

Reply View the author
deepin小助手
Super Moderator
OM
2025-02-08 17:19
#28

出现“连接失败,请检查是否连接了互联网,或稍后再试。”的用户们可以去大模型拷贝的路径下看看最底层文件夹里是不是三个文件都齐全,如果出现某一个文件缺失,都会出现这样的提示;可以将从网盘下载的完整文件再重新拷贝一遍,重启UOS AI即可恢复正常。

/home/用户名/.local/share/deepin-modelhub/models

image.png

Reply View the author
fhqiw
deepin
2025-02-08 17:46
#29
天平虎

解压后文件夹中有3个文件,都需要复制到指定位置,才可以离线使用。

如果是直接拖拽的文件夹,有可能只复制了.gguf文件。
image.png

好了,谢谢!

Reply View the author
王猛龙
deepin
2025-02-08 22:21
#30

我是Intel ultra 125H ,用的 deepseek-r1-7b-q8 大模型,比1.5B好用,但是生成会很慢,

我让1.5b 用 ts 语法写一段冒泡排序的语法,他就死循环了,相比之下还是7B 好用一点

Reply View the author
hanshuai8953
deepin
2025-02-09 13:08
#31
观察者

靠谱的方法是你维护手册做成知识库喂给它,或者加搜索插件,才能更好的处理问题。我也用的1.5b的蒸馏模型,给出的答案不知道靠谱不。
Screenshot_20250208_110332.png

说一句是在胡扯毫不为过。

Reply View the author
ljq790615
deepin
2025-02-09 20:09
#32

在线版搞不定

Reply View the author
ljq790615
deepin
2025-02-09 20:19
#33
It has been deleted!
情笑言
deepin
2025-02-09 20:35
#34

感谢分享!看了教程试了下,体验不是太好。

UOS AI 本地部署deepseek r1-1.5B 和deepseek r1-14B

思考的时间非常久,生成的速度很慢,同样的模型比LMstudio慢了非常多;我的显卡是amd rx6800 16GB显存,lmstudio几乎很快能出结果,但UOS AI就慢得离谱,而且CPU占用80%多甚至更高。我不知道自己哪里没有设置好,才导致这种状况。

Reply View the author
情笑言
deepin
2025-02-09 20:44
#35
ljq790615 It has been deleted!

借花献佛,里面少了文件,你把这两个文件放到模型文件一起。

config.zip

截图_选择区域_20250209203945.png

截图_选择区域_20250209204152.png

这个名字应该是可以编辑的,可以改成自己下载模型的名字,就是速度太慢了,生成速度让人抓狂!

Reply View the author
199******82
deepin
2025-02-10 08:42
#36
James

V23版本UOS 下,

方法一:UOS AI 离线部署Dee1.5B pSeek-R1 模型

按照方法拷贝进去后,UOS AI 的选项里没有Dee1.5B pSeek-R1本地部署。不知道啥原因就是出不来选项。

我的也是,在终端能查到文件,在文件夹一层一层找,找不到

Reply View the author
星辰使者
deepin
2025-02-10 09:27
#37

20.9能否支持?

Reply View the author
199******82
deepin
2025-02-10 10:28
#38
199******82

我的也是,在终端能查到文件,在文件夹一层一层找,找不到

现在能用了,刚才是没有把uos ai更新到最新版本

Reply View the author
199******82
deepin
2025-02-10 10:33
#39

image.png

求助:安装了本地模型,还需要联网吗?

Reply View the author
deepin小助手
Super Moderator
OM
2025-02-10 10:53
#40
199******82

image.png

求助:安装了本地模型,还需要联网吗?

应该是本地模型的路径没有放对 ,或者拷贝的时候少了文件,可以看下置顶评论。

Reply View the author
2 / 6
To page
New Thread

Popular Events

More
国际排名
WHLUG