依星源码资源网,依星资源网

 找回密码
 立即注册

QQ登录

只需一步,快速开始

【好消息,好消息,好消息】VIP会员可以发表文章赚积分啦 !
查看: 38|回复: 0

AI智能本地化Deepseek R1 越狱版安装详细文档教程

[复制链接] 主动推送

1万

主题

1万

帖子

1万

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
14809
发表于 5 天前 | 显示全部楼层 |阅读模式
AI智能本地化Deepseek R1 越狱版安装详细文档教程
越狱版的DeepSeek R1现已托管在Hugging face上,支持8B、14B、32B 【链接直达
配套教程网址
  1. https://www.youtube.com/watch?v=L1QkuWK4U9g
复制代码
可能有人会觉得越狱版没有官方版聪明,这是一个比较大的误解,官方版可是671B的,普通人是跑不起来的,大多数人能本地运行的都是7b、8b、14b、32b这几大类型的模型,是被蒸馏压缩过的,无法直接和671B相比,但是自己本地使用已足够。

AI智能本地化Deepseek R1 越狱版安装详细文档教程

AI智能本地化Deepseek R1 越狱版安装详细文档教程


DeepSeek-R1对显卡的需求取决于其参数大小。
对于1.5B和7B的模型,显卡并非必需,可以在没有GPU的情况下使用CPU进行推理。
如果需要GPU加速,可以选择消费级的GPU,如NVIDIA GTX 1650或RTX 3060(8-12 GB显存)‌
对于8B和14B的模型,需要高端GPU,如NVIDIA RTX 3090或A100(16-24 GB显存)‌
而对于32B和70B的模型,则需要专业级GPU,如NVIDIA A100或H100(32 GB+显存)‌
最大的671B模型则需要多GPU并行计算,例如多张A100或H100‌2。
此外,DeepSeek-R1还有动态量化版本,通过模型压缩技术降低了显存需求,适合家用电脑和移动设备‌
当然如果你有高级的硬件配置,你可以直接上70B的, 在Ollama 【链接直达

AI智能本地化Deepseek R1 越狱版安装详细文档教程

AI智能本地化Deepseek R1 越狱版安装详细文档教程


本地部署越狱版步骤
1、下载并 安装Ollama 【点击下载
2、在CMD终端下通过命令下载DeepSeek R1越狱版
7b
  1. ollama run huihui_ai/deepseek-r1-abliterated:7b
复制代码
8b
  1. ollama run huihui_ai/deepseek-r1-abliterated:8b
复制代码
14b
  1. ollama run huihui_ai/deepseek-r1-abliterated:14b
复制代码
32b
  1. ollama run huihui_ai/deepseek-r1-abliterated:32b
复制代码
70b
  1. ollama run huihui_ai/deepseek-r1-abliterated:70b
复制代码
3、安装 Web UI
就可以本地调用 deepseek r1 越狱版 AI 大模型 【点击下载

AI智能本地化Deepseek R1 越狱版安装详细文档教程

AI智能本地化Deepseek R1 越狱版安装详细文档教程
如果个人配置不适合可以选择第三方平台
华为与硅基流动合作的项目:进入
训练投喂 https://anythingllm.com/  教程


分配说明:

Embedder首选项 选择qwen2.5 https://ollama.com/library/qwen2.5:1.5b
  1. ollama run qwen2.5:1.5b
复制代码
  1. ollama pull nomic-embed-text
复制代码


相关帖子

扫码关注微信公众号,及时获取最新资源信息!下载附件优惠VIP会员6折;永久VIP4折
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

免责声明:
1、本站提供的所有资源仅供参考学习使用,版权归原著所有,禁止下载本站资源参与商业和非法行为,请在24小时之内自行删除!
2、本站所有内容均由互联网收集整理、网友上传,并且以计算机技术研究交流为目的,仅供大家参考、学习,请勿任何商业目的与商业用途。
3、若您需要商业运营或用于其他商业活动,请您购买正版授权并合法使用。
4、论坛的所有内容都不保证其准确性,完整性,有效性,由于源码具有复制性,一经售出,概不退换。阅读本站内容因误导等因素而造成的损失本站不承担连带责任。
5、用户使用本网站必须遵守适用的法律法规,对于用户违法使用本站非法运营而引起的一切责任,由用户自行承担
6、本站所有资源来自互联网转载,版权归原著所有,用户访问和使用本站的条件是必须接受本站“免责声明”,如果不遵守,请勿访问或使用本网站
7、本站使用者因为违反本声明的规定而触犯中华人民共和国法律的,一切后果自己负责,本站不承担任何责任。
8、凡以任何方式登陆本网站或直接、间接使用本网站资料者,视为自愿接受本网站声明的约束。
9、本站以《2013 中华人民共和国计算机软件保护条例》第二章 “软件著作权” 第十七条为原则:为了学习和研究软件内含的设计思想和原理,通过安装、显示、传输或者存储软件等方式使用软件的,可以不经软件著作权人许可,不向其支付报酬。若有学员需要商用本站资源,请务必联系版权方购买正版授权!
10、本网站如无意中侵犯了某个企业或个人的知识产权,请来信【站长信箱312337667@qq.com】告之,本站将立即删除。
郑重声明:
本站所有资源仅供用户本地电脑学习源代码的内含设计思想和原理,禁止任何其他用途!
本站所有资源、教程来自互联网转载,仅供学习交流,不得商业运营资源,不确保资源完整性,图片和资源仅供参考,不提供任何技术服务。
本站资源仅供本地编辑研究学习参考,禁止未经资源商正版授权参与任何商业行为,违法行为!如需商业请购买各资源商正版授权
本站仅收集资源,提供用户自学研究使用,本站不存在私自接受协助用户架设游戏或资源,非法运营资源行为。
 
在线客服
点击这里给我发消息 点击这里给我发消息 点击这里给我发消息
售前咨询热线
312337667

微信扫一扫,私享最新原创实用干货

QQ|免责声明|小黑屋|依星资源网 ( 鲁ICP备2021043233号-3 )|网站地图

GMT+8, 2025-4-4 04:50

Powered by Net188.com X3.4

邮箱:312337667@qq.com 客服QQ:312337667(工作时间:9:00~21:00)

快速回复 返回顶部 返回列表