- 1、本文档共121页,可阅读全部内容。
- 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
- 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载。
- 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
Deepseek内部研讨系列
DeepSeek私有化部署和一体机
AI肖睿团队
(韩露、王春辉、顾跃、李娜、谢安明、陈钟)
北京
•北大青鸟人工智能研究院
•北大计算机学院元宇宙技术研究所
摘要
1.本次讲座为DeepSeek原理和应用系列研讨的讲座之一,让大家可以决策是否需要自己部署DeepSeek系列模型,并了
解自己本地化部署DeepSeek的基本方法,同时了解更专业的企业级部署方法,有助于选择DeepSeek一体机型号,并
能理解DeepSeek云服务的工作机制和原理,用好DeepSeek云服务的API调用方法。
2.本讲座的内容分为四个主要部分:
①首先,除了DeepSeek满血版之外,还有各种各样的蒸馏版和量化版,以及DeepSeek的不同专业模型。我们将介绍人工智能大模
型的基本概念,以及DeepSeek各个模型的特点与适用场景,对比不同规模模型的性能表现,帮助大家选择最适合自己需求的版本。
②其次,对于普通用户在自己的电脑上部署和体验DeepSeek(蒸馏版)的情况,我们会评估和建议硬件要求,演示如何通过Ollama
命令行高效部署DeepSeek模型,解决下载过程中可能遇到的常见问题。为了提升在自己的电脑上安装DeepSeek模型后,大家与
DeepSeek模型的交互体验,我们还将介绍OpenWebUI和Chatbox等前端展示工具的配置与使用方法。
③然后,对于专业级的企业部署DeepSeek,或把DeepSeek(蒸馏版和满血版)部署在专业的昂贵的推理机上,本讲座将探讨基于
Transformers快速验证和vLLM的高性能部署方案,并提供真实企业基于vLLM的部署DeepSeek-70b的相关数据和经验。
④最后,作为补充内容,针对计算资源受限的场景,我们专门设计了低成本部署环节,详细讲解UnslothR1动态量化部署的三种实
现路径:基于llama.cpp、KTransformers以及Ollama框架动态量化部署。
3.在技术学习的道路上,优质学习资源至关重要。推荐大家参考《人工智能通识教程(微课版)》这本系统全面的入门教
材,结合B站“思睿观通”栏目的配套视频进行学习。此外,欢迎加入社区,以及“AI肖睿团队”的视频号和
微信号,与志同道合的AI爱好者交流经验、分享心得。
2
ciNiV
898
目录
CONTENTS
人工智能与DeepSeek02个人部署DeepSeek
03企业部署DeepSeek04DeepSeek一体机
3
NiV6
您可能关注的文档
- 电子行业深度研究报告:AI眼镜洞见未来,SoC智控万物互联.docx
- 餐饮行业产品上新报告(2025年1月)-红餐研究院.docx
- 2024年度中国电商服务商消费投诉数据与典型案例报告-网经社.docx
- 2025面向工程审计行业的DeepSeek大模型应用指南.docx
- 2024年度中国品牌电商消费投诉数据与典型案例报告-网经社.docx
- 2025年deepseek技术全景解析报告-重塑全球AI生态的中国力量.docx
- 2025年防晒市场洞察及趋势前瞻.pptx
- 2024年中国汽车产业出海回顾分析-中汽信科国际化研究团队.pptx
- 连锁超市品牌小红书营销推广方案.docx
- 对标一流-2025年国央企风控合规案例白皮书-启信慧眼.docx
文档评论(0)