【17页PPT】腾讯分布式云DeepSeek解决方案.pptxVIP

【17页PPT】腾讯分布式云DeepSeek解决方案.pptx

  1. 1、本文档共17页,可阅读全部内容。
  2. 2、有哪些信誉好的足球投注网站(book118)网站文档一经付费(服务费),不意味着购买了该文档的版权,仅供个人/单位学习、研究之用,不得用于商业用途,未经授权,严禁复制、发行、汇编、翻译或者网络传播等,侵权必究。
  3. 3、本站所有内容均由合作方或网友上传,本站不对文档的完整性、权威性及其观点立场正确性做任何保证或承诺!文档内容仅供研究参考,付费前请自行鉴别。如您付费,意味着您自己接受本站规则且自行承担风险,本站不退款、不进行额外附加服务;查看《如何避免下载的几个坑》。如果您已付费下载过本站文档,您可以点击 这里二次下载
  4. 4、如文档侵犯商业秘密、侵犯著作权、侵犯人身权等,请点击“版权申诉”(推荐),也可以打举报电话:400-050-0827(电话支持时间:9:00-18:30)。
  5. 5、该文档为VIP文档,如果想要下载,成为VIP会员后,下载免费。
  6. 6、成为VIP后,下载本文档将扣除1次下载权益。下载后,不支持退款、换文档。如有疑问请联系我们
  7. 7、成为VIP后,您将拥有八大权益,权益包括:VIP文档下载权益、阅读免打扰、文档格式转换、高级专利检索、专属身份标志、高级客服、多端互通、版权登记。
  8. 8、VIP文档为合作方或网友上传,每下载1次, 网站将根据用户上传文档的质量评分、类型等,对文档贡献者给予高额补贴、流量扶持。如果你也想贡献VIP文档。上传文档
查看更多

腾讯分布式云DeepSeek本地部署方案软硬一体开箱即用,加速企业DeepSeek落地;

模型自我进化

能力的“涌现”

DeepSeek-R1-Zero展示出了自我进化(self-evolution)能力,随着强化学习训练进程的深入,模型的思考时间在增加,并自发出现了模型重新审视评估其先前步骤、以及探索解决问题的替代方法等更加复杂行为,是模型自我进化能力的“涌现”,代表着强化学习(RL)有可能在人工系统中解锁新的智能水平,为未来更加自适应的模型铺平道路。;

I企业引入DeepSeek难点:合规与效率能否兼容,算力和应用都需考虑;;

产品场景:传统政企、本地IDC、专属/私有云

?典型客户场景:央某著名企业/中大型私企IT底座、泛政/事业单位、智慧园区、行业云

?部署位置:客户本地IDC、边缘场景(工厂/商场/医院/学校…)

?同场景产品:超融合/VMWare、大型私有云、其他分布式云产品

解决痛点:客户本地IT-降本增效、能力升级

?本地部署:保持本地部署、专属化服务、就近服务等私有化部署优势

?中心管控:解决传统私有云可靠性、性价比低、能力弱等痛点;

方案优势1:开箱即用的强大AIInfra

腾讯云自研全栈AIInfra,高性能H20/L20HCC实例,支持3.2TB星脉网络,支持虚拟化、容器(qGPU)等丰富算力池化方案

方案优势2:安全合规的本地部署方案

支持客户指定的本地IDC本地部署,所有管控相关流量、运维、软件升级均

支持客户审计

方案优势3:DeepSeek应用构建全家桶

?公有云50+丰富IaaS、PaaS下沉本地,含大模型常用高性能存储、矢量数据库等

?支持快速DeepSeek应用构建:Ti-One训推平台、知识引擎等组件一键部署

方案优势4:托管交付/运维、公有云一致体验

所有相关软硬件由腾讯云全权负责交付、运维,基于分布式云CDC/CDZ,客户可在本地IDC享受与公有云一致的优秀服务体验;

客户场景;

方案型号;

推荐:主流GPU卡,合理配比下,显存越大越好(96GB),且支持卡间互联;

AI服务平台;

I腾讯云优势AI云服务1:Ti-One机器学习平台,一键部署全系大模型服务;

难点:涉及业务接口多、涉及反问澄清;

场景诉求

.大模型训练涉及千亿模型参数,需要使用分布式的方式加速模型训练速度;

.多机分布式训练中网络通信占比越来越重;

.简单堆机器的方式反而会导致分布式性能不升反而下降的问题;

解决方案

.TACOTrain与TACOInfer提供全流程加速服务;

.快速完成工业级训练或推理任务部署;

.无感接入,轻量部署;

.极致性能,助力业务从数倍到数十倍的加速优化;

.全场景支持CPU/GPU、各版本CUDA及Tensorflow/Pytorch/Onnx等训练框架;;

policy;

场景分析:对于数百卡级视觉、感知及大模型SFT场景,主要瓶颈在于算力,大规模高带宽组网存在一定冗余。

架构规划:通过自研智能网卡实现vRDMA能力,可基于VPC网络实现高网络吞吐,为AI训练提供更高性价比。

核心优势:不增加额外成本实现性能提升,支持多地域灵活部署,通过训推一体部署提升资源利用率。

基础网络性能提升

130%

110%100%100%

10%25%

80%;

I腾讯云AI算力优化能力4:星脉网络,自研高性能RDMA网络方案;

文档评论(0)

***** + 关注
实名认证
文档贡献者

该用户很懒,什么也没介绍

1亿VIP精品文档

相关文档