当前位置:首页 > Deepseek最新资讯 > 正文内容

DeepSeek“开源周”第二天开源EP通信库

2个月前 (02-25)Deepseek最新资讯154

新京报贝壳财经讯(记者罗亦丹)北京时间2月25日,DeepSeek发布了其“开源周”第二天的成果:DeepEP,第一个用于MoE模型(混合专家模型)训练和推理的开源EP通信库。

据了解,EP为Expert Parallelism(专家并行),是一种在大规模分布式AI模型训练中使用的技术,能用于提升模型并行处理能力和训练效率。

DeepSeek介绍,DeepEP的特点包括:高效且优化的全对全(all-to-all)通信,节点内和节点间支持NVLink和RDMA,用于训练和推理预填充的高吞吐量内核,用于推理解码的低延迟内核,原生FP8调度支持,灵活的GPU资源控制,实现计算与通信重叠。

DeepSeek发布公告截图


“DeepSeek“开源周”第二天开源EP通信库” 的相关文章

DeepSeek开源第五弹:宣布开源3FS,所有Deepseek数据访问的助推器

DeepSeek开源第五弹:宣布开源3FS,所有Deepseek数据访问的助推器

每经快讯,2月28日,DeepSeek开源周第五天,DeepSeek在官方X账号宣布开源3FS,它是所有Deepseek数据访问的助推器。每日经济新闻...

天大 x DeepSeek,助你圆梦最美校园!

天大 x DeepSeek,助你圆梦最美校园!

春染花堤路,海棠缀满枝粉白花瓣如云似雪见证着无数学子逐梦研途的炽热初心值此海棠盛放之际天津大学携手DeepSeek构建研招AI问答智能体为百万考研学子点亮研途星光孤勇之旅,迷茫之时海棠智答始终相伴复试...

DeepSeek总结最浪费时间的7大行为,看完我开始深度反思

DeepSeek总结最浪费时间的7大行为,看完我开始深度反思

鲁迅有句名言,影响了我很多年。他说:“生命是以时间为单位的,浪费别人的时间等于谋财害命;浪费自己的时间,等于慢性自杀。”而很多人几乎每天都在慢性自杀,只是他们自己从未察觉。DeepSeek通过大数据统...

DeepSeek实战技巧:最强使用攻略,100个精品提示词

DeepSeek实战技巧:最强使用攻略,100个精品提示词

掌握 DeepSeek 这招,1000 神级提示词带你秒变 AI 高手想成为 AI 领域的佼佼者吗?这里有一份 DeepSeek 实战技巧大礼包!涵盖从新手入门到高手进阶的全方位教程,揭秘 99% 的...

李开复:DeepSeek将中美AI差距缩小至3个月

李开复:DeepSeek将中美AI差距缩小至3个月

参考消息网3月25日报道据新加坡《联合早报》网站3月25日报道,中国初创企业零一万物首席执行官李开复说,在人工智能(AI)发展方面,中国已将与美国在某些领域的差距缩小至仅3个月,因为中国初创企业深度求...

兰州大学上线DeepSeek本地服务

兰州大学上线DeepSeek本地服务

近日,兰州大学成功部署了由国产大模型公司深度求索(DeepSeek)推出的推理大模型DeepSeek-R1,目前已完成了数十款主流模型的部署工作,校内师生可通过高性能计算服务平台(https://hp...