首页行业资讯AIDeepSeek开源周第二日:开源DeepEP通信库

DeepSeek开源周第二日:开源DeepEP通信库

时间2025-02-25 16:31:42发布胡小编分类AI浏览417
导读:凤凰网科技讯 2月25日,DeepSeek官宣,今日开源DeepEP,第一个用于MoE模型训练和推理的开源EP通信库。特点有:高效、优化的全员沟通;节点内和节点间均支持NVLink和RDMA;用于训练和推理预填充的高吞吐量内核;用于推理解码的低延迟内核;原生FP8调度支持;灵活的GPU资源控制,实现计算-通信重叠。...

凤凰网科技讯 2月25日,DeepSeek官宣,今日开源DeepEP,第一个用于MoE模型训练和推理的开源EP通信库。特点有:高效、优化的全员沟通;节点内和节点间均支持NVLink和RDMA;用于训练和推理预填充的高吞吐量内核;用于推理解码的低延迟内核;原生FP8调度支持;灵活的GPU资源控制,实现计算-通信重叠。

Z-Blog应用版权声明:以上内容作者已申请原创保护,未经允许不得转载,侵权必究!授权事宜、对本内容有异议或投诉,敬请联系网站管理员,我们将尽快回复您,谢谢合作!

展开全文READ MORE
Perplexity宣布推出人工智能驱动网络浏览器Comet波士顿动力创始人:已购买宇树机器人,DeepSeek创新只是个开始

游客 回复需填写必要信息
请先 登录 再评论,若不是会员请先 注册