DeepSeek“开源周”第二天开源EP通信库

新京报记者罗亦丹编辑陈莉

2025-02-25 18:29

新京报贝壳财经讯（记者罗亦丹）北京时间2月25日，DeepSeek发布了其“开源周”第二天的成果：DeepEP，第一个用于MoE模型（混合专家模型）训练和推理的开源EP通信库。

据了解，EP为Expert Parallelism（专家并行），是一种在大规模分布式AI模型训练中使用的技术，能用于提升模型并行处理能力和训练效率。

DeepSeek介绍，DeepEP的特点包括：高效且优化的全对全（all-to-all）通信，节点内和节点间支持NVLink和RDMA，用于训练和推理预填充的高吞吐量内核，用于推理解码的低延迟内核，原生FP8调度支持，灵活的GPU资源控制，实现计算与通信重叠。

DeepSeek发布公告截图

编辑陈莉校对柳宝庆

来阅读我的更多文章吧

罗亦丹

新京报记者