新手上路 3小时前
主楼
[资源名称]
DualPipe
[资源来源]
github.com
[资源介绍]
DualPipe 一款用于大规模AI模型训练的双向流水线并行算法,解决训练核心效率问题,通过创新调度策略完全重叠前向和后向计算-通信阶段,同时减少流水线气泡。
[资源合集]
😀 😊 😵‍💫 😡 🤝 🙏 👍 👎 ❤️