摩尔线程发布SimuMax v1.1:新增可视化配置界面
3 天前 / 阅读约1分钟
来源:凤凰网
摩尔线程发布SimuMax 1.1版本,升级为一体化全栈工作流平台,新增可视化配置界面等功能,支持从单卡到万卡集群的分布式训练仿真,增强对Megatron-LM兼容性。

凤凰网科技讯 1月8日,摩尔线程近日发布开源大模型分布式训练仿真工具SimuMax的1.1版本。该版本从单一仿真工具升级为一体化全栈工作流平台,新增可视化配置界面、智能并行策略搜索及系统配置生成流水线等功能。

SimuMax v1.1继续支持从单卡到万卡集群的分布式训练仿真,可模拟显存使用与训练性能。新版本增强了对训练框架Megatron-LM的兼容性,并优化了混合并行训练中节点间网络带宽竞争的建模精度。该工具旨在帮助用户在无需实际执行完整训练的情况下,评估与优化训练效率。