彩云科技：AI团队两次刷新大模型训练速度世界纪录，相关代码已并入官方开源仓库

📋总体概括

AI公司彩云科技宣布，其基础模型算法团队在全球开源竞速项目NanoGPT Speedrun中连续两次刷新大模型训练速度世界纪录，将达标训练时间压缩至1分16秒，相关代码已并入官方开源仓库。支撑纪录的是其两项原创架构创新——DCMHA（可动态组合多头注意力）和MUDD（多路动态稠密连接），分别于2024年和2025年发表于ICML并均入选口头报告。对一家中国AI公司而言，以底层架构创新而非堆算力方式登顶国际竞速榜单，含金量值得关注。