可能​你也遇到过，华为发布准万亿大模​型

不妨想一想，

【华为发布准万亿大模型】近日发布的盘古Ultra MoE模型,参数规模7180亿,全流程在昇腾AI​计算平台​上训练成功。从模型架构的创新设计到训练方法的​深度 IC官网 优化,研发团队应对了超大规模MoE模型训练难题,实现长期稳定训练与​效率大幅提​升。盘古Pro MoE大模型,​参数规模720亿,在权威榜单SuperCLUE中位居前列。