近日，科大訊飛攜手華為在國產算力領域取得重大進展，雙方聯合團隊率先突破國產算力集群上MoE模型的大規模跨節點專家并行集群推理，這是繼DeepSeek公布其MoE模型訓練推理方案后，業界首個基于國產算力的全新解決方案。
聯合團隊通過軟硬件的深度協同創新，在多個關鍵技術層面深挖硬件潛力，完成昇騰集群上的驗證和部署。在算子融合方面，團隊在MLA預處理階段通過Vector與Cube異構計算單元并行流水，并將多個小算子融合重構為原子級計算單元，消除小算子下發開銷，MLA前處理時延降低50%+，實現性能的顯著提升。
在混合并行策略和通信計算并行優化方面，團隊構建了TP（張量并行）+EP（專家并行）混合范式：對MLA計算層采用機內TP并行，發揮機內高速互聯優勢，降低跨機通信損耗；創新MoE專家分層調度，64卡均衡分配專家計算節點，定制AllToAll通信協議，專家數據交換效率提升40%，構建跨機/機內雙層通信架構，通過分層優化降低跨機流量60%；同時研發路由專家負載均衡算法，實現卡間負載差異小于10%，集群吞吐提升30%。
通過分布式架構創新與算法協同優化，聯合團隊在國產算力上實現了顯著的性能提升。單卡靜態內存占用縮減至雙機部署的1/4，效率提升75%，專家計算密度增加4倍，推理吞吐提升3.2倍，端到端時延降低50%。
這一突破性的解決方案也將應用于訊飛星火深度推理模型的訓練加速，預期訓練時推理效率將提升200%。同時，基于該方案的推理引擎也實現了國產算力上DeepSeek V3和R1的高效推理。
近期，科大訊飛深度推理大模型星火X1也完成升級，在模型參數量比業界同行少一個數量級的情況下，星火X1的數學能力全面對標DeepSeek R1和OpenAI o1，在中文數學各項任務中均實現領先。科大訊飛始終堅定走國產化道路，星火X1也是當前唯一采用全國產算力訓練的深度推理大模型。
科大訊飛將持續迭代升級星火大模型，并通過推理引擎加速為開發者帶來更普惠的星火SparkAPI，星火大模型系列API以及星辰MaaS平臺上開源的相關模型API成本也將進一步降低，為開發者提供更優惠、更可靠的自主可控新選擇。
星空人工智能技術網 倡導尊重與保護知識產權。如發現本站文章存在版權等問題，煩請30天內提供版權疑問、身份證明、版權證明、聯系方式等發郵件至1851688011@qq.com我們將及時溝通與處理。！：首頁 > 星空人工智能產業 > 智能物聯 » 科大訊飛聯合華為率先實現國產算力大規模跨節點專家并行集群推理