黄仁勋首次公开承认:华为芯片性能已达H200级别,华为云架构可超越英伟达!

單晶片技術力不行
先拿系統和堆疊來湊,
作為應急方案也大有可為,
你就說算力夠不夠吧。
至於耗電散熱的問題
以現階段AI的暴力程度
更重要的是算法的優化
製程反倒是其次了
有了應急方案
作為世界第一製造大國
晶圓製程的技術積累只待水到渠成。
5月30日消息,华为宣布推出参数规模高达7180亿的全新模型盘古Ultra MoE,这是一个全流程在昇腾AI计算平台上训练的准万亿MoE模型。
据悉,盘古团队提出Depth-Scaled Sandwich-Norm(DSSN)稳定架构和TinyInit小初始化的方法,在昇腾平台上实现了超过18TB数据的长期稳定训练。在训练方法上,华为团队首次披露在昇腾CloudMatrix 384超节点上打通大稀疏比MoE强化学习(RL)后训练框架的关键技术,使RL后训练进入超节点集群时代。
https://caifuhao.eastmoney.com/news/1555605359
華為受限制程,拿不出對標h200的gpu,那個像是說華為可以堆的,堆出一套比上用h200搭建的系統,畢竟在超級電腦中,除了gpu和cpu本身的能力,gpu間的數據溝通也很重要,而這是華為的強項
BigMac4Diet
觀念正確...[^++^]
戰勝美帝、統治世界~中共國可以
量大管飽呢!先不管什麼水平,中國最大兩家公司剛剛發布了財報,去算算12吋出了多少貨再出來吹。
文章分享
評分
評分
複製連結

今日熱門文章 網友點擊推薦!