色综合中文综合网_性猛交娇小69hd_久久精品99久久久久久_欧美日韩精品一区二区三区四区 _97视频色精品_国产高清精品久久久久_日日鲁鲁鲁夜夜爽爽狠狠视频97 _国产成人免费视频精品含羞草妖精 _熟女少妇在线视频播放_精品人妻一区二区三区麻豆91 _久久女同性恋中文字幕_一区二区福利视频

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

模型綁定硬件,硬件才能真正被接受

編輯部 整理自 MEET2026

量子位 | 公眾號 QbitAI

當國產AI芯片接連發布、估值高漲之際,一個尖銳的問題依然懸在頭頂:它們真的能撐起下一代萬卡集群與萬億參數模型的訓練嗎?

一邊是市場對替代方案的迫切期待,另一邊是英偉達在利潤與估值上仍高歌猛進……

百度智能云AI計算首席科學家王雁鵬在量子位MEET2026智能未來大會上,基于百度昆侖芯在大規模生產環境中的實戰經驗指出:

評判芯片實力的標準已從單純的算力數值,轉向了能否穩定支撐從百億到萬億參數、從稠密模型到MoE架構、從單模態到多模態的完整模型譜系訓練,并能在萬卡乃至更大規模集群上實現高效擴展。

在演講中,王雁鵬系統拆解了大規模訓練中集群穩定性、線性擴展與模型生態三大核心挑戰的攻堅路徑,并回應了行業對MoE時代硬件路徑的關切。

他認為,即便是參數激增的MoE模型,“小芯片搭大集群”的路徑依然可行,其關鍵在于極致的通信優化與系統級協同設計。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

為完整呈現王雁鵬的思考,在不改變原意的基礎上,量子位對演講內容進行了整理編輯,希望能給你帶來更多啟發。

MEET2026智能未來大會是由量子位主辦的行業峰會,近30位產業代表與會討論。線下參會觀眾近1500人,線上直播觀眾350萬+,獲得了主流媒體的廣泛關注與報道。

核心觀點梳理

  • 國產芯片的替代有一個漸進式的過程,昆侖芯從第一代開始已經做到了在搜索線上系統全量用推理,真正難的是在大規模訓練場景。
  • 現在Scale換了一個維度,變成了模型參數的Scale和任務訓練規模的Scale,由此帶來了整個系統層面的Scale,映射到硬件上就有不同的size、各種形狀、不同的切分策略和并行策略。
  • 當前重要發展方向是MoE,它在某種程度上延續了原有的Scaling Law,能夠繼續擴大參數規模,同時不增加激活參數規模。但系統層面會面臨新的挑戰:模型參數變得更大、輸入序列變長,通信占比顯著提升,占比提升意味著整個模型架構都要有變化。
  • 當前我們在百度Qianfan VL、百度蒸汽機都取得較領先的模型效果,并已經實現全棧基于昆侖芯的訓練。

……

以下為王雁鵬演講全文:

真正的困難在大規模訓練場景里

大家好,我是來自百度智能云的王雁鵬,我很長一段時間都在負責AI基礎設施建設的工作。今天想跟大家分享的內容是,我們如何在生產環境中規模化應用我們的國產芯片

最近國產芯片熱度很高,很多產品陸續上市,也獲得了很高估值。似乎國產芯片馬上就要在大規模生產環境落地。但同時,英偉達仍然保持極高的利潤率和上漲的估值,市場仍然在購買其產品。

這兩個看似矛盾的現象背后,其實反映了一個事實:要真正把國產芯片用起來,難度依然非常大。不僅如此,除了英偉達之外的國際芯片供應商,也同樣沒有在大規模訓練場景中真正跑起來。

國產替代一定是漸進式過程。大家都知道在推理場景中問題不大,例如昆侖芯從第一代起就已在搜索線上系統實現全量推理,真正困難在大規模訓練場景里面。

第一大挑戰:集群穩定性

大規模訓練往往是上萬卡的同步系統,任何一臺卡中斷都可能導致任務重啟。

比如,在100張卡的時候有效訓練時間是99%,但當1%時間因為中斷浪費的話,線性擴展到一萬張卡則意味著整個集群不可用了。因此,第一個要解決的便是集群穩定性問題。

在芯片層面,GPU天生是高故障率器件:晶體管數量多、算力高、功耗大,同時專注于計算導致監控能力弱,整體比CPU的故障率高出多個量級。

在這方面我們有兩類經驗:

1、事前精細化監控與驗證:

我們必須假設芯片可能存在各種問題——運行變慢、精度異常、數據不一致等,因此需要系統級手段提前定位可能的故障,而不能依賴芯片自身的報錯能力。尤其是在靜默錯誤場景中,系統需要能夠精準定位故障節點,否則訓練會長期無法復現。

2、故障后的快速恢復能力:

無論故障率如何,總要避免大規模重算,因此我們構建了透明Checkpoint和快速恢復機制,盡量減少損失。

第二大挑戰:讓集群真正擴展起來

一個萬卡集群必須實現線性擴展,否則只有千卡、兩千卡的規模意義不大。

我們大致經歷了三個階段:

百卡集群上,驗證技術可行性,關鍵在于RDMA通信技術的適配與優化。

千卡集群上,由于網絡不再對等,比如我們不能把任何兩個芯片或者兩臺機器看成在網絡任何地方部署性能都一樣,因此也需要做好網絡親和性調度等復雜優化。

萬卡集群則是更大的挑戰,面對多任務、多并行策略(PP、TP、EP 等)帶來的流量競爭,必須實現芯片與網絡的聯合設計。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

我們的核心邏輯叫:XPU驅動的any to any的通信

以XPU為核心,在通信過程中繞過CPU各種影響,直接用XPU驅動我們的網絡。針對不同流量有不同優先級做整個任務的最優,經過這一點我們可以把大規模擴展做上去。

第三大挑戰:模型生態與精度體系

英偉達最強的護城河并不只是硬件,而是過去十多年沉淀的模型生態:成千上萬種模型變體、算子體系、框架適配,這些都讓英偉達在訓練精度上保持絕對穩定性。

在大模型時代,由于Transformer這套架構相對統一,國產芯片迎來了機會。

但可能很多人忽略的一點是:

現在Scale換了一個維度,變成了模型參數的Scale和任務規模的Scale。而這意味著模型參數可以有不同的規模,例如十億、百億、千億,同時我們可以跑到不同硬件平臺上,比如百卡、千卡、萬卡,這兩個維度的Scale則會帶來整個系統的Scale。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

不同于原來模型架構的Scale,算子映射到硬件上面會有不同的size,不同形狀,不同并行的策略,這個情況下算子能不能穩定地跑出來。我們看到它會在精度和性能上都會存在挑戰,尤其是精度方面的挑戰。換了一個平臺,甚至可能因為“算子寫得不對”、“精度差一點”都可能導致兩個月的訓練白跑。

因此我們做了高度泛化的算子體系,針對不同的算子的size做了高強度的泛化,同時在泛化基礎上還做到小規模驗證精度,避免每次都使用萬卡對比,從而保證大規模訓練的可靠性。

MoE模型與多模態模型的新挑戰

當前重要的發展方向是MoE,它能在不提升激活規模的情況下擴展模型參數,延續Scaling Law。

但MoE基礎上對系統架構也帶來新的挑戰,模型參數變大了,輸入序列變長,意味著通信占比提升了,對整個模型架構都會有改變

因此需要極致的通信優化,以及顯存的協同,與計算overlap,來完成MoE系統的適配。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

我們的結論是,即便是MoE模型,小芯片搭大集群的方式依然可行

多模態模型則帶來另一類問題,不同的模態會帶來不同的訓練強度,不同模態的計算,還用原來的同構拆分方法的話會導致訓練的效率非常低,典型情況下MFU可能都不到10%。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

針對這個需要做異構數據均衡的調度,適配異構并行策略,使得系統能夠根據我們workload動態地做并行策略。不管模型是什么樣的,都能找到最優的運行策略適配模型,在這一塊需要做優化。

衡量國產芯片“能否真正用起來”的標準,我們認為有兩個關鍵維度:

  • 模型覆蓋能力:覆蓋大語言模型、多模態、文生視頻等完整體系。
  • 集群規模能力:從百卡到千卡再到萬卡全覆蓋。

目前我們在模型覆蓋上基本達到主流大模型體系,在規模上已能跑萬卡任務,未來還會向數萬卡推進。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

最近大家關注TPU,就是因為Google能夠用非常優秀的Gemini證明TPU的訓練能力——模型綁定硬件,硬件才能真正被接受。

同樣,昆侖芯也需要綁定優秀的自研模型。

當前我們在百度Qianfan VL、百度蒸汽機都取得較領先的模型效果,并已經實現全棧基于昆侖芯的訓練。未來我們會繼續努力,讓更先進的模型在我們昆侖芯上面全棧訓練出來。

版權所有,未經授權不得以任何形式轉載及使用,違者必究。

相關閱讀

九色91在线视频| 日韩中文不卡| 日本a视频在线观看| 久久精品91久久久久久再现| 国产精品久久久久久久久男| 在线黄色免费观看| 看欧美ab黄色大片视频免费 | 欧美午夜宅男影院在线观看| 久热精品视频在线免费观看| 在线观看日韩羞羞视频| 免费看一级一片| 国产亚洲一区二区在线观看| 日韩在线资源网| 免费在线观看亚洲视频| 内射毛片内射国产夫妻| 国产女主播视频一区二区| 天天天天天天天干| 亚洲色图在线看| 国产精品高潮呻吟视频| 国产精品1000部啪视频| 26uuu精品一区二区三区四区在线 26uuu精品一区二区在线观看 | 国产毛片精品视频| 肉色丝袜一区二区| 在线不卡免费av| 欧美精品一区二区三区在线四季 | 热这里只有精品| 毛片视频网站在线观看| 国产精品久久久久影院亚瑟| 欧美日韩中字一区| 欧美成人在线免费| 天天久久人人| 在线观看国产小视频| 人妻少妇精品无码专区二区| 午夜精品无码一区二区三区| 欧美一级搡bbbb搡bbbb| 中文字幕日韩精品久久| 中文字幕在线视频第一页| 欧美日韩亚洲激情| 亚洲一一在线| 国内欧美视频一区二区| 亚洲精品电影网在线观看| 欧美日韩亚洲自拍| 国产福利精品导航| 国产精品日韩在线播放| 国产喷水在线观看| 亚洲国产视频a| 亚洲va男人天堂| 久久精品无码一区| www.桃色av嫩草.com| 亚洲综合色噜噜狠狠| 99久热re在线精品视频| 夜夜躁很很躁日日躁麻豆| 91蜜桃视频在线观看| 99久久精品国产观看| 欧美激情在线狂野欧美精品| 欧类av怡春院| 亚洲一区在线观看网站| 日韩欧美视频第二区| 国产 日韩 欧美 精品| 久久艹在线视频| 四虎成人免费影院| 欧美大片在线观看一区| 国产人妻精品午夜福利免费| 亚洲精品高清视频在线观看| 久草视频这里只有精品| 久久综合九色综合欧美就去吻| 久久精品久久久久电影| 久久久精品人妻一区二区三区| 国产成人精品一区二三区四区五区| 成人免费视频免费观看| 亚洲xxxx做受欧美| 国产精品污www一区二区三区| 国产一区视频免费观看| 韩国视频一区二区| 国产精品美女久久久久久免费| jizz日本在线播放| 精品欧美一区二区在线观看| 欧美xxxx×黑人性爽| 欧美视频一区二区三区| 苍井空张开腿实干12次| 51久久夜色精品国产麻豆| 日本黄色www| 日韩女同互慰一区二区| 欧美爱爱免费视频| 最近中文字幕mv在线一区二区三区四区 | 交换做爰国语对白| 久久精品一区二区三区不卡| 国产99久久精品一区二区| 中文字幕一区二区三区人妻不卡| 国产日产精品1区| 91精品国产欧美一区二区成人 | 久久免费视频99| 欧美日本韩国一区二区三区视频| 少妇极品熟妇人妻无码| 91精品国产福利| 亚洲女人久久久| 日韩成人av网址| 久操视频在线免费观看| 国产成人福利视频| 国产一区二区三区av电影| 在线电影看在线一区二区三区| 国产精一品亚洲二区在线视频| 久久亚洲一区二区| 国产精品国产三级国产普通话99 | 欧美壮男野外gaytube| va婷婷在线免费观看| 国产麻豆日韩| 日韩av高清| 天天操天天色综合| 青青青在线视频| 成人av在线亚洲| 中文字幕一区二区三区四区不卡| 欧美国产日韩激情| 日韩欧美在线综合网| 国产在线拍揄自揄拍| 欧美最近摘花xxxx摘花| 99视频精品免费视频| 亚洲精品免费一区亚洲精品免费精品一区| 亚洲午夜精品在线| 综合 欧美 亚洲日本| 国产成人在线播放| 欧美极品aⅴ影院| 精品成人无码一区二区三区| 欧美成人精品在线播放| 97免费观看视频| 琪琪第一精品导航| www天堂在线| 免费av观看网址| 国产又黄又爽视频| 97高清免费视频| 91年精品国产| 一级黄色片毛片| 青青草原成人在线视频| 国产日韩欧美精品一区| 欧美激情久久久久久久| 国产美女精品视频| 欧美性猛交xxxx乱大交极品| 亚洲 欧美 中文字幕| av不卡在线免费观看| 日韩精品有码在线观看| 成人激情动漫在线观看| 国产1区2区3区4区| 欧美色图亚洲自拍| 91麻豆精品国产91久久久使用方法| 久久无码精品丰满人妻| 欧美xxxx做受欧美.88| 国内精品写真在线观看| 日本三级中文字幕在线观看| 亚洲精品中文在线| 亚洲久久在线观看| 色哟哟国产精品| 成年人在线观看av| 国产综合色一区二区三区| 欧美性精品220| 国产综合视频在线| 少妇欧美激情一区二区三区| 国产在线观看一区二区三区| 欧美精品视频www在线观看| 青娱乐精品视频在线| 欧美激情一区二区三区p站| 国产精品一区二区三区观看 | 亚洲精品有码在线| 99久久精品情趣| 国产在线观看黄色| 奇米视频7777| 国产精品久久久久久久av电影| 亚洲3atv精品一区二区三区| 久久久久久久麻豆| 中文精品无码中文字幕无码专区 | 日韩不卡手机在线v区| 欧美日韩一区二区区别是什么 | 97在线国产视频| 久久久av免费| 亚洲国产综合91精品麻豆| 天堂在线资源8| 懂色av蜜臀av粉嫩av永久| 日本不卡一区二区三区四区| 欧美与黑人午夜性猛交久久久| 91久久线看在观草草青青| 免费在线观看成人| wwwxxx亚洲| 公肉吊粗大爽色翁浪妇视频| 国产日韩欧美精品在线观看| 国产精品久久一区| 亚洲精品视频在线播放 | 久久久久亚洲av片无码下载蜜桃| 国产不卡一区二区在线观看| 国产蜜臀av在线一区二区三区| 免费成人美女女在线观看| av 日韩 人妻 黑人 综合 无码| 青青青爽久久午夜综合久久午夜| 久久久久久久久久久久久久国产| 国产色婷婷国产综合在线理论片a| 91精品久久久久久久99蜜桃| 久久久久久99精品| 日韩高清一区二区| 91丨porny丨在线中文 | 99三级在线| 色伦专区97中文字幕| 91黄视频在线| 亚洲免费av高清| 不卡av电影在线播放| 日本欧美韩国一区三区| 日韩精品成人一区二区在线| 国产精品久久综合青草亚洲AV| 久草免费资源站| 黄色www网站| 日本一区二区三区四区高清视频 | 黄色污污在线观看| 日韩一级大片在线观看| 亚洲三级电影网站| 国产做a爰片久久毛片| 天堂av2024| 丰满熟妇人妻中文字幕| 国产一区一区三区| 日本在线高清视频一区| 国产精品中文字幕在线| 91视频免费在线| 91国产在线免费观看| 97se在线视频| 国产一区二区无遮挡| 国产精自产拍久久久久久蜜| 国产97在线播放| 欧美综合第一页| 欧美一级视频在线观看| 久久成人一区二区| 国产精品一区二区三区久久久| 日韩欧美国产激情| 欧美视频在线不卡| 亚洲一区二区成人在线观看| 99久久国产综合精品女不卡| 久久久久久黄| 国产又粗又猛又爽又黄91精品| 无码h黄肉3d动漫在线观看| 海角国产乱辈乱精品视频| 国产伦精品一区二区三区精品视频| 久久精品99无色码中文字幕| 亚洲欧美在线一区二区| 中文字幕日韩欧美| 久久久久久美女| 国产精品色悠悠| 国产成人精品免费视频大全最热 | 精品成人免费观看| 精品日韩一区二区三区| 亚洲欧美日韩国产成人| 欧美高清电影在线看| 国产精品久久久久久av福利软件| 国产综合色香蕉精品| 国产 高清 精品 在线 a| 免费黄色日本网站| 日韩黄色片在线| 亚洲天堂伊人网| 欧美人与性动交α欧美精品| 91精品国产毛片武则天| 蜜臀精品一区二区| 亚洲欧美日韩一级| 国产精品久久久久久久久男| 亚洲国产一区二区三区在线观看| 欧美一区二区三区在线观看| 日韩av在线一区| 久久久久久亚洲精品中文字幕| 欧美日韩福利电影| 黑人中文字幕一区二区三区| www.一区二区.com| 任你躁av一区二区三区| 欧美精品一区二区成人| 日本免费新一区视频| 不卡av在线网| 欧美日韩一区二区三区免费看| 日韩欧美色综合| 欧美裸体男粗大视频在线观看| 国产在线久久久| 麻豆映画在线观看| 无码少妇一区二区| 国产人妻精品一区二区三| 一区二区三区视频在线观看| 欧美巨大另类极品videosbest| 亚洲日本成人女熟在线观看| 国产精品视频一| 国产精品久久精品国产| 国产手机在线视频| 国产综合在线观看视频| 国产乱人伦精品一区二区三区| 一级做a爰片久久毛片16| 久久久精品美女| 一起草av在线| 久久久久久草| 99在线精品免费| 欧美精品亚洲| 爽爽淫人综合网网站| 一区二区三区回区在观看免费视频| 一区二区免费电影| 久久国产精品72免费观看| 精品国产区一区二区三区在线观看| 九色porny91| 91香蕉视频mp4| 久久国产精品亚洲| 日本国产一级片| 国产精品久久久久久妇女6080| 精品人妻人人做人人爽| 久久青草欧美一区二区三区| 国产精品久久久999| 成人免费网站黄| 成人福利小视频| 亚洲石原莉奈一区二区在线观看| 91a在线视频| 无码任你躁久久久久久久| 欧美一区二区三区性视频| 久久久久中文字幕亚洲精品 | 一区二区三区在线观看动漫| 国产www免费| 国产午夜亚洲精品午夜鲁丝片| 国产精品丝袜高跟| 国产精品久久免费观看| 日韩精品视频在线| 51精品免费网站| 欧美mv和日韩mv的网站| 潘金莲激情呻吟欲求不满视频| 免费人成在线不卡| 国产免费观看久久黄| 国产露脸91国语对白| 欧美成人蜜桃| 国产欧美一区二区三区网站| 一区二区三区不卡在线| 国产精品一区免费在线观看| 欧美日韩在线一二三| 亚洲第一区av| 亚洲欧洲中文天堂| 一级黄色短视频| 成人av在线网址| 26uuu精品一区二区三区四区在线 26uuu精品一区二区在线观看 | 国产aⅴ综合色| 精品国产91九色蝌蚪| 88av在线视频| 精品国产免费久久久久久尖叫| 日本黄色中文字幕| 国产xxx69麻豆国语对白| 亚洲成人av网址| 99久久精品免费看国产四区| 精品一区二区三区在线视频| 丁香婷婷综合激情| 狠狠色香婷婷久久亚洲精品| 美女av免费观看| 国产精品每日更新| 国产女女做受ⅹxx高潮| 精品福利一区二区三区| 91麻豆成人精品国产免费网站| 少妇久久久久久| 无码免费一区二区三区| 产国精品偷在线| 亚洲男帅同性gay1069| 欧美二区在线视频| 久久亚洲影视婷婷| 手机av在线不卡| 青青草国产精品一区二区| 婷婷色在线视频| 国产精品自拍合集| 欧美在线短视频| 久久久久久久久久成人| 国产精品电影观看| 免费高清在线一区| 亚洲精品免费在线视频| 国产欧美一区二区精品秋霞影院 | 91在线精品观看| 韩国av一区二区三区四区| 亚洲视频精品一区| 欧美大片在线观看一区二区| 久久精品国产亚洲aⅴ| 国产人妻一区二区| 在线观看免费高清视频97| 精品无码一区二区三区的天堂| 成人国产精品一区| 亚洲国产毛片aaaaa无费看| 99999精品| 在线视频综合导航| 这里只有精品免费视频| 一区二区三区四区久久| 91久久线看在观草草青青| 欧美日韩精品在线观看视频| 成人啪啪免费看| 色噜噜偷拍精品综合在线| 午夜一区在线观看| 3d动漫一区二区三区| 欧美一区二区三区男人的天堂 | 国内外成人在线| heyzo国产| 色妞在线综合亚洲欧美| 久久久久99| 日韩video| 日韩高清有码在线| 国产69精品久久久久777| 中文字幕高清视频| 日韩欧美第二区在线观看| 久久伊人精品一区二区三区| 精品一区二区三区免费播放| 波多野结衣综合网| 日本一区二区在线免费播放| 欧美怡红院视频| 久久精品国产免费| 国产熟女高潮视频| 在线观看中文字幕亚洲| 成人av免费网站| 日本熟妇成熟毛茸茸| 亚洲v国产v在线观看| 国产精品www| 亚洲最新av在线| 精品国一区二区三区| 一区二区日韩av| 久久免费看少妇高潮| 人妻一区二区三区|