色综合中文综合网_性猛交娇小69hd_久久精品99久久久久久_欧美日韩精品一区二区三区四区 _97视频色精品_国产高清精品久久久久_日日鲁鲁鲁夜夜爽爽狠狠视频97 _国产成人免费视频精品含羞草妖精 _熟女少妇在线视频播放_精品人妻一区二区三区麻豆91 _久久女同性恋中文字幕_一区二区福利视频

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

模型綁定硬件,硬件才能真正被接受

編輯部 整理自 MEET2026

量子位 | 公眾號 QbitAI

當國產AI芯片接連發布、估值高漲之際,一個尖銳的問題依然懸在頭頂:它們真的能撐起下一代萬卡集群與萬億參數模型的訓練嗎?

一邊是市場對替代方案的迫切期待,另一邊是英偉達在利潤與估值上仍高歌猛進……

百度智能云AI計算首席科學家王雁鵬在量子位MEET2026智能未來大會上,基于百度昆侖芯在大規模生產環境中的實戰經驗指出:

評判芯片實力的標準已從單純的算力數值,轉向了能否穩定支撐從百億到萬億參數、從稠密模型到MoE架構、從單模態到多模態的完整模型譜系訓練,并能在萬卡乃至更大規模集群上實現高效擴展。

在演講中,王雁鵬系統拆解了大規模訓練中集群穩定性、線性擴展與模型生態三大核心挑戰的攻堅路徑,并回應了行業對MoE時代硬件路徑的關切。

他認為,即便是參數激增的MoE模型,“小芯片搭大集群”的路徑依然可行,其關鍵在于極致的通信優化與系統級協同設計。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

為完整呈現王雁鵬的思考,在不改變原意的基礎上,量子位對演講內容進行了整理編輯,希望能給你帶來更多啟發。

MEET2026智能未來大會是由量子位主辦的行業峰會,近30位產業代表與會討論。線下參會觀眾近1500人,線上直播觀眾350萬+,獲得了主流媒體的廣泛關注與報道。

核心觀點梳理

  • 國產芯片的替代有一個漸進式的過程,昆侖芯從第一代開始已經做到了在搜索線上系統全量用推理,真正難的是在大規模訓練場景。
  • 現在Scale換了一個維度,變成了模型參數的Scale和任務訓練規模的Scale,由此帶來了整個系統層面的Scale,映射到硬件上就有不同的size、各種形狀、不同的切分策略和并行策略。
  • 當前重要發展方向是MoE,它在某種程度上延續了原有的Scaling Law,能夠繼續擴大參數規模,同時不增加激活參數規模。但系統層面會面臨新的挑戰:模型參數變得更大、輸入序列變長,通信占比顯著提升,占比提升意味著整個模型架構都要有變化。
  • 當前我們在百度Qianfan VL、百度蒸汽機都取得較領先的模型效果,并已經實現全?;诶鲂镜挠柧殹?/li>

……

以下為王雁鵬演講全文:

真正的困難在大規模訓練場景里

大家好,我是來自百度智能云的王雁鵬,我很長一段時間都在負責AI基礎設施建設的工作。今天想跟大家分享的內容是,我們如何在生產環境中規?;瘧梦覀兊膰a芯片。

最近國產芯片熱度很高,很多產品陸續上市,也獲得了很高估值。似乎國產芯片馬上就要在大規模生產環境落地。但同時,英偉達仍然保持極高的利潤率和上漲的估值,市場仍然在購買其產品。

這兩個看似矛盾的現象背后,其實反映了一個事實:要真正把國產芯片用起來,難度依然非常大。不僅如此,除了英偉達之外的國際芯片供應商,也同樣沒有在大規模訓練場景中真正跑起來。

國產替代一定是漸進式過程。大家都知道在推理場景中問題不大,例如昆侖芯從第一代起就已在搜索線上系統實現全量推理,真正困難在大規模訓練場景里面。

第一大挑戰:集群穩定性

大規模訓練往往是上萬卡的同步系統,任何一臺卡中斷都可能導致任務重啟。

比如,在100張卡的時候有效訓練時間是99%,但當1%時間因為中斷浪費的話,線性擴展到一萬張卡則意味著整個集群不可用了。因此,第一個要解決的便是集群穩定性問題。

在芯片層面,GPU天生是高故障率器件:晶體管數量多、算力高、功耗大,同時專注于計算導致監控能力弱,整體比CPU的故障率高出多個量級。

在這方面我們有兩類經驗:

1、事前精細化監控與驗證:

我們必須假設芯片可能存在各種問題——運行變慢、精度異常、數據不一致等,因此需要系統級手段提前定位可能的故障,而不能依賴芯片自身的報錯能力。尤其是在靜默錯誤場景中,系統需要能夠精準定位故障節點,否則訓練會長期無法復現。

2、故障后的快速恢復能力:

無論故障率如何,總要避免大規模重算,因此我們構建了透明Checkpoint和快速恢復機制,盡量減少損失。

第二大挑戰:讓集群真正擴展起來

一個萬卡集群必須實現線性擴展,否則只有千卡、兩千卡的規模意義不大。

我們大致經歷了三個階段:

百卡集群上,驗證技術可行性,關鍵在于RDMA通信技術的適配與優化。

千卡集群上,由于網絡不再對等,比如我們不能把任何兩個芯片或者兩臺機器看成在網絡任何地方部署性能都一樣,因此也需要做好網絡親和性調度等復雜優化。

萬卡集群則是更大的挑戰,面對多任務、多并行策略(PP、TP、EP 等)帶來的流量競爭,必須實現芯片與網絡的聯合設計。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

我們的核心邏輯叫:XPU驅動的any to any的通信。

以XPU為核心,在通信過程中繞過CPU各種影響,直接用XPU驅動我們的網絡。針對不同流量有不同優先級做整個任務的最優,經過這一點我們可以把大規模擴展做上去。

第三大挑戰:模型生態與精度體系

英偉達最強的護城河并不只是硬件,而是過去十多年沉淀的模型生態:成千上萬種模型變體、算子體系、框架適配,這些都讓英偉達在訓練精度上保持絕對穩定性。

在大模型時代,由于Transformer這套架構相對統一,國產芯片迎來了機會。

但可能很多人忽略的一點是:

現在Scale換了一個維度,變成了模型參數的Scale和任務規模的Scale。而這意味著模型參數可以有不同的規模,例如十億、百億、千億,同時我們可以跑到不同硬件平臺上,比如百卡、千卡、萬卡,這兩個維度的Scale則會帶來整個系統的Scale。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

不同于原來模型架構的Scale,算子映射到硬件上面會有不同的size,不同形狀,不同并行的策略,這個情況下算子能不能穩定地跑出來。我們看到它會在精度和性能上都會存在挑戰,尤其是精度方面的挑戰。換了一個平臺,甚至可能因為“算子寫得不對”、“精度差一點”都可能導致兩個月的訓練白跑。

因此我們做了高度泛化的算子體系,針對不同的算子的size做了高強度的泛化,同時在泛化基礎上還做到小規模驗證精度,避免每次都使用萬卡對比,從而保證大規模訓練的可靠性。

MoE模型與多模態模型的新挑戰

當前重要的發展方向是MoE,它能在不提升激活規模的情況下擴展模型參數,延續Scaling Law。

但MoE基礎上對系統架構也帶來新的挑戰,模型參數變大了,輸入序列變長,意味著通信占比提升了,對整個模型架構都會有改變。

因此需要極致的通信優化,以及顯存的協同,與計算overlap,來完成MoE系統的適配。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

我們的結論是,即便是MoE模型,小芯片搭大集群的方式依然可行。

多模態模型則帶來另一類問題,不同的模態會帶來不同的訓練強度,不同模態的計算,還用原來的同構拆分方法的話會導致訓練的效率非常低,典型情況下MFU可能都不到10%。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

針對這個需要做異構數據均衡的調度,適配異構并行策略,使得系統能夠根據我們workload動態地做并行策略。不管模型是什么樣的,都能找到最優的運行策略適配模型,在這一塊需要做優化。

衡量國產芯片“能否真正用起來”的標準,我們認為有兩個關鍵維度:

  • 模型覆蓋能力:覆蓋大語言模型、多模態、文生視頻等完整體系。
  • 集群規模能力:從百卡到千卡再到萬卡全覆蓋。

目前我們在模型覆蓋上基本達到主流大模型體系,在規模上已能跑萬卡任務,未來還會向數萬卡推進。

國產AI芯片看兩個指標:模型覆蓋+集群規模能力 | 百度智能云王雁鵬@MEET2026

最近大家關注TPU,就是因為Google能夠用非常優秀的Gemini證明TPU的訓練能力——模型綁定硬件,硬件才能真正被接受。

同樣,昆侖芯也需要綁定優秀的自研模型。

當前我們在百度Qianfan VL、百度蒸汽機都取得較領先的模型效果,并已經實現全?;诶鲂镜挠柧?。未來我們會繼續努力,讓更先進的模型在我們昆侖芯上面全棧訓練出來。

版權所有,未經授權不得以任何形式轉載及使用,違者必究。
欧美精品一区二区三区久久| 色偷偷噜噜噜亚洲男人的天堂| 精品一区二区亚洲| 午夜精品一区二区三区在线播放| 国产一区二区三区四区五区在线| 男女视频网站在线观看| 免费在线观看a视频| 国产美女主播在线观看| 成人精品视频一区| 色综合天天综合狠狠| 中文字幕久热精品视频在线| 97人人模人人爽人人少妇| 成人毛片一区二区| 国产精品夜夜夜爽阿娇| 三级影片在线观看欧美日韩一区二区| 国产精品免费免费| 精品国产91亚洲一区二区三区婷婷 | 欧美一区二区三区免费观看| 日本一区二区不卡高清更新| 免费看三级黄色片| 国产一区免费看| 国产成人av一区二区三区在线观看| 亚洲成人激情综合网| 精品久久国产精品| 一区二区91美女张开腿让人桶| 极品白嫩丰满美女无套| 国模无码一区二区三区| 亚洲一区二区三区爽爽爽爽爽| 日韩中文在线不卡| 亚洲视频精品一区| 日韩av片在线免费观看| 麻豆成人综合网| 欧美日韩一区二区三区四区五区| 欧美精品www在线观看| 黄色影视在线观看| 亚洲熟妇一区二区三区| 久久久精品午夜少妇| 亚洲影视资源网| 北条麻妃久久精品| 久久精品国产综合精品| 欧美大喷水吹潮合集在线观看| 国产成人三级一区二区在线观看一| 国产精品成人午夜| 草民午夜欧美限制a级福利片| 亚洲国产另类久久久精品极度| 男人天堂资源网| 国产高中女学生第一次| 亚洲高清在线视频| 国产suv精品一区二区| 亚洲最大综合网| 国产欧美综合视频| 懂色av一区二区三区| 国产精品久久久久久av| 欧美 日韩精品| 艳妇乳肉豪妇荡乳av| 亚洲一二三专区| 国产精品精品视频| 女人高潮一级片| 天天操天天操天天| 欧美成人国产一区二区| 日产精品久久久一区二区| 日韩av片在线免费观看| 久久久精品国产免大香伊| www.亚洲一区| 日韩精品视频一二三| 美女www一区二区| 色久欧美在线视频观看| 欧美一区二区三区爽大粗免费 | 99热99这里只有精品| 久久亚洲综合av| 8050国产精品久久久久久| 中文在线字幕观看| 97精品久久久午夜一区二区三区| 久久久久久久久久av| 久热在线视频观看| 看电视剧不卡顿的网站| 国产一区二区三区直播精品电影 | 韩国中文字幕hd久久精品| 日本精品一级二级| 五月天婷亚洲天综合网鲁鲁鲁| 日韩乱码一区二区| 一区二区在线观看不卡| 91pron在线| 精品少妇theporn| 亚洲福中文字幕伊人影院| 国产精品三区四区| 国产成人精品一区二三区| 一道本成人在线| 亚洲成人午夜在线| 精品国产一级片| 日韩国产一区三区| 北条麻妃av高潮尖叫在线观看| 秋霞电影网一区二区| 久久精品亚洲一区| 亚洲av无码一区东京热久久| 久久久久久久久久电影| 91精品久久久久久久久久久久久久 | 欧美激情一区在线| 999视频在线观看| 日本三级欧美三级| 欧美精品vⅰdeose4hd| 欧美在线播放一区| www.精品视频| 久久影院免费观看| 欧美夫妇交换xxx| 日本一区二区成人| 精品国产91亚洲一区二区三区www| wwwwww在线观看| 亚洲国产精品99| 成人在线观看a| 99视频一区二区| 97人摸人人澡人人人超一碰| 一级片aaaa| 中文字幕亚洲一区二区三区五十路 | 国产精品大尺度| 久久免费视频1| 国产伦精品一区二区三区四区 | 欧洲熟妇的性久久久久久| 国产欧美精品一区二区色综合| 懂色一区二区三区av片 | 香蕉网在线视频| 欧美激情中文字幕一区二区| 精品国产一区二区三区久久久久久| 一区二区三区免费观看视频| 亚洲男子天堂网| 亚洲天堂免费在线| 中文字幕1234区| 久久久国产欧美| 中文字幕一区二区在线播放| 日本黄色福利视频| 欧美成人性福生活免费看| 秋霞av亚洲一区二区三| 欧美日韩精品区别| 日产日韩在线亚洲欧美 | 亚洲成人18| 午夜精品三级久久久有码| 亚洲天堂精品在线| 久久老司机精品视频| 亚洲精品小视频| 国内精品国语自产拍在线观看| 美国黑人一级大黄| 中文字幕av一区二区三区高| 国产精品激情自拍| 成人黄页在线观看| 国产91在线免费| 国产精品欧美一级免费| 日韩激情视频一区二区| 亚洲一区二区三区小说| 国内精品国产三级国产aⅴ久| 91福利视频在线| 人人干视频在线| 国产精品伦理一区二区| 手机看片福利盒子久久| 日韩成人黄色av| 交换做爰国语对白| 狠狠网亚洲精品| 国产精品久久久久av| 日韩毛片在线视频| 一区二区三区动漫| 精彩视频一区二区| 佐佐木明希电影| 5566中文字幕一区二区电影| 看黄色一级大片| 黄色免费观看视频网站| 国产伊人精品在线| 亚洲精品99999| 99re热这里只有精品视频| 尤物在线免费视频| 国产高清一区二区三区| www.色播.com| 欧美午夜aaaaaa免费视频| 欧美老女人第四色| 久久婷婷国产麻豆91| 亚洲精品v天堂中文字幕| 久久精品欧美一区二区| www.九色.com| 欧美一级淫片播放口| 日本aⅴ免费视频一区二区三区| 久久撸在线视频| 成人在线播放av| 久久精品免费av| 无码人妻aⅴ一区二区三区日本| 亚洲精品一区久久久久久| 亚洲免费看黄网站| 亚洲老妇色熟女老太| xxxxxx黄色| 国产91精品入口17c| 国产精品资源在线看| 97超碰在线免费观看| 国产精品一区二区性色av| 国产精品系列在线观看| 宅男噜噜噜66国产免费观看| 久久久国产一区二区三区| 欧美老肥妇做.爰bbww| 免费看日韩毛片| 加勒比av中文字幕| 狠狠色综合欧美激情| 欧美一级久久久| 国产一区二区三区三州| 免费一级肉体全黄毛片| 农村妇女精品一二区| 国产日韩欧美综合精品| 久久色在线播放| 99久久国产综合色|国产精品| www.男人天堂| 8x8x华人在线| 国产精品黄色影片导航在线观看| 欧美日本韩国一区二区三区视频| 欧美另类videoxo高潮| 97在线观看免费| 久久综合色播五月| 久久中文字幕人妻| 91久久精品国产91久久| 亚洲日韩第一页| 91.com在线观看| 色悠久久久久综合欧美99| 麻豆精品一区二区综合av| 奇米影视第四色777| 91插插插插插插| 无码任你躁久久久久久久| 免费精品视频在线| 专区另类欧美日韩| 91成人国产综合久久精品| 澳门黄色一级片| 国产精品国产对白熟妇| 91影视免费在线观看| 欧美精品v日韩精品v韩国精品v| 久久久国产精品午夜一区ai换脸| 日精品一区二区三区| 久久久久久久久黄色| 久久久久久一区| 久久精品综合| 亚洲欧美精品久久| 400部精品国偷自产在线观看 | 精品蜜桃一区二区三区| 日韩精品小视频| 欧美精品一区二区三| 欧美图区在线视频| 日韩av在线一区二区| 日韩中文字幕第一页| 色999日韩欧美国产| 亚洲人在线观看| 亚洲综合一区二区不卡| 97精品国产97久久久久久粉红| a级片在线观看| 欧美brazzers| 久久久久久日产精品| 国产欧美精品日韩区二区麻豆天美| 国产美女一区二区| 老司机精品导航| 亚洲欧洲成人在线| 国产乱淫av免费| 国产乱码精品一区二区| 久久综合五月| 国产三级av片| 免费看91视频| www.欧美黄色| 国产亚洲福利社区| 在线观看亚洲视频啊啊啊啊| 日本一级黄视频| 这里只有精品在线播放| 一区二区三区四区视频精品免费| 图片区小说区区亚洲影院| 欧美嫩在线观看| 亚洲天堂开心观看| 亚洲一二三区在线观看| 无码专区aaaaaa免费视频| www.555国产精品免费| 搜索黄色一级片| 日本美女一级视频| 99久久国产综合精品麻豆| 亚洲综合av网| 久久综合色综合88| 久久亚洲影视婷婷| 午夜精品成人在线视频| 91精品办公室少妇高潮对白| 久久夜色精品国产欧美乱| 色哟哟一区二区三区| 亚洲欧美激情视频在线观看一区二区三区 | 国产精品白浆一区二小说| 国产又粗又长又黄的视频| 精品99在线观看| 神马午夜精品95| 一区二区三区日韩| 视频直播国产精品| 精品免费日产一区一区三区免费| 少妇久久久久久被弄到高潮| 日韩精品综合在线| 污版视频在线观看| 日本黄色小说视频| 丝袜美腿一区二区三区| 亚洲婷婷在线视频| 日韩av在线天堂网| 欧美理论电影在线| 日韩一级免费观看| 亚洲摸下面视频| 欧美激情小视频| 国产精品久久久久久久久久新婚 | 欧美日韩在线综合| 久久久久免费视频| 久久久久久亚洲精品不卡4k岛国| 欧美亚洲第一页| 色综合久久久久久久久五月| 亚洲熟女一区二区三区| 亚洲免费视频二区| 久久精品人人爽人人爽| 亚洲精品网址在线观看| 欧美日韩精品免费观看视一区二区| 国产乱子夫妻xx黑人xyx真爽| 亚洲色图 激情小说| 久久人妻无码aⅴ毛片a片app| 五月婷婷激情网| www.激情五月| 亚洲成人动漫精品| 精品亚洲一区二区三区| 国产成人精品免费久久久久 | 99999精品视频| 国产精品人人爽人人爽| 黄色污在线观看| 波多野结衣视频观看| 国内精品写真在线观看| 亚洲美女视频在线观看| 欧美成人黑人xx视频免费观看| 亚洲精品www.| 国产综合色在线视频区| 中文字幕日韩欧美精品在线观看| 国产自产精品| 欧美性猛交xxxx乱大交hd| 色国产精品一区在线观看| 妺妺窝人体色777777| 久久久久久久免费视频了| 日本视频一区二区在线观看| 国产一区福利在线| 欧美一级大胆视频| 国产真人真事毛片| 欧美主播一区二区三区| 国产精品午夜国产小视频| 国产大学生自拍| 国产综合成人久久大片91| 亚洲视频在线观看视频| 欧美三级一级片| 一二三区在线播放| 日韩国产中文字幕| 91社在线播放| 国产调教在线观看| 99re这里只有精品视频首页| 国内精品小视频| 日韩一区二区三区四区视频| 欧美日韩免费区域视频在线观看| 在线观看中文字幕亚洲| 日韩大尺度视频| 黄色av免费观看| 欧美日本韩国一区二区三区视频| 亚洲国产欧洲综合997久久| 国产精品suv一区二区69| 91福利在线观看| 成人黄色片视频| 99久久一区二区| 欧美日韩国产精品| 国产精品9999久久久久仙踪林| 国产ts丝袜人妖系列视频 | 丁香五月网久久综合| 亚洲精品久久久狠狠狠爱| 久久91精品国产91久久久| 在线播放av网址| 亚洲欧美日韩国产另类专区| 麻豆av一区| 久久亚洲国产精品一区二区| 久久精品日韩精品| 99国内精品久久| 国产日韩一区二区在线| 中文一区在线播放| 视频一区二区三区在线观看| 99国产精品一区二区三区| 宅男在线国产精品| 手机av在线网| 亚洲人一二三区| 国产91一区二区三区| 97人妻精品一区二区三区动漫| 亚洲欧美一区二区三区久本道91 | www.欧美精品一二三区| 亚洲乱熟女一区二区| 欧美精品手机在线| 免费无码国产精品| 欧美日本精品在线| 亚洲欧美激情在线观看| 国产成人亚洲综合91| 97在线播放视频| 91麻豆精东视频| wwwwww.色| 欧美一区二区三级| 亚洲av无码一区二区三区网址| 日韩精品中文在线观看| 日韩av无码中文字幕| 欧美一区二区三区日韩视频| 欧美日韩中文在线视频| 中文字幕精品在线不卡| 亚洲视频在线观看一区二区三区| 国产精品亚洲成人| 伊人色综合久久久| 人人妻人人澡人人爽久久av | 亚洲一区二区乱码| 男人天堂资源网| 精品免费囯产一区二区三区| av中文字幕免费| 韩国女主播成人在线观看| 久久久国产午夜精品| 欧美日韩一区二区精品| 日韩av中文字幕在线免费观看 | 一区二区在线视频播放|