高通和微軟在Microsoft Build開發(fā)者大會上攜手推動終端側(cè)AI規(guī)模化擴展

量子位的朋友們 2023-05-25 14:54:51 來源：量子位

AI的未來既需要終端側(cè)AI，也需要云端AI。

2023年5月23日，西雅圖——在Microsoft Build 2023開發(fā)者大會期間，高通技術(shù)公司展示了公司最新的終端側(cè)AI創(chuàng)新，包括在驍龍?計算平臺上運行生成式AI，以及開發(fā)者在采用驍龍平臺的Windows 11 PC上創(chuàng)建應用的新路徑。

高通技術(shù)公司產(chǎn)品管理高級副總裁Ziad Asghar表示：“為了讓生成式AI真正為更多人所接受和使用，許多推理工作需要在邊緣終端上處理。我們擁有行業(yè)領(lǐng)先的AI硬件和軟件，可以賦能開發(fā)者充分利用我們強大的AI能力，在搭載驍龍平臺的筆記本電腦、手機和其他終端上打造令人驚艷的全新用戶體驗。”

高通和微軟在Microsoft Build開發(fā)者大會上攜手推動終端側(cè)AI規(guī)模化擴展

AI的未來既需要終端側(cè)AI，也需要云端AI。在終端側(cè)運行AI應用可提升成本效益、增強隱私性、個性化并降低時延。與僅在CPU或GPU上進行AI工作負載處理比較，驍龍平臺集成專用的高通AI引擎，處理AI工作負載可以更加高效，讓小巧輕薄的設備也能支持終端側(cè)AI。

在Microsoft Build期間，高通技術(shù)公司將帶來技術(shù)演示，并帶來能夠支持在下一代Windows 11 PC上開發(fā)生成式AI的工具。Stable Diffusion作為一款文本生成圖像的生成式AI模型，參數(shù)超過10億，目前已經(jīng)能夠完全在終端側(cè)運行。高通技術(shù)公司表示，未來幾個月內(nèi)，包括大語言模型(LLM)在內(nèi)的參數(shù)高達100億的模型將有望在終端側(cè)運行。為了增強高通AI軟件棧并幫助開發(fā)者打造下一代終端側(cè)AI體驗，高通AI引擎Direct SDK將在Microsoft Build上首次面向公眾推出。借助ONNX Runtime和高通AI軟件棧，如今用戶在使用5G版Surface Pro 9和聯(lián)想ThinkPad x13s的時候就可以在其搭載的第三代驍龍8cx平臺上的AI引擎運行AI工作負載。

微軟Windows芯片和系統(tǒng)集成公司副總裁Pavan Davuluri表示：“為了在廣泛的終端和應用領(lǐng)域擴展AI，云端和終端側(cè)處理缺一不可。通過將微軟在云端AI上的領(lǐng)先優(yōu)勢以及Windows平臺的能力與高通技術(shù)公司的終端側(cè)AI專長相結(jié)合，我們將加速由生成式AI體驗所帶來的發(fā)展機遇。”

高通技術(shù)公司還將在大會期間展示為驍龍平臺原生編譯熱門應用可帶來的顯著性能提升，并上線全新的開發(fā)者門戶網(wǎng)站，便于從統(tǒng)一的入口集中獲取驍龍本開發(fā)所需的關(guān)鍵工具、資源和支持。

欲了解高通技術(shù)公司在Microsoft Build開發(fā)者大會上的更多信息，請訪問https://build.microsoft.com/en-US/partners/24488a42-2828-4baf-8e10-28e51938ac6e?source=partners。

版權(quán)所有，未經(jīng)授權(quán)不得以任何形式轉(zhuǎn)載及使用，違者必究。

高通