要點
?終端側(cè)生成式AI解決方案將查詢和推理轉(zhuǎn)移到PC和手機等邊緣終端,讓開發(fā)者和云服務(wù)提供商能夠打造更加經(jīng)濟可靠,且隱私性更高的生成式AI。
?高通和微軟確認(rèn)達成合作關(guān)系,將面向消費級和企業(yè)級終端、以及工業(yè)設(shè)備,規(guī)?;瘮U展AI能力,為用戶帶來行業(yè)領(lǐng)先的AI體驗。
在Microsoft Build 2023開發(fā)者大會期間,高通技術(shù)公司展示了公司最新的終端側(cè)AI創(chuàng)新,包括在驍龍計算平臺上運行生成式AI,以及開發(fā)者在采用驍龍平臺的Windows 11 PC上創(chuàng)建應(yīng)用的新路徑。
在搭載驍龍計算平臺的Windows筆記本上運行Stable Diffusion
高通技術(shù)公司產(chǎn)品管理高級副總裁Ziad Asghar表示:
為了讓生成式AI真正為更多人所接受和使用,許多推理工作需要在邊緣終端上處理。我們擁有行業(yè)領(lǐng)先的AI硬件和軟件,可以賦能開發(fā)者充分利用我們強大的AI能力,在搭載驍龍平臺的筆記本電腦、手機和其他終端上打造令人驚艷的全新用戶體驗。
AI的未來既需要終端側(cè)AI,也需要云端AI。在終端側(cè)運行AI應(yīng)用可提升成本效益、增強隱私性、個性化并降低時延。與僅在CPU或GPU上進行AI工作負(fù)載處理比較,驍龍平臺集成專用的高通AI引擎,處理AI工作負(fù)載可以更加高效,讓小巧輕薄的設(shè)備也能支持終端側(cè)AI。
在Microsoft Build期間,高通技術(shù)公司將帶來技術(shù)演示,并帶來能夠支持在下一代Windows 11 PC上開發(fā)生成式AI的工具。Stable Diffusion作為一款文本生成圖像的生成式AI模型,參數(shù)超過10億,目前已經(jīng)能夠完全在終端側(cè)運行。高通技術(shù)公司表示,未來幾個月內(nèi),包括大語言模型(LLM)在內(nèi)的參數(shù)高達100億的模型將有望在終端側(cè)運行。為了增強高通AI軟件棧并幫助開發(fā)者打造下一代終端側(cè)AI體驗,高通AI引擎Direct SDK將在Microsoft Build上首次面向公眾推出。借助ONNX Runtime和高通AI軟件棧,如今用戶在使用5G版Surface Pro 9和聯(lián)想ThinkPad x13s的時候就可以在其搭載的第三代驍龍8cx平臺上的AI引擎運行AI工作負(fù)載。
微軟Windows芯片和系統(tǒng)集成公司副總裁Pavan Davuluri表示:
為了在廣泛的終端和應(yīng)用領(lǐng)域擴展AI,云端和終端側(cè)處理缺一不可。通過將微軟在云端AI上的領(lǐng)先優(yōu)勢以及Windows平臺的能力與高通技術(shù)公司的終端側(cè)AI專長相結(jié)合,我們將加速由生成式AI體驗所帶來的發(fā)展機遇。
終端側(cè)AI加速的重要性——超級分辨率和圖片增強技術(shù) 高通技術(shù)公司還將在大會期間展示為驍龍平臺原生編譯熱門應(yīng)用可帶來的顯著性能提升,并上線全新的開發(fā)者門戶網(wǎng)站,便于從統(tǒng)一的入口集中獲取驍龍本開發(fā)所需的關(guān)鍵工具、資源和支持。
審核編輯:湯梓紅
-
微軟
+關(guān)注
關(guān)注
4文章
6741瀏覽量
107863 -
高通
+關(guān)注
關(guān)注
78文章
7731瀏覽量
199819 -
AI
+關(guān)注
關(guān)注
91文章
39793瀏覽量
301446 -
Microsoft
+關(guān)注
關(guān)注
0文章
237瀏覽量
7969
原文標(biāo)題:高通和微軟在Microsoft Build開發(fā)者大會上攜手推動終端側(cè)AI規(guī)?;瘮U展
文章出處:【微信號:Qualcomm_China,微信公眾號:高通中國】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。
發(fā)布評論請先 登錄
安霸推出開發(fā)者社區(qū)以助力部署端側(cè)AI應(yīng)用
NVIDIA擴大與微軟合作推動AI超級工廠建設(shè)
使用NVIDIA Nemotron RAG和Microsoft SQL Server 2025構(gòu)建高性能AI應(yīng)用
Arm亮相2025 OPPO開發(fā)者大會
軟通動力攜手華為昇騰推進AI智能體規(guī)模化部署
軟通動力如何推動工業(yè)AI規(guī)模化落地
新思科技攜手微軟借助AI技術(shù)加速芯片設(shè)計
軟通動力攜手鴻湖萬聯(lián)亮相華為開發(fā)者大會2025
微軟Microsoft Azure AI Foundry國際版的十大技術(shù)突破
Arm攜手微軟共筑云計算和PC未來
首創(chuàng)開源架構(gòu),天璣AI開發(fā)套件讓端側(cè)AI模型接入得心應(yīng)手
硅基覺醒已至前夜,聯(lián)發(fā)科攜手生態(tài)加速智能體化用戶體驗時代到來
2025 TUYA全球開發(fā)者大會開幕在即!涂鴉攜手五大模型巨頭共話AI應(yīng)用落地之道
高通和微軟在Microsoft Build開發(fā)者大會上攜手推動終端側(cè)AI規(guī)?;瘮U展
評論