人工智能在21世紀以后,經歷了PC、互聯(lián)網以及移動互聯(lián)網這幾波浪潮之后,又進入了新一波浪潮,從2012年人工智能神經網絡取得很好的成績開始,快速發(fā)展,預計2025年AI產業(yè)市場規(guī)模將達到7.44萬億美金,未來五年年均增長30%
近兩年人工智能正從單點技術走向真正通用技術,一是從大模型走向超大模型,從GPT-2的15億參數(shù),到GPT-3的1750億參數(shù),鵬程·盤古的2000億參數(shù),再Switch Transformer的16000億參數(shù)。二是從單模態(tài)走向多模態(tài)。簡單來說就是容量需要更大,學習的領域需要更豐富,這帶來的趨勢就是更智能化。
華為昇騰計算業(yè)務副總裁金穎日前在某論壇上表示,這也給人工智能的發(fā)展帶來挑戰(zhàn):一是隨著模型越來越大訓練花費越來昂貴,比如GPT-3需要花費460萬美金,BERT平均需花費1.5萬美金;二是訓練更大的模型,對算法、系統(tǒng)的難度要求更高,未來開發(fā)難度會加大,包括算法開發(fā)難、應用開發(fā)難、業(yè)務部署難;三是人才本就稀缺,人才缺口很大,目前中國人工智能人才供需比為10%,中國人才缺口超過500萬。
金穎認為,面對上述新趨勢、新挑戰(zhàn)、新問題,異構計算架構對上適配多框架,對下適配多異構芯片,同時針對多樣化應用場景,提供高效易用的編程方式,是突破AI產業(yè)平臺的關鍵。
為此華為發(fā)布了AI全棧硬件架構,包括底層的系列硬件、芯片,以及異構計算架構,AI框架,行業(yè)應用等,跟絕大多數(shù)的AI硬件架構一樣,其中華為昇騰AI全棧的核心是異構計算架構CANN,發(fā)揮承上啟下的關鍵作用。AI異構計算架構CANN是華為針對AI場景推出的異構計算架構,通過提供多層次的編程接口,支持用戶快速構建基于Asend平臺的AI應用和業(yè)務。
CANN包含統(tǒng)一APP編程語言,提供一套標準的ACL編程接口,對應用程序開發(fā)者屏蔽底層多種芯片差異,提升用戶APP編程易用性;統(tǒng)一網絡構圖接口,提供了標準的昇騰計算AIR,支持多框架,支持用戶在昇騰芯片上快速部署神經網絡業(yè)務;高性能計算引擎以及算子庫,通過高性能編譯引擎、執(zhí)行引擎、調優(yōu)引擎和預置高性能算子庫,支撐客戶快速部署神經網絡業(yè)務、降低部署成本并最大程度發(fā)揮昇騰計算能力;以及驅動、虛擬化、媒體、集合通信等基礎服務能力。
華為即將發(fā)布最新發(fā)的CANN5.0版本,通過軟硬件協(xié)同,相比之前的版本性能再翻倍,該架構支持多種AI框架,包括Mindspore、TensorFlow、飛槳、Pytorch、ONNX等。而且性能還在持續(xù)提升中,金穎表示,該版本ResNet-50訓練速度保持業(yè)界領先,最新的數(shù)據(jù)已經小于16s。完善生態(tài)滿足度方面,親和昇騰的圖編譯技術已經超過1300高性能算子,支持ModeZoo 400+模型全面覆蓋典型場景應用。
華為以開放社區(qū)的方式運營,從目前的成績來看,CANN已經達到支持40萬昇騰開發(fā)者,各項數(shù)據(jù)全面翻倍,社區(qū)已經成為開發(fā)者大本營,預計到2022年將發(fā)展到百萬開發(fā)者級別??蒲泻献鞒^200家,華為與國內多所高校有很好的合作,北京大學田永鴻教授表示,使用華為人工智能全棧解決方案,在今年的MLPerf評測中之所以能夠取得如此優(yōu)異的成績,其中關鍵因素就是CANN。
金穎表示,未來在異構計算架構領域,希望更多提供極致性能、極簡開發(fā)、開放生態(tài),推動這個產業(yè)進入各個行業(yè)貢獻我們的力量,也希望未來在更多的標準領域,匯聚產業(yè)的力量,推動AI產業(yè)的發(fā)展。
責任編輯:haq
-
華為
+關注
關注
218文章
36047瀏覽量
262244 -
AI
+關注
關注
91文章
40005瀏覽量
301654 -
人工智能
+關注
關注
1818文章
50129瀏覽量
265700
原文標題:華為昇騰異構計算架構CANN 助力應對AI發(fā)展挑戰(zhàn)!
文章出處:【微信號:elecfans,微信公眾號:電子發(fā)燒友網】歡迎添加關注!文章轉載請注明出處。
發(fā)布評論請先 登錄
軟通動力重磅亮相第四屆北京人工智能產業(yè)創(chuàng)新發(fā)展大會
《AI芯片:科技探索與AGI愿景》—— 深入硬件核心的AGI指南
【「AI芯片:科技探索與AGI愿景」閱讀體驗】+AI芯片的需求和挑戰(zhàn)
創(chuàng)通新科全棧AI算力產品亮相人工智能展 創(chuàng)盈芯AI工作站獲雙獎
華為AI全棧硬件架構助力應對人工智能發(fā)展挑戰(zhàn)
評論