91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復
登錄后你可以
  • 下載海量資料
  • 學習在線課程
  • 觀看技術視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領取20積分哦,立即完善>

3天內(nèi)不再提示

存算一體技術的分類

奇普樂芯片技術 ? 來源:奇普樂芯片技術 ? 2024-11-05 09:56 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

近年間,云計算人工智能技術的蓬勃興起,計算中心面臨著數(shù)據(jù)效率低、能耗大等核心挑戰(zhàn),這促使學術界和工業(yè)界重新聚焦。

開宗明義,定義先行。

首先,我們先來了解一下什么是存算一體:

存算一體是通過在存儲器中嵌入計算能力,實現(xiàn)數(shù)據(jù)存儲與計算的緊密結(jié)合。其技術不僅能夠顯著提升計算效率,還能大幅降低能耗。

緊接著,存算一體技術分為三類:近存計算(Processing Near Memory, PNM)、存內(nèi)處理(Processing In Memory, PIM)和存內(nèi)計算(Computing In Memory, CIM)。

近存計算:不改變計算單元和存儲單元本身設計功能,采用先進的封裝方式及合理的硬件布局和結(jié)構優(yōu)化,增強二者間通信寬帶,增大傳輸速率。

存內(nèi)處理:側(cè)重于將計算過程盡可能地嵌入到存儲器內(nèi)部,這種方法的能效比通常較高,但計算精度可能受限。另一種思路是在存儲器內(nèi)部集成額外的計算單元,以支持高精度計算。

存內(nèi)計算:存儲單元與計算單元完全融合,無獨立計算單元,通過存儲器顆粒上嵌入算法,由存儲器芯片內(nèi)部的存儲單元完成計算操作。

341bc874-98c6-11ef-a511-92fbcf53809c.jpg圖源:Google

事實上,存算一體的概念由來已久。早在1969年,斯坦福研究所的Kautz等人提出了存算一體計算機的概念。其受限于當時的芯片制造技術和算力需求的匱乏,那時存算一體僅僅停留在理論研究階段,并未得到實際應用。

因此,后續(xù)研究人員在芯片電路結(jié)構、計算架構與系統(tǒng)應用等方面開展了一系列研究。但受限于電路設計復雜度與工藝難度,后續(xù)的大部分研究本質(zhì)上實現(xiàn)的是 “近存計算”,其與存內(nèi)計算最大的區(qū)別是,近存計算仍然需把數(shù)據(jù)從內(nèi)存中讀取出來之后再就近進行計算,計算的結(jié)果再存儲到內(nèi)存當中。

與此同時,存算一體技術的核心在于將數(shù)據(jù)存儲與計算融合在同個芯片的同片區(qū)之中,從而徹底消除馮諾依曼計算架構的瓶頸;將通過存儲器內(nèi)部進行數(shù)據(jù)處理或計算,此技術能夠大幅減少數(shù)據(jù)在計算與存儲之間的傳輸時間,提升整體性能。

尤其,在馮諾伊曼架構中,計算單元與內(nèi)存是兩個分離的單元。計算單元根據(jù)指令從內(nèi)存中讀取數(shù)據(jù),在計算單元中完成計算和處理,完成后再將數(shù)據(jù)存回內(nèi)存。

然而,整個過程中,存儲器與處理器之間數(shù)據(jù)交換通路窄,以及由此引發(fā)的高能耗形成兩大難題,在存儲與計算之間筑起一道“存儲墻”。能耗方面,大部分能耗在數(shù)據(jù)搬運過程中產(chǎn)生,數(shù)據(jù)搬運功耗是計算功耗的1000倍。而數(shù)據(jù)搬運速度方面,AI運算需1PB/s,但DRAM 40GB-1TB/s 都遠達不到要求。

342a1690-98c6-11ef-a511-92fbcf53809c.jpg存算一體技術的分類

過去數(shù)載,處理器性能以每年大約55%的速度提升,而相比之下,內(nèi)存性能的提升則顯著放緩,其年增長率僅約為10%。這種長期存在的性能發(fā)展不均衡現(xiàn)象,導致當前存儲系統(tǒng)的訪問速度相較于處理器的計算能力出現(xiàn)了顯著的滯后現(xiàn)象。

目前,在傳統(tǒng)計算機的設定里,存儲模塊是為計算服務的,因此設計上會考慮存儲與計算的分離與優(yōu)先級。但如今,存儲和計算不得不整體考慮,以最佳的配合方式為數(shù)據(jù)采集、傳輸和處理服務。

其中,雖然多核(例如CPU)/眾核(例如GPU)并行加速技術也能提升算力,但在后摩爾時代,存儲帶寬制約了計算系統(tǒng)的有效帶寬,芯片算力增長步履維艱。從處理單元外的存儲器提取數(shù)據(jù),搬運時間往往是運算時間的成百上千倍,整個過程的無用能耗大概在60%-90%之間,能效非常低,“存儲墻”成為了數(shù)據(jù)計算應用的一大障礙。

其次,存內(nèi)計算和存內(nèi)邏輯,即存算一體技術直接利用存儲器進行數(shù)據(jù)處理或計算,從而把數(shù)據(jù)存儲與計算融合在同一個芯片的同一片區(qū)之中,從而徹底消除馮諾依曼計算架構瓶頸,以便適用于深度學習神經(jīng)網(wǎng)絡這種大數(shù)據(jù)量大規(guī)模并行的應用場景。

34321d0e-98c6-11ef-a511-92fbcf53809c.jpg算力發(fā)展速度遠超存儲

顯然,存算一體技術的演進軌跡導向了計算精度的提升、算力輸出的增強及能效比優(yōu)化的高階,以此映射出該技術內(nèi)進步邏輯的必然走向。

前移至感知端,向 “極致低功耗” 邁進:面向可穿戴設備、物聯(lián)網(wǎng)設備等端側(cè)市場,打造超低功耗、超低成本的解決方案。當前感知芯片采集到的模擬信號依賴模數(shù)轉(zhuǎn)換器轉(zhuǎn)換成數(shù)字,信號再通過智能處理器進行處理,速度慢、功耗高。

后移至邊緣端/云端,向 “極致大算力”邁進:面向邊緣端/云端服務器、數(shù)據(jù)中 心與自動駕駛等場景,利用存算一體芯片大規(guī)模并行運算的特點,打造超大算力解決方案。當前的邊緣端/云端處理器大多基于 GPU 平臺,而 GPU 仍然受 “存儲墻” 限制,存在巨大的數(shù)據(jù)通信開銷,導致其實際算力不到標稱算力的 10%。據(jù)分析, 以 ChatGPT 為代表的主流大模型的基本組成單元 Transformer 中約有 90% 以上的運算為大規(guī)模矩陣運算,可以基于存算一體陣列高效完成。

協(xié)同異構架構與異構集成,實現(xiàn)合力突圍:異構架構將不同計算架構、不同功能的硬件單元進行融合,充分發(fā)揮各自的優(yōu)勢,彌補各自的不足,以實現(xiàn)系統(tǒng)更高的性能。例如,單一的數(shù)字存算一體架構或模擬存算一體架構在精度、能效、面積、成本等指標上各有優(yōu)劣,采用單一架構難以兼具各項性能。

驅(qū)動 EDA 設計工具與應用工具鏈開發(fā):隨著存算一體芯片 從 0 到 1 的突破,已驗證了其在 AI 應用中的發(fā)展?jié)摿εc市場前景,進而吸引上下游企業(yè)的加入,催生相應的自動化 EDA 設計工具、開發(fā)環(huán)境、仿真器、編譯工具與智能算法的協(xié)同發(fā)展,縮短芯片的研發(fā)周期與應用開發(fā)周期,進而推動開源與標準生態(tài)的建立與繁榮,形成良性循環(huán),加速存算一體芯片的規(guī)模化量產(chǎn)與應用。

綜上所述,當前的存算一體芯片研究集中在單點技術,且在器件、電路、架構、EDA工具及系統(tǒng)應用等方面仍然存在諸多技術待解決。

另外,從技術的角度,存算一體芯片未來的研究將圍 繞新型器件優(yōu)化、低功耗數(shù)?;旌想娐吩O計、高性能異構芯片架構、先進集成與封裝、工具鏈開發(fā)等。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學習之用,如有內(nèi)容侵權或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • 處理器
    +關注

    關注

    68

    文章

    20250

    瀏覽量

    252209
  • 存儲器
    +關注

    關注

    39

    文章

    7738

    瀏覽量

    171650
  • 算力
    +關注

    關注

    2

    文章

    1528

    瀏覽量

    16740
  • 存算一體
    +關注

    關注

    1

    文章

    121

    瀏覽量

    5132

原文標題:打破算力極限,存算一體技術并駕齊驅(qū)

文章出處:【微信號:奇普樂芯片技術,微信公眾號:奇普樂芯片技術】歡迎添加關注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關推薦
    熱點推薦

    一體力AI芯片將逐漸走向落地應用

    電子發(fā)燒友網(wǎng)報道(文/李彎彎)前不久,后摩智能宣布,其自主研發(fā)的業(yè)內(nèi)首款一體力AI芯片成功點亮,并成功跑通智能駕駛算法模型。 ? 這是
    的頭像 發(fā)表于 05-31 00:03 ?6369次閱讀

    一體更進步,“感一體化”前景如何?

    電子發(fā)燒友網(wǎng)報道(文/吳子鵬)近段時間,一體再燃熱潮,成為破除“內(nèi)存墻”,以及打造大力芯片的主要路徑之
    的頭像 發(fā)表于 06-08 00:01 ?7412次閱讀

    探索內(nèi)計算—基于 SRAM 的內(nèi)計算與基于 MRAM 的一體的探究

    本文深入探討了基于SRAM和MRAM的一體技術在計算領域的應用和發(fā)展。首先,介紹了基于SRAM的內(nèi)邏輯計算
    的頭像 發(fā)表于 05-16 16:10 ?5367次閱讀
    探索<b class='flag-5'>存</b>內(nèi)計算—基于 SRAM 的<b class='flag-5'>存</b>內(nèi)計算與基于 MRAM 的<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>的探究

    一體技術路線如何選

    電子發(fā)燒友網(wǎng)報道(文/李彎彎)過去幾年,越來越多企業(yè)加入到一體技術的研究中,如今,
    的頭像 發(fā)表于 06-21 09:27 ?1.1w次閱讀

    一體技術發(fā)展現(xiàn)狀和未來趨勢

    一體
    電子發(fā)燒友網(wǎng)官方
    發(fā)布于 :2023年04月25日 17:21:41

    科技數(shù)?;旌?b class='flag-5'>存一體AI芯片專利解析

    科技的該項專利是關于數(shù)模混合一體芯片技術,除能有效降低設計復雜度和制造成本外,還特別適用于人工智能神經(jīng)網(wǎng)絡的運算。
    的頭像 發(fā)表于 12-24 11:02 ?8121次閱讀
    知<b class='flag-5'>存</b>科技數(shù)?;旌?b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>AI芯片專利解析

    一體芯片在可穿戴設備市場有哪些機會

    2022年,TWS耳機廠商在種新型計算架構中找到突破口——一體。與傳統(tǒng)馮諾依曼架構相比,基于
    發(fā)表于 10-14 09:38 ?1712次閱讀

    2023年一體是芯片設計的技術趨勢

    一體旨在計算單元與存儲單元融合,在實現(xiàn)數(shù)據(jù)存儲的同時直接進行計算,以消除數(shù)據(jù)搬移帶來的開銷,極大提升運算效率,以實現(xiàn)計算存儲的高效節(jié)能。
    的頭像 發(fā)表于 01-13 15:26 ?3216次閱讀

    關于一體,我們和ChatGPT聊了聊

    一體技術連續(xù)兩年入選了《達摩院十大科技趨勢》,被看好在高訪、高并行的人工智能場景的規(guī)?;瘧谩V饕且驗?/div>
    的頭像 發(fā)表于 02-09 14:31 ?2686次閱讀

    特斯拉的下代AI芯片:一體

    根據(jù)存儲與計算的距離遠近,將廣義一體技術方案分為三大類,分別是近計算 (Processing Near Memory,PNM)、
    的頭像 發(fā)表于 03-09 09:22 ?3349次閱讀

    ChatGPT開啟大模型“軍備賽”,一體開啟力新篇章

    一體需求旺盛,有望推動下階段的人工智能發(fā)展,原因是我們認為現(xiàn)在
    發(fā)表于 07-06 10:20 ?788次閱讀
    ChatGPT開啟大模型“軍備賽”,<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>開啟<b class='flag-5'>算</b>力新篇章

    一體芯片的技術壁壘

    作為后摩爾時代發(fā)展的必然趨勢之一體越來越受到行業(yè)的關注。在十問的前六問中,我們梳理了
    的頭像 發(fā)表于 09-22 14:16 ?2479次閱讀
    <b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>芯片的<b class='flag-5'>技術</b>壁壘

    蘋芯亮相ESWEEK,探索一體技術新思路

    蘋芯科技作為專注一體芯片領域的創(chuàng)新型企業(yè),長期以來直關注國際前沿技術動向。蘋芯很榮幸能夠在ESWEEK向廣大專家、學者和公眾展示我們在
    的頭像 發(fā)表于 09-23 10:12 ?1491次閱讀

    一體芯片新突破!清華大學研制出首顆一體芯片

    這幾天清華大學又火出圈了。但這次并不是因為招生搶人和飯?zhí)?,而是清華大學的芯片研發(fā)團隊研制出全球首顆全系統(tǒng)集成的一體芯片。這是我國、乃至全世界對半導體行業(yè)的又重大突破。 這個芯片由
    的頭像 發(fā)表于 10-11 14:39 ?2027次閱讀

    文看懂“一體

    今天這篇文章,我們來聊個最近幾年很火的概念——一體。為什么會提出“
    的頭像 發(fā)表于 08-18 12:15 ?1431次閱讀
    <b class='flag-5'>一</b>文看懂“<b class='flag-5'>存</b><b class='flag-5'>算</b><b class='flag-5'>一體</b>”