91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

繼HBM之后,英偉達(dá)帶火又一AI內(nèi)存模組!顛覆AI服務(wù)器與PC

晶芯觀察 ? 來源:電子發(fā)燒友網(wǎng) ? 作者:綜合報(bào)道 ? 2025-07-27 07:50 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

電子發(fā)燒友網(wǎng)綜合報(bào)道,據(jù)韓媒報(bào)道,下一代低功耗內(nèi)存模塊 “SOCAMM” 市場(chǎng)已全面拉開帷幕。英偉達(dá)作為 AI 領(lǐng)域的領(lǐng)軍企業(yè),計(jì)劃在今年為其 AI產(chǎn)品部署60至80萬個(gè) SOCAMM 內(nèi)存模塊,不僅將用于數(shù)據(jù)中心AI服務(wù)器,也將有望應(yīng)用于PC。這一舉措將對(duì)內(nèi)存市場(chǎng)以及相關(guān)產(chǎn)業(yè)鏈產(chǎn)生深遠(yuǎn)影響。

SOCAMM

SOCAMM 全稱為 Small Outline Compression Attached Memory Module,即小型化壓縮附加內(nèi)存模組,是英偉達(dá)主導(dǎo)開發(fā)的一種新型內(nèi)存模塊,是適用于數(shù)據(jù)中心 AI 服務(wù)器的新型高性能、低功耗內(nèi)存。

它將低功耗 DRAM 與壓縮連接內(nèi)存模塊(CAMM)搭配使用,以全新的外形尺寸提供卓越的性能和能效?;?LPDDR5X 芯片,采用694個(gè)I/O端口,帶寬可達(dá)傳統(tǒng) DDR5 的2.5倍。

在物理形態(tài)上,SOCAMM 尺寸僅為 14×90 毫米,外形類似U盤,相比傳統(tǒng) RDIMM 體積減少66%,為實(shí)現(xiàn)更緊湊、高效的服務(wù)器設(shè)計(jì)提供了可能。SOCAMM 采用了可拆卸的模塊化插拔結(jié)構(gòu),改變了以往 LPDDR 內(nèi)存必須焊接在主板上的限制,用戶可以像更換硬盤或 SSD那樣便捷地進(jìn)行內(nèi)存升級(jí)或替換,大大提高了系統(tǒng)的靈活性和可維護(hù)性。

SOCAMM 采用引線鍵合和銅互連技術(shù),每個(gè)模塊連接 16 個(gè) DRAM 芯片,這種銅基結(jié)構(gòu)增強(qiáng)了散熱性能,對(duì)于 AI 系統(tǒng)的性能和可靠性至關(guān)重要。同時(shí),SOCAMM 基于成熟的封裝工藝,顯著降低了部署門檻和制造難度,具備更強(qiáng)的成本控制能力和更廣泛的適用范圍。

于AI服務(wù)器和PC中采用

得益于 LPDDR5X 自身的低電壓設(shè)計(jì)和優(yōu)化后的封裝工藝,SOCAMM 使服務(wù)器整體運(yùn)行能耗減少約 45%,這種高效能與低功耗的平衡特性,使得 SOCAMM 不僅適用于集中式的數(shù)據(jù)中心,也能很好地服務(wù)于邊緣計(jì)算場(chǎng)景中對(duì)空間和能耗敏感的應(yīng)用需求。NVIDIA 計(jì)劃將 SOCAM 率先應(yīng)用于其 AI 服務(wù)器產(chǎn)品和 AI PC(工作站)產(chǎn)品。

在英偉達(dá)的規(guī)劃中,將率先采用SOCAMM的產(chǎn)品將是GB300 Blackwell 平臺(tái)。Blackwell 架構(gòu) GPU 具有 2080 億個(gè)晶體管,采用專門定制的臺(tái)積電 4NP 工藝制造。所有 Blackwell 產(chǎn)品均采用雙倍光刻極限尺寸的裸片,通過 10 TB/s 的片間互聯(lián)技術(shù)連接成一塊統(tǒng)一的GPU。其在性能、效率和規(guī)模方面取得了突破性進(jìn)步。而 SOCAMM 內(nèi)存模塊的加入,將進(jìn)一步提升其在 AI 運(yùn)算方面的表現(xiàn)。

此外,英偉達(dá)在今年5月GTC 2025上發(fā)布的個(gè)人 AI 超級(jí)計(jì)算機(jī) “DGX Spark” 也采用了 SOCAMM 模塊。DGX Spark 采用 NVIDIA GB10 Grace Blackwell 超級(jí)芯片,能夠提供高性能 AI 功能,并支持多達(dá) 2000 億個(gè)參數(shù)的模型。隨著DGX Spark的推出,預(yù)計(jì)將推動(dòng)SOCAMM向PC市場(chǎng)滲透,使更多消費(fèi)者受益于這一先進(jìn)的內(nèi)存技術(shù)。

SOCAMM 與現(xiàn)有的筆記本電腦 DRAM 模塊(LPCAMM)相比,其 I/O 速度提升,數(shù)據(jù)傳輸速度加快,且結(jié)構(gòu)緊湊,更易于更換和擴(kuò)展。

隨著 SOCAMM 在 AI 服務(wù)器和 PC 中的應(yīng)用不斷增長(zhǎng),其大規(guī)模出貨預(yù)計(jì)將對(duì)內(nèi)存和 PCB 電路板市場(chǎng)產(chǎn)生積極影響。知情人士透露,“英偉達(dá)正在與內(nèi)存和電路板行業(yè)分享 SOCAMM 的部署量(60 至 80 萬片),該模塊將應(yīng)用于其 AI 產(chǎn)品”,目前內(nèi)存和 PCB 電路板行業(yè)都在為訂單和供貨積極做準(zhǔn)備。

從內(nèi)存市場(chǎng)來看,SOCAMM 的應(yīng)用將刺激對(duì)低功耗 DRAM 的需求,推動(dòng)內(nèi)存廠商加大在相關(guān)技術(shù)研發(fā)和產(chǎn)能擴(kuò)充方面的投入。由于 SOCAMM 需要適配電路板設(shè)計(jì),這將促使 PCB 廠商開發(fā)新的產(chǎn)品方案,帶動(dòng)行業(yè)技術(shù)升級(jí)。

美光率先供應(yīng)SOCAMM

目前在內(nèi)存廠商中,美光的 SOCAMM已率先獲得英偉達(dá)量產(chǎn)批準(zhǔn)。美光在內(nèi)存解決方案領(lǐng)域一直積極探索創(chuàng)新,成為英偉達(dá)下一代內(nèi)存供應(yīng)商。而三星和 SK 海力士的 SOCAMM 目前尚未獲得英偉達(dá)認(rèn)證,不過這兩家內(nèi)存大廠也在積極與英偉達(dá)接洽,希望能夠供應(yīng)SOCAMM。

美光 SOCAMM 是業(yè)界首款專為 AI 資料中心設(shè)計(jì)的資料中心級(jí)模塊化低功耗存儲(chǔ)器模塊。透過將美光業(yè)界領(lǐng)先的 LPDDR5X 與 CAMM 存儲(chǔ)器模塊結(jié)合在一起,這款次世代存儲(chǔ)器為更有效率的 AI 資料中心奠定了基礎(chǔ)。

來源:美光官網(wǎng)


美光宣稱其最新LPDDR5X芯片能效比競(jìng)爭(zhēng)對(duì)手高出20%,這是其贏得英偉達(dá)訂單的關(guān)鍵因素??紤]到每臺(tái)AI服務(wù)器將搭載四個(gè)SOCAMM模塊(總計(jì)256個(gè)DRAM芯片),散熱效率的重要性尤為突出。

與美光此前生產(chǎn)的服務(wù)器 DDR 模塊RDIMM相比,SOCAMM的尺寸和功耗減少了三分之一,帶寬增加了 2.5 倍。

通過采用美光LPDDR5X 等創(chuàng)新型低功耗(LP)存儲(chǔ)器架構(gòu),資料中心可以大幅提高效能,并能夠避免傳統(tǒng) DDR5 存儲(chǔ)器的能源損耗。與 DDR5 等傳統(tǒng)存儲(chǔ)器技術(shù)不同,LP 存儲(chǔ)器運(yùn)行于較低的電壓,并通過減少功耗、降低發(fā)熱量、最佳化以節(jié)能為重點(diǎn)的電路設(shè)計(jì)等方式提高功耗和能源效率。

在大規(guī)??蛻糁С汁h(huán)境中執(zhí)行推理 Llama 3 70B,單個(gè) GPU 管理復(fù)雜的AI互動(dòng),同時(shí)實(shí)時(shí)處理數(shù)千個(gè)錯(cuò)綜復(fù)雜的客戶查詢。LP 存儲(chǔ)器的使用將這一密集型運(yùn)算工作量轉(zhuǎn)化為能源效率更高的過程。

當(dāng)我們測(cè)試 LPDDR5X 存儲(chǔ)器(在搭載 NVLink 的 NVIDIA GH200 Grace Hopper 超級(jí)芯片上)與傳統(tǒng) DDR5 存儲(chǔ)器(在搭載 PCIe 連線 Hopper GPU 的 x86 系統(tǒng)上)時(shí),結(jié)果表明 LP 存儲(chǔ)器實(shí)現(xiàn)了關(guān)鍵的效能提升。使用 Meta Llama 3 70B 測(cè)試推理效能時(shí),LP 存儲(chǔ)器系統(tǒng)推理吞吐量提高了 5 倍、延遲減少了近 80%、能源消耗降低了 73%。

LLM 推理的能源效率 來源:美光官網(wǎng)



小結(jié):

隨著英偉達(dá)對(duì) SOCAMM 內(nèi)存模塊的大規(guī)模部署,以及其在 AI 服務(wù)器和 PC 市場(chǎng)的逐步滲透,將推動(dòng)整個(gè) AI 產(chǎn)業(yè)鏈圍繞這一新型內(nèi)存技術(shù)進(jìn)行升級(jí)和發(fā)展。無論是內(nèi)存廠商、PCB電路板廠商,還是服務(wù)器制造商和終端用戶,都將受益于SOCAMM帶來的影響。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    GPU猛獸襲來!HBM4、AI服務(wù)器徹底引爆!

    電子發(fā)燒友網(wǎng)報(bào)道(文/黃晶晶)日前,多家服務(wù)器廠商表示因AI服務(wù)器需求高漲拉高業(yè)績(jī)?cè)鲩L(zhǎng)。隨著AI服務(wù)器需求旺盛,以及
    的頭像 發(fā)表于 06-02 06:54 ?6784次閱讀

    普通服務(wù)器電源與AI服務(wù)器電源的區(qū)別(上)

    普通服務(wù)器電源與AI服務(wù)器電源的區(qū)別,為相關(guān)測(cè)試及應(yīng)用工作提供參考。輸出電壓精度方面的區(qū)別輸出電壓精度是服務(wù)器電源的關(guān)鍵指標(biāo)之。普通
    的頭像 發(fā)表于 01-12 09:31 ?1027次閱讀
    普通<b class='flag-5'>服務(wù)器</b>電源與<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>電源的區(qū)別(上)

    羅姆強(qiáng)勢(shì)入局AI服務(wù)器800VDC電源方案 原創(chuàng)

    % 。 AI 訓(xùn)練耗電量是網(wǎng)絡(luò)搜索的 10 倍以上 。 AI 服務(wù)器 GPU 性能增長(zhǎng)的同時(shí)功率持續(xù)飆升。以 英偉達(dá) 為例,其 GPU 的
    的頭像 發(fā)表于 12-13 00:25 ?8359次閱讀

    羅姆強(qiáng)勢(shì)入局AI服務(wù)器800VDC電源方案

    的10倍以上。 ? AI服務(wù)器GPU性能增長(zhǎng)的同時(shí)功率持續(xù)飆升。以英偉達(dá)為例,其GPU的TDP熱設(shè)計(jì)功耗從H100的700W,攀升至B300的1.4KW,明年VR200將
    的頭像 發(fā)表于 12-12 15:42 ?5097次閱讀
    羅姆強(qiáng)勢(shì)入局<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>800VDC電源方案

    AI時(shí)代,服務(wù)器存儲(chǔ)如何升級(jí)?

    邊是基于Darkmont的至強(qiáng)6+蓄勢(shì)待發(fā),另邊是基于Zen 6的EPYC Venice摩拳擦掌,海量GPU并行計(jì)算的AI服務(wù)器正在醞釀
    的頭像 發(fā)表于 11-03 13:11 ?717次閱讀

    對(duì)話|AI服務(wù)器電源對(duì)磁性元件提出的新需求

    尚未拉開,整體處于同起跑線。 面對(duì)AI服務(wù)器電源向“三高”——高功率密度、高效率、高可靠性發(fā)展的趨勢(shì),AI服務(wù)器電源產(chǎn)業(yè)鏈各環(huán)節(jié)——無論是
    的頭像 發(fā)表于 10-11 14:55 ?972次閱讀
    對(duì)話|<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>電源對(duì)磁性元件提出的新需求

    英偉達(dá)戰(zhàn)略轉(zhuǎn)向:棄用SOCAMM1,全力推進(jìn)SOCAMM2項(xiàng)目

    的開發(fā)中。這戰(zhàn)略調(diào)整猶如顆投入平靜湖面的巨石,在AI服務(wù)器內(nèi)存市場(chǎng)乃至整個(gè)半導(dǎo)體產(chǎn)業(yè)激起千層浪。 ? SOCAMM技術(shù)自誕生起,便被
    的頭像 發(fā)表于 09-17 17:34 ?812次閱讀

    【「AI芯片:科技探索與AGI愿景」閱讀體驗(yàn)】+AI芯片的需求和挑戰(zhàn)

    的我我們講解了這幾種芯片的應(yīng)用場(chǎng)景,設(shè)計(jì)流程、結(jié)構(gòu)等。 CPU: 還為我們講解了種算法:哈希表算法 GPU: 介紹了英偉達(dá)H100GPU芯片。使用了下關(guān)鍵技術(shù): ①張量
    發(fā)表于 09-12 16:07

    英偉達(dá)自研HBM基礎(chǔ)裸片

    "后的下AI GPU "Feynman"。 ? 有分析指出,英偉達(dá)此舉或是將部分GPU功能集成到基礎(chǔ)裸片中,旨在提高HBM和GPU的整體
    的頭像 發(fā)表于 08-21 08:16 ?2792次閱讀

    AI服務(wù)器電源技術(shù)研討會(huì)部分演講嘉賓確認(rèn)

    AI服務(wù)器電源是2025-2026年AI硬件確定的增量,英偉達(dá)超級(jí)芯片GB200功率到2700W,是傳統(tǒng)
    的頭像 發(fā)表于 06-24 10:07 ?1149次閱讀
    <b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>電源技術(shù)研討會(huì)部分演講嘉賓確認(rèn)

    AI 服務(wù)器電源如何迭代升級(jí)?

    AI 算力需求增長(zhǎng)的今天,AI 服務(wù)器電源正陷入 “性能瓶頸與國(guó)產(chǎn)替代并行、場(chǎng)景適配與技術(shù)創(chuàng)新交織” 的雙重挑戰(zhàn)。 由Big-Bit商務(wù)網(wǎng)、廣東省磁性元器件行業(yè)協(xié)會(huì)主辦的2025中國(guó)電子熱點(diǎn)
    的頭像 發(fā)表于 06-23 14:51 ?1362次閱讀

    總功率超198kW,AI服務(wù)器電源對(duì)元器件提出了哪些要求?

    芯片GB200功率到2700W,是傳統(tǒng)服務(wù)器電源的5-7倍,但其面臨的挑戰(zhàn)同樣不小。 超高功率需求與空間限制。 AI服務(wù)器(如搭載英偉達(dá)Bl
    的頭像 發(fā)表于 06-17 10:36 ?1276次閱讀
    總功率超198kW,<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>電源對(duì)元器件提出了哪些要求?

    比肩HBM,SOCAMM內(nèi)存模組即將商業(yè)化

    參數(shù)規(guī)模達(dá)數(shù)百億甚至萬億級(jí)別,帶來巨大內(nèi)存需求,但HBM內(nèi)存價(jià)格高昂,只應(yīng)用在高端算力卡上。SOCAMM則有望應(yīng)用于AI
    的頭像 發(fā)表于 05-17 01:15 ?4000次閱讀

    薩瑞微電子SiC 和 GaN賦能AI服務(wù)器電源系統(tǒng)

    01AI服務(wù)器電源的核心挑戰(zhàn)與技術(shù)需求超高功率密度:?jiǎn)螜C(jī)架功率已從傳統(tǒng)服務(wù)器的數(shù)千瓦提升至數(shù)十千瓦(如英偉達(dá)DGX-2需10kW,未來GB3
    的頭像 發(fā)表于 04-03 14:41 ?1197次閱讀
    薩瑞微電子SiC 和 GaN賦能<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>電源系統(tǒng)

    大功率AI服務(wù)器PSU的革新之路

    在人工智能浪潮的席卷下,AI服務(wù)器作為支撐各類復(fù)雜AI運(yùn)算的關(guān)鍵硬件,其電源(PSU)的性能表現(xiàn)成為了決定整個(gè)系統(tǒng)效能的重要因素。作為大功率AI服務(wù)
    的頭像 發(fā)表于 03-10 15:07 ?2157次閱讀
    大功率<b class='flag-5'>AI</b><b class='flag-5'>服務(wù)器</b>PSU的革新之路