91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

GPU如何突破算力供需瓶頸

沐曦MetaX ? 來源:沐曦MetaX ? 2023-08-22 10:26 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

近日,2023中國算力大會(huì)在寧夏銀川舉行,沐曦集成電路(上海)有限公司(下稱“沐曦”)聯(lián)合創(chuàng)始人、CTO兼首席硬件架構(gòu)師彭莉受邀出席由中國信息通信研究院、中國互聯(lián)網(wǎng)協(xié)會(huì)聯(lián)合舉辦的智能計(jì)算論壇,并擔(dān)任演講嘉賓,探討后GPT時(shí)代算力需求激增帶來的挑戰(zhàn)以及GPU如何突破算力供需瓶頸、推動(dòng)人工智能產(chǎn)業(yè)普惠化發(fā)展。

沐曦聯(lián)合創(chuàng)始人、CTO兼首席硬件架構(gòu)師彭莉

發(fā)表主題演講

在題為“后GPT時(shí)代的算力需求”的演講中,彭莉預(yù)測大模型商業(yè)模式將分為通用計(jì)算市場和專用定制化市場兩大類:在通用計(jì)算市場,大語言模型將終結(jié)多數(shù)NLP任務(wù),NLP技術(shù)水平被強(qiáng)行拉平,通用大模型或被大廠“壟斷”;而在專用定制化市場,開源大模型將呈現(xiàn)百花齊放的發(fā)展態(tài)勢,可針對私有數(shù)據(jù)、敏感數(shù)據(jù)進(jìn)行快速定制和領(lǐng)域?qū)R,大模型開發(fā)和部署能力將趨于普及化。

彭莉指出,區(qū)別于傳統(tǒng)AI,生成式AI技術(shù)可以借助接入類ChatGPT應(yīng)用發(fā)揮顯著的技術(shù)優(yōu)勢,為大語言模型的開發(fā)降本增效,同時(shí)也對算力提出更高和更迫切的要求。由于大模型訓(xùn)練的一次性成本被大規(guī)模推理攤薄,大模型盈利的一大難點(diǎn)是降低推理成本。沐曦致力于打造高效通用的GPU芯片及軟硬件一體的生態(tài)解決方案,通過GPU軟件生態(tài)優(yōu)勢、硬件架構(gòu)優(yōu)勢、先進(jìn)封裝等方面全面提升GPU算力,降低大模型訓(xùn)練和推理的算力成本,在產(chǎn)品路線和生態(tài)戰(zhàn)略上均可滿足大模型對算力基礎(chǔ)設(shè)施的大規(guī)模需求,為推進(jìn)智能產(chǎn)業(yè)可持續(xù)發(fā)展打造堅(jiān)實(shí)的算力底座。

審核編輯:彭菁

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 集成電路
    +關(guān)注

    關(guān)注

    5452

    文章

    12572

    瀏覽量

    374580
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    5194

    瀏覽量

    135486
  • 硬件
    +關(guān)注

    關(guān)注

    11

    文章

    3595

    瀏覽量

    69021
  • 沐曦
    +關(guān)注

    關(guān)注

    1

    文章

    80

    瀏覽量

    1811
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    3650

    瀏覽量

    5189
收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    AI時(shí)代瓶頸如何破?先進(jìn)封裝成半導(dǎo)體行業(yè)競爭新高地

    瓶頸的核心驅(qū)動(dòng)力。當(dāng)傳統(tǒng)通過縮小晶體管尺寸來提升性能的方式,因愈發(fā)困難且成本高昂而面臨瓶頸時(shí),先進(jìn)封裝憑借創(chuàng)新的連接和集成技術(shù)脫穎而出。它能讓多個(gè)芯片(或芯粒)緊密且高效地協(xié)同工作
    的頭像 發(fā)表于 02-23 06:23 ?9875次閱讀

    時(shí)延小于1毫秒,工信部發(fā)布全光網(wǎng)絡(luò)重磅利好政策

    信號傳輸物理瓶頸限制,存在時(shí)延高、帶寬不足、擴(kuò)展性差等問題,難以支撐未來百萬卡級智集群的規(guī)?;渴稹T诖诵蝿菹?,光通信技術(shù)憑借超低時(shí)延、超大帶寬和協(xié)議透明性等優(yōu)勢,成為突破
    的頭像 發(fā)表于 10-20 07:17 ?1.1w次閱讀
    時(shí)延小于1毫秒,工信部發(fā)布全光<b class='flag-5'>算</b><b class='flag-5'>力</b>網(wǎng)絡(luò)重磅利好政策

    阿里云全光互聯(lián)架構(gòu),突破AI瓶頸

    電子發(fā)燒友網(wǎng)報(bào)道(文/李彎彎)全球基建敘事生變,正從GPU時(shí)代邁向連接為王的通信時(shí)代。Scaling-law邊際效益放緩,芯片間連接
    的頭像 發(fā)表于 02-27 09:19 ?1329次閱讀
    阿里云全光互聯(lián)架構(gòu),<b class='flag-5'>突破</b>AI<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>瓶頸</b>

    GPU 利用率<30%?這款開源智云平臺(tái)讓不浪費(fèi) 1%

    作為 AI 開發(fā)者,你是否早已受夠這些困境:花數(shù)百萬采購的 GPU 集群,利用率常年低于 30%,閑置如同燒錢;跨 CPU/GPU/NPU 異構(gòu)資源調(diào)度難如登天,模型訓(xùn)練卡在資源分
    的頭像 發(fā)表于 01-26 14:20 ?186次閱讀

    友思特方案 | 突破 Jetson平臺(tái)的接口性能瓶頸,Gidel 基于FPGA的高速邊緣AI視覺系統(tǒng)

    友思特合作伙伴Gidel FantoVision?成功突破 Jetson I/O 性能瓶頸,助力開發(fā)者毫無妥協(xié)地將像素?cái)?shù)據(jù)轉(zhuǎn)化為智能,實(shí)現(xiàn)邊緣視覺 AI 的極致落地。
    的頭像 發(fā)表于 01-13 10:22 ?1644次閱讀
    友思特方案 | <b class='flag-5'>突破</b> Jetson平臺(tái)的接口性能<b class='flag-5'>瓶頸</b>,Gidel 基于FPGA的高速邊緣AI視覺系統(tǒng)

    湘軍,讓變成生產(chǎn)?

    腦極體
    發(fā)布于 :2025年11月25日 22:56:58

    硅芯科技:AI突破,新型堆疊EDA工具持續(xù)進(jìn)化

    電子發(fā)燒友網(wǎng)報(bào)道(文/黃晶晶)先進(jìn)封裝是突破危機(jī)的核心路徑。2.5D/3D Chiplet異構(gòu)集成可破解內(nèi)存墻、功耗墻與面積墻,但面臨多物理場分析、測試容錯(cuò)等EDA設(shè)計(jì)挑戰(zhàn)?,F(xiàn)有EDA工具已經(jīng)
    的頭像 發(fā)表于 10-31 09:16 ?1.3w次閱讀
    硅芯科技:AI<b class='flag-5'>算</b><b class='flag-5'>力</b><b class='flag-5'>突破</b>,新型堆疊EDA工具持續(xù)進(jìn)化

    中興通訊榮獲2025中國大會(huì)年度重大突破成果獎(jiǎng)

    近日,在2025中國大會(huì)上,中興通訊憑借“基于GPU卡間高速互聯(lián)開放架構(gòu)和自研‘凌云’AI交換芯片的智超節(jié)點(diǎn)系統(tǒng)”榮獲年度重大突破成果
    的頭像 發(fā)表于 08-28 14:40 ?5677次閱讀

    從材料到集成:光子芯片技術(shù)創(chuàng)新,突破瓶頸

    時(shí)延、高帶寬、低功耗的數(shù)據(jù)處理能力。隨著人工智能需求呈爆發(fā)式增長,光子芯片技術(shù)路線呈現(xiàn)出多元化的發(fā)展態(tài)勢。 ? 主流技術(shù)路線:從材料創(chuàng)新到系統(tǒng)集成的突破 ? 當(dāng)前,光子芯片領(lǐng)域形成了多種主流技術(shù)路線。硅基光子集
    的頭像 發(fā)表于 08-21 09:15 ?8902次閱讀

    熱插拔集群

    能力? 服務(wù)器節(jié)點(diǎn)熱插拔?:集群服務(wù)器支持在線更換計(jì)算節(jié)點(diǎn)(如2U服務(wù)器容納12個(gè)熱插拔AI節(jié)點(diǎn),單節(jié)點(diǎn)集成5個(gè)卡)。 GPU/卡擴(kuò)
    的頭像 發(fā)表于 06-26 09:20 ?1029次閱讀

    【「芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」閱讀體驗(yàn)】+NVlink技術(shù)從應(yīng)用到原理

    前言 【「芯片 | 高性能 CPU/GPU/NPU 微架構(gòu)分析」書中的芯片知識是比較接近當(dāng)前的頂尖芯片水平的,同時(shí)包含了芯片架構(gòu)的基礎(chǔ)知識,但該部分知識比較晦澀難懂,或許是由于我一直從事的事芯片
    發(fā)表于 06-18 19:31

    30+AI 熱管理材料供應(yīng)商推薦

    隨著AI大模型、自動(dòng)駕駛等需求激增,高芯片功耗突破1000W,封裝基板與散熱材料成為性能瓶頸?;澹篈BF載板供需缺口超30%(Tech
    的頭像 發(fā)表于 04-25 14:33 ?1239次閱讀
    30+AI <b class='flag-5'>算</b><b class='flag-5'>力</b>熱管理材料供應(yīng)商推薦

    搭建中心,從了解的GPU 特性開始

    ABSTRACT摘要本文介紹如何搭建,并介紹A100、H100、H200和B200這些GPU的特性。JAEALOT2025年4月23日隨著人工智能、大數(shù)據(jù)和高性能計(jì)算(HPC)的快速發(fā)展,市場上
    的頭像 發(fā)表于 04-24 11:08 ?3373次閱讀
    搭建<b class='flag-5'>算</b><b class='flag-5'>力</b>中心,從了解的<b class='flag-5'>GPU</b> 特性開始

    芯片的生態(tài)突圍與革命

    據(jù)的爆發(fā)式增長,大芯片已成為科技競爭的核心領(lǐng)域之一。 ? 大芯片的核心應(yīng)用場景豐富多樣。在人工智能訓(xùn)練與推理方面,大模型(如 GPT、Llama)的訓(xùn)練需要超大規(guī)模
    的頭像 發(fā)表于 04-13 00:02 ?3254次閱讀

    DeepSeek推動(dòng)AI需求:800G光模塊的關(guān)鍵作用

    集群的部署過程中,帶寬瓶頸成為制約發(fā)揮的關(guān)鍵因素,而光模塊的速率躍升成為突破這一瓶頸的核心
    發(fā)表于 03-25 12:00