91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫(xiě)文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

Oracle 云基礎(chǔ)設(shè)施提供新的 NVIDIA GPU 加速計(jì)算實(shí)例

NVIDIA英偉達(dá) ? 來(lái)源:未知 ? 2023-09-25 20:40 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

生成式 AI 和大語(yǔ)言模型(LLM)不斷推動(dòng)突破性創(chuàng)新,訓(xùn)練和推理對(duì)算力的需求也隨之急劇上升。

這些現(xiàn)代生成式 AI 應(yīng)用需要全棧加速計(jì)算,首先要有能夠快速、準(zhǔn)確處理大量工作負(fù)載的先進(jìn)基礎(chǔ)設(shè)施。為了幫助滿足這一需求,Oracle 云基礎(chǔ)設(shè)施(OCI)于近日宣布,在 OCI Compute 上全面提供 NVIDIA H100 Tensor Core GPU,同時(shí) NVIDIA L40S GPU 也即將在 OCI Compute 上推出。

wKgaomUo-1mAfOR9AACyoa3iSyI779.png

OCI 上的 NVIDIA

H100 Tensor Core GPU 實(shí)例

OCI Compute 裸機(jī)實(shí)例配備了具有NVIDIA Hopper架構(gòu)的 NVIDIA H100 GPU,不僅大幅提升了大規(guī)模 AI 和高性能計(jì)算的性能,也為各種工作負(fù)載提供了前所未有的性能、可擴(kuò)展性和通用性。

相比于NVIDIA A100 Tensor Core GPU,使用 NVIDIA H100 GPU 的企業(yè)可提升 30 倍的 AI 推理性能和 4 倍的 AI 訓(xùn)練性能。H100 GPU 專為資源密集型計(jì)算任務(wù)構(gòu)建,包括訓(xùn)練 LLM 和在運(yùn)行 LLM 的同時(shí)進(jìn)行推理等。

BM.GPU.H100.8 OCI Compute 機(jī)型配置(Shape)包含 8 顆 NVIDIA H100 GPU,每顆都具有 80GB 的 HBM2 GPU 內(nèi)存。8 顆 GPU 之間的 3.2TB/s 雙向帶寬使每顆 GPU 都能通過(guò) NVIDIA NVSwitchNVLink 4.0 技術(shù)與其他 7 顆 GPU 直接通信。該配置還包含 16 塊容量為 3.84TB 的本地 NVMe 硬盤(pán)、112 個(gè)內(nèi)核的第四代英特爾至強(qiáng) CPU 處理器以及 2TB 系統(tǒng)內(nèi)存。

簡(jiǎn)而言之,該機(jī)型配置針對(duì)企業(yè)最具挑戰(zhàn)性的工作負(fù)載進(jìn)行了優(yōu)化。

根據(jù)工作負(fù)載的時(shí)間線和規(guī)模,OCI Supercluster 使企業(yè)能夠通過(guò)高性能、超低延遲的網(wǎng)絡(luò),將所使用的 NVIDIA H100 GPU 從單個(gè)節(jié)點(diǎn)擴(kuò)展到多達(dá)數(shù)萬(wàn)顆 H100 GPU。

OCI 上的 NVIDIA L40S GPU 實(shí)例

NVIDIA L40S GPU 基于 NVIDIA Ada Lovelace 架構(gòu)構(gòu)建而成,是一款數(shù)據(jù)中心的通用 GPU,可以為 LLM 推理和訓(xùn)練、視覺(jué)計(jì)算以及視頻應(yīng)用提供驚人的多負(fù)載加速。搭載 NVIDIA L40S GPU 的 OCI Compute 裸機(jī)實(shí)將于今年晚些時(shí)候推出搶先體驗(yàn)版本,并于 2024 年初全面上市。 這些實(shí)例將作為 NVIDIA H100 和 A100 GPU 實(shí)例的替代方案,用于處理中小型 AI 工作負(fù)載以及圖形和視頻計(jì)算任務(wù)。相比于 NVIDIA A100,NVIDIA L40S GPU 可將生成式 AI 工作負(fù)載的性能提升 20%,將微調(diào) AI 模型方面的性能提升 70%。 BM.GPU.L40S.4 OCI Compute 機(jī)型配置包含 4 顆 NVIDIA L40S GPU,以及多達(dá) 112 個(gè)核的最新一代英特爾至強(qiáng) CPU、1TB 系統(tǒng)內(nèi)存、15.36TB 用于緩存數(shù)據(jù)的低延遲 NVMe 本地存儲(chǔ)和 400GB/s 集群網(wǎng)絡(luò)帶寬。創(chuàng)建該實(shí)例的目的是應(yīng)對(duì)從 LLM 訓(xùn)練、微調(diào)和推理一直到 NVIDIA Omniverse 工作負(fù)載以及工業(yè)數(shù)字化、3D 圖形和渲染、視頻轉(zhuǎn)碼和 FP32 HPC 等各種用例。

NVIDIA 與 OCI:企業(yè)級(jí) AI

OCI 與 NVIDIA 的協(xié)作,將為各種規(guī)模的企業(yè)帶來(lái)最先進(jìn)的 NVIDIA H100 和 L40S GPU 加速基礎(chǔ)設(shè)施,助力企業(yè)加入到這場(chǎng)生成式 AI 革命。僅訪問(wèn) NVIDIA GPU 加速實(shí)例可能還不夠。若要在 OCI Compute 上釋放 NVIDIA GPU 的最大潛能,就必須擁有一個(gè)最好的軟件層。NVIDIA AI Enterprise 通過(guò)專為底層 NVIDIA GPU 基礎(chǔ)設(shè)施優(yōu)化的開(kāi)源容器和框架,簡(jiǎn)化了企業(yè)級(jí)加速 AI 軟件的開(kāi)發(fā)和部署,所有這一切都離不開(kāi)支持服務(wù)的幫助。

如要了解更多信息,歡迎訪問(wèn)有關(guān) Oracle 云基礎(chǔ)設(shè)施(OCI)、OCI ComputeOracle 如何邁向 AI 以及 NVIDIA AI Platform 網(wǎng)頁(yè)。

Oracle 云基礎(chǔ)設(shè)施(OCI):https://www.oracle.com/cloud/

OCI Compute:https://www.oracle.com/cloud/compute/

Oracle 如何邁向 AI:https://www.oracle.com/artificial-intelligence/

NVIDIA AI Platform:https://www.nvidia.cn/ai-data-science/

GTC 2024 將于 2024 年 3 月 18 至 21 日在美國(guó)加州圣何塞會(huì)議中心舉行,線上大會(huì)也將同期開(kāi)放。點(diǎn)擊“閱讀原文”掃描下方海報(bào)二維碼,關(guān)注更多會(huì)議及活動(dòng)信息。

wKgaomUo-1qAVDoQAAFtccdApf0800.jpg


原文標(biāo)題:Oracle 云基礎(chǔ)設(shè)施提供新的 NVIDIA GPU 加速計(jì)算實(shí)例

文章出處:【微信公眾號(hào):NVIDIA英偉達(dá)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

聲明:本文內(nèi)容及配圖由入駐作者撰寫(xiě)或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問(wèn)題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • 英偉達(dá)
    +關(guān)注

    關(guān)注

    23

    文章

    4087

    瀏覽量

    99174

原文標(biāo)題:Oracle 云基礎(chǔ)設(shè)施提供新的 NVIDIA GPU 加速計(jì)算實(shí)例

文章出處:【微信號(hào):NVIDIA_China,微信公眾號(hào):NVIDIA英偉達(dá)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評(píng)論

    相關(guān)推薦
    熱點(diǎn)推薦

    Omdia:2025年第三季度,中國(guó)大陸基礎(chǔ)設(shè)施市場(chǎng)加速增長(zhǎng)24%

    2025 年第三季度,中國(guó)大陸基礎(chǔ)設(shè)施服務(wù)市場(chǎng)延續(xù)回升態(tài)勢(shì),同比增長(zhǎng)達(dá) 24%。隨著企業(yè)逐步從早期 AI 試驗(yàn)階段邁向規(guī)?;瘧?yīng)用,AI 日益成為核心基礎(chǔ)設(shè)施服務(wù)新增需求的主要驅(qū)動(dòng)力
    的頭像 發(fā)表于 02-14 20:12 ?1.1w次閱讀

    開(kāi)發(fā)者正加速向Arm架構(gòu)遷移

    人工智能 (AI) 正重塑數(shù)字格局,開(kāi)發(fā)者也正面臨全新挑戰(zhàn):基礎(chǔ)設(shè)施不僅要具備強(qiáng)大算力,還需兼具可擴(kuò)展性、成本效益和高能效等特征。當(dāng)前,亞馬遜科技、谷歌、微軟、Oracle Cloud
    的頭像 發(fā)表于 02-02 15:10 ?419次閱讀

    NVIDIA BlueField-4數(shù)據(jù)處理器重塑新型AI原生存儲(chǔ)基礎(chǔ)設(shè)施

    NVIDIA 宣布,NVIDIA BlueField?-4 數(shù)據(jù)處理器作為全棧 NVIDIA BlueField 平臺(tái)的一部分,為 NVIDIA 推理上下文記憶存儲(chǔ)平臺(tái)
    的頭像 發(fā)表于 01-09 10:33 ?469次閱讀

    NVIDIA Spectrum-X 以太網(wǎng)交換機(jī)助力 Meta 和 Oracle 加速網(wǎng)絡(luò)性能

    Facebook 開(kāi)放交換系統(tǒng)平臺(tái)。 Oracle 采用 Spectrum-X 以太網(wǎng)交換機(jī)構(gòu)建十億瓦級(jí)(Giga-Scale)AI 超級(jí)計(jì)算機(jī)。 NVIDIA 宣布 Meta 和 Orac
    的頭像 發(fā)表于 10-14 10:26 ?1797次閱讀
    <b class='flag-5'>NVIDIA</b> Spectrum-X 以太網(wǎng)交換機(jī)助力 Meta 和 <b class='flag-5'>Oracle</b> <b class='flag-5'>加速</b>網(wǎng)絡(luò)性能

    Lambda采用Supermicro NVIDIA Blackwell GPU服務(wù)器集群構(gòu)建人工智能工廠

    大批量 Supermicro GPU 優(yōu)化服務(wù)器(包括基于 NVIDIA Blackwell 的系統(tǒng)),以擴(kuò)展其人工智能基礎(chǔ)設(shè)施并向客戶交付高性能計(jì)算系統(tǒng)。此次合作于今年 6 月率先在
    的頭像 發(fā)表于 08-30 16:55 ?779次閱讀

    歐洲聯(lián)手NVIDIA打造AI基礎(chǔ)設(shè)施

    NVIDIA 于近日宣布,其正在攜手歐洲各國(guó)、科技和行業(yè)領(lǐng)導(dǎo)者,共同建造 NVIDIA Blackwell AI 基礎(chǔ)設(shè)施,以強(qiáng)化數(shù)字主權(quán)、支撐經(jīng)濟(jì)增長(zhǎng),并推動(dòng)歐洲大陸成為 AI 工業(yè)革命的領(lǐng)導(dǎo)者。
    的頭像 發(fā)表于 06-16 14:25 ?1428次閱讀

    硅谷GPU服務(wù)器是什么意思?使用指南詳解

    硅谷GPU服務(wù)器本質(zhì)上是一種IaaS(基礎(chǔ)設(shè)施即服務(wù))產(chǎn)品,它將物理服務(wù)器上的GPU資源通過(guò)虛擬化技術(shù)分割成可彈性調(diào)配的服務(wù)。與普通CP
    的頭像 發(fā)表于 06-16 09:41 ?591次閱讀

    維諦加速推進(jìn)人工智能基礎(chǔ)設(shè)施演進(jìn),助力NVIDIA 800 VDC 電源架構(gòu)發(fā)布

    為適配下一代AI工廠的需求,維諦規(guī)劃在2026年推出800VDC解決方案,支撐英偉達(dá)NVIDIA整機(jī)柜計(jì)算平臺(tái)。作為全球領(lǐng)先的關(guān)鍵數(shù)字基礎(chǔ)設(shè)施及連續(xù)性解決方案提供商,維諦(Vertiv
    的頭像 發(fā)表于 05-22 14:18 ?1099次閱讀
    維諦<b class='flag-5'>加速</b>推進(jìn)人工智能<b class='flag-5'>基礎(chǔ)設(shè)施</b>演進(jìn),助力<b class='flag-5'>NVIDIA</b> 800 VDC 電源架構(gòu)發(fā)布

    NVIDIA攜手谷歌助力企業(yè)引入代理式AI

    谷歌 Gemini 模型即將支持本地部署,可通過(guò)搭載 NVIDIA Blackwell 架構(gòu)的基礎(chǔ)設(shè)施,在 Google 分布式上運(yùn)行 NVIDIA 機(jī)密
    的頭像 發(fā)表于 04-11 16:32 ?1206次閱讀

    NVIDIA虛擬GPU 18.0版本的亮點(diǎn)

    NVIDIA 虛擬 GPU(vGPU)技術(shù)可在虛擬桌面基礎(chǔ)設(shè)施(VDI)中解鎖 AI 功能,使其比以往更加強(qiáng)大、用途更加廣泛。vGPU 通過(guò)為各種虛擬化環(huán)境中的 AI 驅(qū)動(dòng)工作負(fù)載提供
    的頭像 發(fā)表于 04-07 11:28 ?1430次閱讀

    PoE交換機(jī)如何助力智慧城市基礎(chǔ)設(shè)施建設(shè)?

    隨著全球城市化的加速發(fā)展,智慧城市的概念正逐步成為現(xiàn)實(shí)。通過(guò)技術(shù)手段提升居民生活質(zhì)量、優(yōu)化城市運(yùn)營(yíng)并促進(jìn)可持續(xù)發(fā)展已成為趨勢(shì)。彈性且高效的網(wǎng)絡(luò)是智慧城市基礎(chǔ)設(shè)施的關(guān)鍵支撐,而以太網(wǎng)供電(PoE
    發(fā)表于 03-25 10:20

    英偉達(dá)GTC2025亮點(diǎn):OracleNVIDIA合作助力企業(yè)加速代理式AI推理

    基礎(chǔ)設(shè)施以及生成式 AI 服務(wù)首次實(shí)現(xiàn)集成,以幫助全球企業(yè)組織加速創(chuàng)建代理式 AI 應(yīng)用。 此次 Oracle Cloud Infrastructure (OCI) 與 NVIDIA
    的頭像 發(fā)表于 03-21 12:01 ?1430次閱讀
    英偉達(dá)GTC2025亮點(diǎn):<b class='flag-5'>Oracle</b>與<b class='flag-5'>NVIDIA</b>合作助力企業(yè)<b class='flag-5'>加速</b>代理式AI推理

    英偉達(dá)GTC2025亮點(diǎn):NVIDIA與行業(yè)領(lǐng)先存儲(chǔ)企業(yè)共同推出面向AI時(shí)代的新型企業(yè)基礎(chǔ)設(shè)施

    的參考設(shè)計(jì),領(lǐng)先的存儲(chǔ)提供商可用來(lái)構(gòu)建全新的 AI 基礎(chǔ)設(shè)施,以滿足 AI 推理工作負(fù)載的嚴(yán)苛要求:即企業(yè)存儲(chǔ)平臺(tái),搭載由 NVIDIA 加速計(jì)算
    的頭像 發(fā)表于 03-21 09:42 ?1320次閱讀

    OracleNVIDIA 合作助力企業(yè)加速代理式 AI 推理

    ——OracleNVIDIA 今日宣布,NVIDIA 加速計(jì)算和推理軟件與 Oracle
    發(fā)表于 03-19 15:24 ?577次閱讀
    <b class='flag-5'>Oracle</b> 與 <b class='flag-5'>NVIDIA</b> 合作助力企業(yè)<b class='flag-5'>加速</b>代理式 AI 推理

    NVIDIA 與行業(yè)領(lǐng)先的存儲(chǔ)企業(yè)共同推出面向 AI 時(shí)代的新型企業(yè)基礎(chǔ)設(shè)施

    存儲(chǔ)提供商構(gòu)建搭載 AI 查詢智能體的基礎(chǔ)設(shè)施,利用 NVIDIA 計(jì)算、網(wǎng)絡(luò)和軟件,針對(duì)復(fù)雜查詢進(jìn)行推理并快速生成準(zhǔn)確響應(yīng) ? 美國(guó)加利福尼亞州圣何塞 —— GTC —— 太平洋時(shí)間
    發(fā)表于 03-19 10:11 ?498次閱讀
    <b class='flag-5'>NVIDIA</b> 與行業(yè)領(lǐng)先的存儲(chǔ)企業(yè)共同推出面向 AI 時(shí)代的新型企業(yè)<b class='flag-5'>基礎(chǔ)設(shè)施</b>