91欧美超碰AV自拍|国产成年人性爱视频免费看|亚洲 日韩 欧美一厂二区入|人人看人人爽人人操aV|丝袜美腿视频一区二区在线看|人人操人人爽人人爱|婷婷五月天超碰|97色色欧美亚州A√|另类A√无码精品一级av|欧美特级日韩特级

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

使用 NVIDIA DOCA 2.2 加速數(shù)據(jù)中心工作負(fù)載和 AI 應(yīng)用程序

NVIDIA英偉達(dá) ? 來源:未知 ? 2023-09-05 19:40 ? 次閱讀
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

NVIDIA DOCA SDK 和加速框架為開發(fā)者提供了豐富的庫、驅(qū)動程序和 API,以便為 NVIDIA BlueField DPU 和 ConnectX 智能網(wǎng)卡創(chuàng)建高性能應(yīng)用程序和服務(wù)。它推動了數(shù)據(jù)中心的創(chuàng)新,實(shí)現(xiàn)了應(yīng)用程序的快速部署。

憑借全面的功能,NVIDIA DOCA 可為基于 BlueField DPU 進(jìn)行開發(fā)的開發(fā)人員提供大規(guī)模加速數(shù)據(jù)中心工作負(fù)載和人工智能應(yīng)用程序的一站式服務(wù)。

NVIDIA DOCA 現(xiàn)已普遍可用,已使超過 10,000 名開發(fā)者從中受益,并使更廣泛的開發(fā)者社區(qū)利用 BlueField DPU 平臺實(shí)現(xiàn)創(chuàng)新的人工智能和云服務(wù)。

NVIDIA DOCA 2.2 的新增和增強(qiáng)功能

NVIDIA DOCA 2.2 引入了新增功能和增強(qiáng)功能,用于卸載、加速和隔離數(shù)據(jù)中心內(nèi)的網(wǎng)絡(luò)、存儲、安全和基礎(chǔ)設(shè)施管理。

視頻 1:觀看 NVIDIA DOCA 軟件框架簡介

編程

NVIDIA BlueField-3 DPU 與其板載專用數(shù)據(jù)路徑加速器(DPA)和 DOCA SDK 框架相結(jié)合,提供了一個(gè)無與倫比的平臺?,F(xiàn)在,開發(fā)者可以創(chuàng)建需要高吞吐量和低延遲的高性能且可擴(kuò)展的網(wǎng)絡(luò)應(yīng)用程序。

數(shù)據(jù)路徑加速器

為利用 BlueField-3 DPA 編程子系統(tǒng),NVIDIA DOCA 2.2 提供了幾項(xiàng)增強(qiáng)功能。DOCA DPA 是 DOCA SDK 開發(fā)包的一個(gè)新計(jì)算子系統(tǒng)部分,它提供了一個(gè)編程模型,用于卸載在 DPA 處理器上運(yùn)行的以通信為中心的用戶代碼。DOCA DPA 有助于卸載 CPU 流量,并通過 DPU 加速提高性能。

wKgaomT3FMmAF382AADXPghwo8w893.jpg

圖 1:NVIDIA BlueField-3 DPU 流入和流出流量

DOCA DPA 還提供了顯著的開發(fā)優(yōu)勢,包括在創(chuàng)建自定義模擬和擁塞控制時(shí)具有更高的靈活性。定制的擁塞控制對于人工智能工作流至關(guān)重要,可以實(shí)現(xiàn)性能隔離、提高公平性,并防止在有損網(wǎng)絡(luò)上的丟包。

DOCA 2.2 版本引入了以下 SDK:

  • DOCA-FlexIO:這是一個(gè)用于 DPA 編程的低級別 SDK。具體來說,DOCA FlexIO 驅(qū)動程序提供了用于通過 DPA 管理和運(yùn)行代碼的 API。

  • DOCA-PCC:這是一個(gè)用于擁塞控制開發(fā)的 SDK,它使 CSP 和企業(yè)客戶能夠創(chuàng)建自己的擁塞控制算法,從而通過更高的帶寬和更低的延遲來提高網(wǎng)絡(luò)運(yùn)營的穩(wěn)定性和效率。

NVIDIA 還提供必要的工具鏈、示例和輔助資料,以加快和支持開發(fā)工作。請注意,NVIDIA DOCA DPA 可在 DPU 模式和 NIC 模式下使用。

wKgaomT3FMmAQydyAAGP1lgfmaA045.png

圖 2:DOCA-PCC 提供更高的帶寬和更低的延遲

網(wǎng)絡(luò)

NVIDIA DOCA 和 BlueField-3 DPU 通過一個(gè)全面、開放的開發(fā)平臺,共同開發(fā)出具有突破性網(wǎng)絡(luò)性能的應(yīng)用程序。NVIDIA DOCA 包括一系列驅(qū)動程序、庫、工具和示例應(yīng)用程序,并在不斷發(fā)展。此版本提供了以下其他功能,以支持網(wǎng)絡(luò)應(yīng)用程序的開發(fā)。

NVIDIA DOCA Flow

借助 NVIDIA DOCA Flow,用戶可以定義和控制網(wǎng)絡(luò)流量,實(shí)現(xiàn)網(wǎng)絡(luò)策略,并以編程方式管理網(wǎng)絡(luò)資源。它提供網(wǎng)絡(luò)虛擬化、遙測、負(fù)載平衡、安全強(qiáng)制和流量監(jiān)控等功能。這些功能有助于以低延遲處理高數(shù)據(jù)包工作負(fù)載,節(jié)省 CPU 資源并降低功耗。

此版本包括以下新功能,可為云部署帶來即時(shí)優(yōu)勢:

  • 支持隧道卸載 - GENEVE 和 GRE:提供增強(qiáng)的安全性、可見性、可擴(kuò)展性、靈活性和可擴(kuò)展性,是站點(diǎn)通信、網(wǎng)絡(luò)隔離和多租戶的構(gòu)建塊。具體而言,GRE 隧道用于連接單獨(dú)的網(wǎng)絡(luò)并建立安全的 VPN 通信,支持 Overlay 網(wǎng)絡(luò),提供協(xié)議靈活性,并實(shí)現(xiàn)流量工程。

  • 支持具有 bps / pps 選項(xiàng)的每個(gè)流計(jì)量:在云環(huán)境中,監(jiān)控 / 分析流量(即測量帶寬或數(shù)據(jù)包速率)、管理 QoS(即執(zhí)行限制)或增強(qiáng)安全性(即阻止拒絕服務(wù)攻擊)都至關(guān)重要。

  • 增強(qiáng)的鏡像功能(FDB / 交換機(jī)域):這項(xiàng)新增功能不僅用于監(jiān)控、故障排除、安全分析和性能優(yōu)化,還能為鏡像工作負(fù)載提供更高的 CPU 利用率。

OVS-DOCA (Beta 版)

OVS-DOCA 是適用于 NVIDIA 網(wǎng)絡(luò)服務(wù)的高度優(yōu)化虛擬交換機(jī)。其極其高效的設(shè)計(jì)通過 NVIDIA 網(wǎng)卡或 DPU 提升了下一代性能和規(guī)?!,F(xiàn)在,OVS-DOCA 可以在 DOCA 中用于 DPU,也可以在 DOCA 中用于主機(jī)(二進(jìn)制文件和源代碼)。

wKgaomT3FMqAcILHAACNw5-YgMM335.png

圖 3:OVS- DOCA 針對 NVIDIA 網(wǎng)絡(luò)服務(wù)進(jìn)行了優(yōu)化

基于 Open vSwitch,OVS-DOCA 提供了相同的北向 API、OpenFlow、CLI 和數(shù)據(jù)接口,為 OVS 提供了一種替代方案。使用 OVS-DOCA 可以更快地實(shí)現(xiàn)未來 NVIDIA 創(chuàng)新的網(wǎng)絡(luò)功能。

BlueField-3(增強(qiáng)的)NIC 模式(Beta 版)

此版本受益于增強(qiáng)的 BlueField-3 NIC 模式,目前處于 Beta 版。與卸載、加速和隔離都可用的 BlueField-3 DPU 模式不同,BlueField-3 NIC 模式僅提供加速功能。

wKgaomT3FMuAPItjAAIbmHs5-Uo009.png

圖 4:BlueField-3(增強(qiáng)的)NIC 模式

在繼續(xù)利用 BlueField 低功耗和低計(jì)算密集型 SKU 的同時(shí),增強(qiáng)的 BlueField-3 NIC 模式比當(dāng)前的 ConnectX BlueField-2 NIC 模式具有許多優(yōu)勢,包括:

  • 使用本地 DPU 內(nèi)存大規(guī)模實(shí)現(xiàn)更高的性能和更低的延遲

  • 采用可編程擁塞控制(PCC)的高性能 RDMA

  • 利用 DPA 和其他 BlueField 加速器實(shí)現(xiàn)可編程性

  • 通過設(shè)備認(rèn)證和卡載 BMC 實(shí)現(xiàn)強(qiáng)大平臺安全性

請注意,BlueField-3 NIC 模式將作為一種軟件模式進(jìn)行產(chǎn)品化,而非單獨(dú)的 SKU,以實(shí)現(xiàn)未來使用 DPU 模式。因此,BlueField-3 NIC 模式是所有 BlueField-3 SKU 上都可以使用的且完全支持的軟件功能。對于在 NIC 模式下運(yùn)行的任何 BlueField-3 DPU,DPA 可編程性要求在主機(jī)上安裝 DOCA 和活躍的基于主機(jī)服務(wù)。

服務(wù)

NVIDIA DOCA 服務(wù)是一種基于容器化 DOCA 程序,為特定用例提供端到端解決方案。這些服務(wù)可以通過 NVIDIA NGC 獲得,從而可以輕松地將它們直接部署到 DPU。DOCA 2.2 提供了更好的控制能力,現(xiàn)在可以離線安裝 DOCA 服務(wù)。

NGC 離線服務(wù)安裝

從 NGC 安裝 DOCA 服務(wù)需要互聯(lián)網(wǎng)連接。然而,許多客戶在沒有互聯(lián)網(wǎng)接入的安全生產(chǎn)環(huán)境中運(yùn)營。因此,我們提供了“非連接”部署選項(xiàng),可以在完全安全的生產(chǎn)環(huán)境中安裝服務(wù),從而簡化流程,并避免了每臺服務(wù)器都需要連接才能完成安裝過程的情況。

例如,考慮在生產(chǎn)環(huán)境中安裝 DOCA 遙測服務(wù)(DTS)以支持計(jì)量收集。整個(gè)安裝過程只需兩個(gè)步驟即可完成:

  • 步驟 1:在已連接的服務(wù)器上下載 NGC

  • 步驟 2:使用內(nèi)部安全交付進(jìn)行離線安裝

總結(jié)

NVIDIA DOCA 2.2 在推動數(shù)據(jù)中心創(chuàng)新以及為人工智能應(yīng)用而改造云和企業(yè)數(shù)據(jù)中心網(wǎng)絡(luò)方面發(fā)揮著關(guān)鍵和不可或缺的作用。通過為 BlueField DPU 提供全面的 SDK 和加速框架,DOCA 為開發(fā)者提供了強(qiáng)大的庫、驅(qū)動程序和 API,從而能夠創(chuàng)建高性能的應(yīng)用程序和服務(wù)。

DOCA 2.2 有了一些新增功能和增強(qiáng)功能,可以立即獲得許多優(yōu)勢。除了通過 DPU 加速實(shí)現(xiàn)的性能提升外,DOCA-FlexIO 和 DOCA-PCC SDK 的加入為開發(fā)者提供了以人工智能為中心的加速計(jì)算優(yōu)勢。這些 SDK 能夠創(chuàng)建自定義模擬和算法,縮短上市時(shí)間,并顯著改善整體開發(fā)體驗(yàn)。

此外,NVIDIA DOCA FLOW 和 OVS-DOCA 的網(wǎng)絡(luò)特定更新為軟件定義的網(wǎng)絡(luò)和安全解決方案提供了簡化的交付途徑。這些功能提高了效率,增強(qiáng)了可見性、可擴(kuò)展性和靈活性,對于構(gòu)建復(fù)雜而安全的基礎(chǔ)架構(gòu)至關(guān)重要。

DOCA 為數(shù)據(jù)中心創(chuàng)新、人工智能應(yīng)用加速和強(qiáng)大的網(wǎng)絡(luò)基礎(chǔ)設(shè)施做出了廣泛貢獻(xiàn),是 NVIDIA 人工智能云服務(wù)的重要組成部分。隨著行業(yè)朝著更復(fù)雜、更苛刻的計(jì)算需求發(fā)展,DOCA 的不斷發(fā)展以及與尖端技術(shù)的集成將進(jìn)一步鞏固其作為開創(chuàng)性平臺的地位,為數(shù)據(jù)中心和人工智能驅(qū)動的解決方案的未來賦能。

掃描下方二維碼立即訪問 DOCA。

wKgaomT3FMuAcjGYAAADAXCvQCE658.png


wKgaomT3FMuAA6QWAABAFFJlyZc514.gif ?

更多精彩內(nèi)容 利用 NVIDIA DOCA Flow 實(shí)現(xiàn) DPU 加速數(shù)據(jù)包轉(zhuǎn)向邏輯
使用 NVIDIA DOCA GPUNetIO 實(shí)現(xiàn)實(shí)時(shí)網(wǎng)絡(luò)處理功能
利用 NVIDIA DOCA 2.0 改變 IPsec 的部署


原文標(biāo)題:使用 NVIDIA DOCA 2.2 加速數(shù)據(jù)中心工作負(fù)載和 AI 應(yīng)用程序

文章出處:【微信公眾號:NVIDIA英偉達(dá)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。


聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報(bào)投訴
  • 英偉達(dá)
    +關(guān)注

    關(guān)注

    23

    文章

    4087

    瀏覽量

    99199

原文標(biāo)題:使用 NVIDIA DOCA 2.2 加速數(shù)據(jù)中心工作負(fù)載和 AI 應(yīng)用程序

文章出處:【微信號:NVIDIA_China,微信公眾號:NVIDIA英偉達(dá)】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏
加入交流群
微信小助手二維碼

掃碼添加小助手

加入工程師交流群

    評論

    相關(guān)推薦
    熱點(diǎn)推薦

    Cadence 借助 NVIDIA DGX SuperPOD 模型擴(kuò)展數(shù)字孿生平臺庫,加速 AI 數(shù)據(jù)中心部署與運(yùn)營

    [1]? 利用搭載 DGX GB200 系統(tǒng)的 NVIDIA DGX SuperPOD[2]?數(shù)字孿生系統(tǒng)實(shí)現(xiàn)了庫的重大擴(kuò)展 。借助 NVIDIA 高性能加速計(jì)算平臺的新模型,數(shù)據(jù)中心
    的頭像 發(fā)表于 09-15 15:19 ?1512次閱讀

    如何加速實(shí)時(shí)工作負(fù)載

    對于需要實(shí)時(shí)響應(yīng)的數(shù)據(jù)中心工作負(fù)載,性能不僅是指原始吞吐量或處理能力。挑戰(zhàn)在于:在保持吞吐量和能效的同時(shí),實(shí)現(xiàn)確定性時(shí)延。
    的頭像 發(fā)表于 09-10 15:36 ?709次閱讀

    睿海光電以高效交付與廣泛兼容助力AI數(shù)據(jù)中心800G光模塊升級

    NVIDIA Quantum-2交換機(jī)等主流設(shè)備。 平滑擴(kuò)展:與現(xiàn)有400G/100G設(shè)備無縫互通,降低數(shù)據(jù)中心升級成本。 多場景覆蓋:從AI訓(xùn)練集群的“大象流”到AI推理的碎片化流量
    發(fā)表于 08-13 19:01

    加速AI未來,睿海光電800G OSFP光模塊重構(gòu)數(shù)據(jù)中心互聯(lián)標(biāo)準(zhǔn)

    定義數(shù)據(jù)中心互聯(lián)的新范式。 一、技術(shù)實(shí)力:800G OSFP光模塊的卓越性能表現(xiàn) 睿海光電800G OSFP光模塊系列采用行業(yè)領(lǐng)先的PAM4調(diào)制技術(shù),具備以下核心優(yōu)勢: 超高速率 :單模傳輸速率達(dá)
    發(fā)表于 08-13 16:38

    NVIDIA DOCA 3.0版本的亮點(diǎn)解析

    NVIDIA DOCA 框架已發(fā)展成為新一代 AI 基礎(chǔ)設(shè)施的重要組成部分。從初始版本到備受期待的 NVIDIA DOCA 3.0 發(fā)布,每
    的頭像 發(fā)表于 07-04 14:27 ?1248次閱讀
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>DOCA</b> 3.0版本的亮點(diǎn)解析

    面向半定制AI基礎(chǔ)架構(gòu)的NVIDIA NVLink Fusion技術(shù)

    為了高效應(yīng)對 AI 工作負(fù)載數(shù)據(jù)中心正在被重構(gòu)。這是一項(xiàng)非常復(fù)雜的工作,因此,NVIDIA
    的頭像 發(fā)表于 06-06 14:59 ?1357次閱讀
    面向半定制<b class='flag-5'>AI</b>基礎(chǔ)架構(gòu)的<b class='flag-5'>NVIDIA</b> NVLink Fusion技術(shù)

    第三屆NVIDIA DPU黑客松開啟報(bào)名

    碰撞的絕佳機(jī)會。本次競賽采用開放式主題,參與者將通過 NVIDIA DOCA 軟件框架構(gòu)建創(chuàng)新的加速應(yīng)用程序,充分挖掘 NVIDIA Blu
    的頭像 發(fā)表于 05-27 10:16 ?902次閱讀

    NVIDIA將為每家AI工廠提供網(wǎng)絡(luò)安全

    NVIDIA DOCA Argus 框架可檢測 AI 工作負(fù)載中的威脅并對之做出響應(yīng),同時(shí)與企業(yè)安全系統(tǒng)無縫集成,從而提供實(shí)時(shí)洞察。
    的頭像 發(fā)表于 05-07 15:11 ?978次閱讀
    <b class='flag-5'>NVIDIA</b>將為每家<b class='flag-5'>AI</b>工廠提供網(wǎng)絡(luò)安全

    是德科技推出用于大規(guī)模AI數(shù)據(jù)中心的系列解決方案

    科技(NYSE: KEYS )發(fā)布Keysight AI(KAI),這是一系列端到端的解決方案,旨在幫助客戶通過使用真實(shí)世界的AI工作負(fù)載仿真從而驗(yàn)證
    的頭像 發(fā)表于 04-10 08:51 ?818次閱讀
    是德科技推出用于大規(guī)模<b class='flag-5'>AI</b><b class='flag-5'>數(shù)據(jù)中心</b>的系列解決方案

    是德科技推出AI數(shù)據(jù)中心構(gòu)建器以驗(yàn)證和優(yōu)化網(wǎng)絡(luò)架構(gòu)和主機(jī)設(shè)計(jì)

    : KEYS )推出Keysight AI (KAI)數(shù)據(jù)中心構(gòu)建器,這是一款先進(jìn)的軟件套件,通過模擬真實(shí)工作負(fù)載來評估新算法、組件和協(xié)議對AI
    的頭像 發(fā)表于 04-10 08:50 ?650次閱讀

    是德科技推出AI數(shù)據(jù)中心構(gòu)建器

    是德科技(NYSE:KEYS)推出Keysight AI (KAI)數(shù)據(jù)中心構(gòu)建器,這是一款先進(jìn)的軟件套件,通過模擬真實(shí)工作負(fù)載來評估新算法、組件和協(xié)議對
    的頭像 發(fā)表于 04-07 11:06 ?1007次閱讀

    適用于數(shù)據(jù)中心AI時(shí)代的800G網(wǎng)絡(luò)

    和性能隔離能力,以保障不同用戶任務(wù)互不干擾。 分布式AI計(jì)算與網(wǎng)絡(luò)架構(gòu)設(shè)計(jì) 分布式計(jì)算已成為AI訓(xùn)練的主流方式,通過將工作負(fù)載分配到多個(gè)GPU節(jié)點(diǎn)并行處理,以
    發(fā)表于 03-25 17:35

    NVIDIA加速的Apache Spark助力企業(yè)節(jié)省大量成本

    隨著 NVIDIA 推出 Aether 項(xiàng)目,通過采用 NVIDIA 加速的 Apache Spark 企業(yè)得以自動加速數(shù)據(jù)中心規(guī)模的分析
    的頭像 發(fā)表于 03-25 15:09 ?1168次閱讀
    <b class='flag-5'>NVIDIA</b><b class='flag-5'>加速</b>的Apache Spark助力企業(yè)節(jié)省大量成本

    華為全新升級星河AI數(shù)據(jù)中心網(wǎng)絡(luò)

    在華為中國合作伙伴大會2025期間,以 “星河AI數(shù)據(jù)中心網(wǎng)絡(luò),賦AI時(shí)代新動能”為主題的數(shù)據(jù)中心網(wǎng)絡(luò)分論壇圓滿落幕。本次論壇匯聚了來自全國的300多位客戶和伙伴,共同探討
    的頭像 發(fā)表于 03-24 14:46 ?1099次閱讀

    Cadence顛覆AI數(shù)據(jù)中心設(shè)計(jì)

    日前舉辦的英偉達(dá) GTC 2025 開發(fā)者大會匯聚了眾多行業(yè)精英,共同探討人工智能的未來。而人工智能正在重塑全球數(shù)據(jù)中心的格局。據(jù)預(yù)測,未來將有 1 萬億美元用于 AI 驅(qū)動的數(shù)據(jù)中心升級。然而
    的頭像 發(fā)表于 03-21 15:43 ?1169次閱讀