RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

NVIDIA NGC目錄中的GPU優(yōu)化容器

NVIDIA英偉達企業(yè)解決方案 ? 來源:NVIDIA英偉達企業(yè)解決方案 ? 作者:NVIDIA英偉達企業(yè)解 ? 2022-07-01 11:21 ? 次閱讀

借助 NVIDIA NGC 目錄中的 GPU 優(yōu)化容器,更快地開發(fā)和部署應(yīng)用。

什么是容器?

容器是一種便攜式軟件單元,可將應(yīng)用及其所有依賴項合并為一個軟件包,該軟件包不受底層主機操作系統(tǒng)限制。這樣無需再構(gòu)建復(fù)雜的環(huán)境,并簡化了應(yīng)用開發(fā)到部署的過程。

NVIDIA NGC 目錄包含一系列用于深度學(xué)習(xí)、機器學(xué)習(xí)、可視化和高性能計算(HPC)應(yīng)用的 GPU 優(yōu)化容器,這些容器均已經(jīng)過了性能、安全性和可擴展性測試。

NGC 目錄中的容器的優(yōu)勢

輕松部署

內(nèi)置庫和依賴項可讓您輕松部署和運行應(yīng)用。

加快訓(xùn)練速度

TensorFlow 和 PyTorch 等 NVIDIA AI 容器每月會提供針對性能優(yōu)化的更新版本,以便加快 AI 訓(xùn)練和推理速度。

運行位置不受限制

在 bare metal、虛擬機(VM)和 Kubernetes 上,將容器部署在任意位置(云端、內(nèi)部私有云和邊緣)的多 GPU/多節(jié)點系統(tǒng)上。

放心部署

容器經(jīng)過常見漏洞和暴露(CVE)掃描(附有安全報告),并通過 NVIDIA AI Enterprise 得到了可選的企業(yè)支持。

性能優(yōu)化

NVIDIA 構(gòu)建的 Docker 容器每月都會更新,第三方軟件也會定期更新,以提供所需的功能,便于您從現(xiàn)有基礎(chǔ)架構(gòu)中獲得出色性能,并縮短找出解決方案的時間。

借助 BERT-Large 進行自然語言處理

BERT-Large 利用 VoltaV100 和 Ampere A100 GPU 上的混合精度運算和 Tensor Core,在保持目標準確性的同時縮短訓(xùn)練時間。

在單節(jié)點的 8x V100 (16GB) 和 A100 (40GB) 上使用 TensorFlow 時,BERT-Large 和訓(xùn)練的性能表現(xiàn)?;旌暇取ERT 的批量大?。? (V100)、24(A100)

用于圖像處理的 ResNet50 v1.5

此模型使用 Volta、Turing 和 NVIDIA Ampere GPU 體系架構(gòu)上的 Tensor Core 進行混合精度訓(xùn)練,以加快訓(xùn)練速度。

在單節(jié)點 8x V100 (16GB) 和 A100 (40GB) 上使用 TensorFlow 時,ResNet 50 的性能表現(xiàn)。混合精度。ResNet50 批量大?。?6

用于深度學(xué)習(xí)的 Matlab

持續(xù)開發(fā) Matlab 深度學(xué)習(xí)容器可提高訓(xùn)練和推理性能。

Windows 10,Intel Xeon E5-2623 @2.4GHz,NVIDIA Titan V 12GB GPU

用于各種工作負載的容器

AI 容器

TensorFlow

TensorFlow 是一個用于高性能數(shù)值計算的開源軟件庫。

PyTorch

PyTorch 是具有 Python 前端的 GPU 加速型張量計算框架。

NVIDIA Triton 推理服務(wù)器

NVIDIA Triton 推理服務(wù)器是一種開源推理解決方案,可更大限度地提高 GPU 的利用率和性能。

NVIDIA TensorRT

NVIDIA TensorRT 是一個C++ 庫,可加快 NVIDIA GPU 上的高性能推理。

應(yīng)用框架

NVIDIA Clara

用于醫(yī)療成像的 NVIDIA Clara Train 是一個應(yīng)用框架,包含超過 20 個先進的預(yù)訓(xùn)練模型、遷移學(xué)習(xí)和聯(lián)合學(xué)習(xí)工具、AutoML,以及 AI 輔助的標記數(shù)據(jù)。

DeepStream

DeepStream 是一款流分析工具包,可用于基于 AI 的視頻、音頻和圖像理解和多傳感器處理。

NVIDIA Riva

NVIDIA Riva 是一個應(yīng)用框架,適用于在 GPU 上提供實時性能的多模態(tài)對話式 AI 服務(wù)。

Merlin Training

Merlin HugeCTR 是 NVIDIA Merlin 的組件,是一款專為推薦系統(tǒng)設(shè)計的深度神經(jīng)網(wǎng)絡(luò)訓(xùn)練框架。

HPC 容器

NAMD

NAMD 是一段并行分子動力學(xué)代碼,旨在實現(xiàn)生物大分子系統(tǒng)的高性能模擬。

GROMACS

GROMACS 是一款熱門的分子動力學(xué)應(yīng)用,用于模擬蛋白質(zhì)和脂質(zhì)。

Relion

Relion 采用經(jīng)驗貝葉斯方法分析低溫電子顯微鏡(cryo EM)。

NVIDIA HPC SDK

NVIDIA HPC SDK 是編譯器、庫和工具的綜合套件,用于構(gòu)建、部署和管理 HPC 應(yīng)用。

點擊閱讀原文,了解更多 AI 和 HPC 容器相關(guān)內(nèi)容

NVIDIA 深度學(xué)習(xí)培訓(xùn)中心

我們的 NVIDIA 深度學(xué)習(xí)培訓(xùn)中心還推出了 AI 和 HPC 容器及 NGC 相關(guān)課程,您可以復(fù)制鏈接查看課程詳情。

使用容器實現(xiàn)高性能計算

學(xué)習(xí)使用容器化環(huán)境開發(fā)高性能計算(HPC)應(yīng)用程序,降低編碼的復(fù)雜性和可移植性,從而提高開發(fā)效率。

原文標題:DevZone | AI和HPC容器

文章出處:【微信公眾號:NVIDIA英偉達企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

審核編輯:湯梓紅

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    4978

    瀏覽量

    102987
  • gpu
    gpu
    +關(guān)注

    關(guān)注

    28

    文章

    4729

    瀏覽量

    128890
  • 容器
    +關(guān)注

    關(guān)注

    0

    文章

    495

    瀏覽量

    22060

原文標題:DevZone | AI和HPC容器

文章出處:【微信號:NVIDIA-Enterprise,微信公眾號:NVIDIA英偉達企業(yè)解決方案】歡迎添加關(guān)注!文章轉(zhuǎn)載請注明出處。

收藏 人收藏

    評論

    相關(guān)推薦

    《CST Studio Suite 2024 GPU加速計算指南》

    的各個方面,包括硬件支持、操作系統(tǒng)支持、許可證、GPU計算的啟用、NVIDIA和AMD GPU的詳細信息以及相關(guān)的使用指南和故障排除等內(nèi)容。 1. 硬件支持 - NVIDIA
    發(fā)表于 12-16 14:25

    Supermicro推出直接液冷優(yōu)化NVIDIA Blackwell解決方案

    機架NVIDIA HGX B200 8-GPU系統(tǒng)數(shù)量,與Supermicro目前領(lǐng)先業(yè)界的搭載NVIDIA HGX H100和H200的液冷型SuperCluster相比,
    發(fā)表于 11-25 10:39 ?310次閱讀
    Supermicro推出直接液冷<b class='flag-5'>優(yōu)化</b>的<b class='flag-5'>NVIDIA</b> Blackwell解決方案

    如何構(gòu)建及優(yōu)化GPU云網(wǎng)絡(luò)

    并從計算節(jié)點成本優(yōu)化、集群網(wǎng)絡(luò)與拓撲的選擇等方面論述如何構(gòu)建及優(yōu)化GPU云網(wǎng)絡(luò)。
    的頭像 發(fā)表于 11-06 16:03 ?347次閱讀
    如何構(gòu)建及<b class='flag-5'>優(yōu)化</b><b class='flag-5'>GPU</b>云網(wǎng)絡(luò)

    AMD與NVIDIA GPU優(yōu)缺點

    在圖形處理單元(GPU)市場,AMD和NVIDIA是兩大主要的競爭者,它們各自推出的產(chǎn)品在性能、功耗、價格等方面都有著不同的特點和優(yōu)勢。 一、性能 GPU的性能是用戶最關(guān)心的指標之一。在高端市場
    的頭像 發(fā)表于 10-27 11:15 ?639次閱讀

    暴漲預(yù)警!NVIDIA GPU供應(yīng)大跳水

    gpu
    jf_02331860
    發(fā)布于 :2024年07月26日 09:41:42

    NVIDIA全面轉(zhuǎn)向開源GPU內(nèi)核模塊

    借助 R515 驅(qū)動程序,NVIDIA 于 2022 年 5 月發(fā)布了一套開源的 Linux GPU 內(nèi)核模塊,該模塊采用雙許可證,即 GPL 和 MIT 許可。初始版本主要面向數(shù)據(jù)中心計算 GPU,而 GeForce 和工作站
    的頭像 發(fā)表于 07-25 09:56 ?411次閱讀
    <b class='flag-5'>NVIDIA</b>全面轉(zhuǎn)向開源<b class='flag-5'>GPU</b>內(nèi)核模塊

    NVIDIA加速微軟最新的Phi-3 Mini開源語言模型

    NVIDIA 宣布使用 NVIDIA TensorRT-LLM 加速微軟最新的 Phi-3 Mini 開源語言模型。TensorRT-LLM 是一個開源庫,用于優(yōu)化從 PC 到云端的 NVID
    的頭像 發(fā)表于 04-28 10:36 ?547次閱讀

    NVIDIA推出兩款基于NVIDIA Ampere架構(gòu)的全新臺式機GPU

    兩款 NVIDIA Ampere 架構(gòu) GPU 為工作站帶來實時光線追蹤功能和生成式 AI 工具支持。
    的頭像 發(fā)表于 04-26 11:25 ?618次閱讀

    NVIDIA全面加快Meta Llama 3的推理速度

    Meta 最新開源大語言模型采用 NVIDIA 技術(shù)構(gòu)建,其經(jīng)過優(yōu)化后可在云、數(shù)據(jù)中心、邊緣和 PC 的 NVIDIA GPU 上運行。
    的頭像 發(fā)表于 04-23 09:52 ?453次閱讀

    利用NVIDIA組件提升GPU推理的吞吐

    本實踐,唯品會 AI 平臺與 NVIDIA 團隊合作,結(jié)合 NVIDIA TensorRT 和 NVIDIA Merlin HierarchicalKV(HKV)將推理的稠密網(wǎng)絡(luò)和熱
    的頭像 發(fā)表于 04-20 09:39 ?715次閱讀

    FPGA在深度學(xué)習(xí)應(yīng)用或?qū)⑷〈?b class='flag-5'>GPU

    現(xiàn)場可編程門陣列 (FPGA) 解決了 GPU 在運行深度學(xué)習(xí)模型時面臨的許多問題 在過去的十年里,人工智能的再一次興起使顯卡行業(yè)受益匪淺。英偉達 (Nvidia) 和 AMD 等公司的股價也大幅
    發(fā)表于 03-21 15:19

    NVIDIA 發(fā)布全新交換機,全面優(yōu)化萬億參數(shù)級 GPU 計算和 AI 基礎(chǔ)設(shè)施

    NVIDIA Quantum-X800 InfiniBand 網(wǎng)絡(luò),打造性能最強大的 AI 專用基礎(chǔ)設(shè)施 NVIDIA Spectrum-X800 以太網(wǎng)絡(luò),數(shù)據(jù)中心必備的優(yōu)化 AI 網(wǎng)絡(luò)
    發(fā)表于 03-19 10:05 ?332次閱讀
    <b class='flag-5'>NVIDIA</b> 發(fā)布全新交換機,全面<b class='flag-5'>優(yōu)化</b>萬億參數(shù)級 <b class='flag-5'>GPU</b> 計算和 AI 基礎(chǔ)設(shè)施

    Google Gemma優(yōu)化后可在NVIDIA GPU上運行

    2024 年 2 月 21 日,NVIDIA 攜手 Google 在所有 NVIDIA AI 平臺上發(fā)布面向 Gemma 的優(yōu)化功能,Gemma 是 Google 最先進的新型輕量級 2B 和 7B 開放語言模型,可在任何地方運
    的頭像 發(fā)表于 02-25 11:01 ?459次閱讀

    NVIDIA的Maxwell GPU架構(gòu)功耗不可思議

    整整10年前的2013年2月19日,NVIDIA正式推出了新一代Maxwell GPU架構(gòu),它有著極高的能效,出場方式也非常特別。
    的頭像 發(fā)表于 02-19 16:39 ?1014次閱讀
    <b class='flag-5'>NVIDIA</b>的Maxwell <b class='flag-5'>GPU</b>架構(gòu)功耗不可思議

    如何選擇NVIDIA GPU和虛擬化軟件的組合方案呢?

    NVIDIA vGPU 解決方案能夠?qū)?NVIDIA GPU 的強大功能帶入虛擬桌面、應(yīng)用程序和工作站,加速圖形和計算,使在家辦公或在任何地方工作的創(chuàng)意和技術(shù)專業(yè)人員能夠訪問虛擬化工作空間。
    的頭像 發(fā)表于 01-12 09:26 ?1098次閱讀
    如何選擇<b class='flag-5'>NVIDIA</b> <b class='flag-5'>GPU</b>和虛擬化軟件的組合方案呢?
    RM新时代网站-首页