RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評(píng)論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會(huì)員中心
創(chuàng)作中心

完善資料讓更多小伙伴認(rèn)識(shí)你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

NVIDIA推出微服務(wù),助力企業(yè)邁向生成式AI

NVIDIA英偉達(dá) ? 來源:NVIDIA英偉達(dá) ? 2024-03-21 09:39 ? 次閱讀

NVIDIA 的 AI 平臺(tái)適用于任何高瞻遠(yuǎn)矚的企業(yè)使用,而且比以往任何時(shí)候都更加易于應(yīng)用。

NVIDIA AI Enterprise 5.0于今日發(fā)布,其中包括 NVIDIA 微服務(wù)、用于部署生成式 AI 應(yīng)用和加速計(jì)算的可下載軟件容器。領(lǐng)先的云服務(wù)提供商、系統(tǒng)構(gòu)建商和軟件供應(yīng)商均可提供,并且 Uber 等客戶已開始使用該產(chǎn)品。

Uber 平臺(tái)工程副總裁 Albert Greenberg 表示:“我們采用了 NVIDIA AI Enterprise 推理軟件,這對(duì)于滿足用戶對(duì)高性能的期望來說非常重要。讓 Uber 引以為豪的是,我們走在了采用 AI 創(chuàng)新技術(shù)的前沿,使我們成為一個(gè)在效率和卓越方面樹立行業(yè)標(biāo)準(zhǔn)的客戶服務(wù)平臺(tái)?!?/p>

微服務(wù)加速應(yīng)用開發(fā)

開發(fā)者正在轉(zhuǎn)而采用微服務(wù),并將其作為在全球范圍內(nèi)構(gòu)建現(xiàn)代企業(yè)應(yīng)用的有效方式。他們?cè)跒g覽器中使用云 API 或應(yīng)用編程接口來編寫可在系統(tǒng)上運(yùn)行的應(yīng)用,并為全球用戶提供服務(wù)。

NVIDIA AI Enterprise 5.0 現(xiàn)包括一系列微服務(wù),其中包括用于在生產(chǎn)中部署 AI 模型的NVIDIA NIM和包括NVIDIA cuOpt在內(nèi)的NVIDIA CUDA-X微服務(wù)集合。

NIM 微服務(wù)可為來自 NVIDIA 及其合作伙伴生態(tài)系統(tǒng)的數(shù)十種熱門 AI 模型優(yōu)化推理。

NIM 由 NVIDIA 推理軟件(包括Triton 推理服務(wù)器、TensorRTTensorRT-LLM)提供支持,可將部署時(shí)間由數(shù)周縮短至數(shù)分鐘。它提供基于行業(yè)標(biāo)準(zhǔn)的安全性和可管理性,以及與企業(yè)級(jí)管理工具的兼容性。

NVIDIA cuOpt 是一款 GPU 加速的 AI 微服務(wù),它在路徑優(yōu)化方面創(chuàng)造了記錄,并能夠支持動(dòng)態(tài)決策,從而幫助企業(yè)降低成本、縮短時(shí)間并減少碳足跡。作為 CUDA-X 微服務(wù)之一,它可幫助各行業(yè)將 AI 投入生產(chǎn)。

更多功能正在陸續(xù)開發(fā)中。例如NVIDIA RAG LLM operator將把 Co-Pilot 和其他使用檢索增強(qiáng)生成的生成式 AI 應(yīng)用從試驗(yàn)階段推向生產(chǎn)階段,而無需重寫任何代碼。

包括 CrowdStrike、SAP 和 ServiceNow 在內(nèi)的多家領(lǐng)先應(yīng)用和網(wǎng)絡(luò)安全平臺(tái)提供商都正在采用 NVIDIA 微服務(wù)。

更多工具和功能

此外,我們還在 5.0 版本中進(jìn)行了 3 項(xiàng)重要更新。

該平臺(tái)現(xiàn)集成了一個(gè)開發(fā)者工具包NVIDIA AI Workbench,用于快速下載、自定義和運(yùn)行生成式 AI 項(xiàng)目。該軟件目前已全面上市,并已獲得 NVIDIA AI Enterprise 許可證支持。

此外,5.0 版本現(xiàn)在還支持紅帽 OpenStack 平臺(tái),大多數(shù)財(cái)富 500 強(qiáng)公司都使用該平臺(tái)創(chuàng)建私有云和公有云服務(wù)。它由紅帽負(fù)責(zé)維護(hù),為開發(fā)者構(gòu)建虛擬計(jì)算環(huán)境提供熟悉的平臺(tái)。IBM 咨詢服務(wù)將幫助客戶部署這些新功能。

此外,5.0 版本還擴(kuò)展了支持范圍,支持各種最新NVIDIA GPU、網(wǎng)絡(luò)硬件和虛擬化軟件。

可隨時(shí)隨地運(yùn)行

功能增強(qiáng)的 NVIDIA AI 平臺(tái)比以往任何時(shí)候都更易于訪問。

NIM 和 CUDA-X 微服務(wù)以及所有 5.0 功能均會(huì)很快在亞馬遜科技、谷歌云、Microsoft Azure 和 Oracle Cloud marketplace 上架。

如果用戶希望在自己的數(shù)據(jù)中心運(yùn)行代碼,VMware Private AI Foundation 和 NVIDIA 將為軟件提供支持,使其能夠部署在博通公司客戶的虛擬化數(shù)據(jù)中心中。

企業(yè)可以選擇在紅帽 OpenShift 上運(yùn)行 NVIDIA AI Enterprise,以便在裸機(jī)或虛擬化環(huán)境中運(yùn)行。它還可以在 Canonical 的 Charmed Kubernetes 和 Ubuntu 上運(yùn)行。

此外,該 AI 平臺(tái)也將成為慧與(HPE)的 HPE ProLiant 服務(wù)器上可用軟件的一部分。HPE 的生成式 AI 企業(yè)計(jì)算解決方案使用 NVIDIA AI Enterprise 進(jìn)行推理和模型微調(diào)。

同時(shí),Anyscale、Dataiku 和 DataRobot 這三家領(lǐng)先的機(jī)器學(xué)習(xí)操作管理軟件提供商也將在其平臺(tái)上支持 NIM。他們加入了由數(shù)百家 MLOps 合作伙伴組成的 NVIDIA 生態(tài)系統(tǒng),其中包括 Microsoft Azure 機(jī)器學(xué)習(xí)、Dataloop AI、Domino Data Lab 和 Weights & Biases。

用戶無論通過何種方式訪問 NVIDIA AI Enterprise 5.0,都能從這一安全、生產(chǎn)就緒且性能優(yōu)化的軟件中獲益。它可以靈活地部署在數(shù)據(jù)中心、云、工作站或網(wǎng)絡(luò)邊緣的應(yīng)用中。

NVIDIA AI Enterprise 可通過思科、戴爾科技、惠普、HPE、聯(lián)想和超微等領(lǐng)先的系統(tǒng)提供商提供。

在 GTC 上聆聽成功案例

3 月 18 日至 21 日,全球 AI 盛會(huì) NVIDIA GTC 在圣何塞會(huì)議中心舉行。會(huì)上,用戶將會(huì)分享他們使用該軟件的體驗(yàn)。

例如,ServiceNow 首席數(shù)字信息官 Chris Bedi 將在小組討論上就如何利用生成式 AI 的潛能進(jìn)行發(fā)言:

https://www.nvidia.com/gtc/session-catalog/?tab.allsessions=1700692987788001F1cG&search=ServiceNow#/session/1698205437942001FOg6

ServiceNow AI 產(chǎn)品副總裁 Jeremy Barnes 則會(huì)在另一場(chǎng)演講中分享如何借助 NVIDIA AI Enterprise 充分提高開發(fā)者的開發(fā)效率

https://www.nvidia.com/gtc/session-catalog/?tab.allsessions=1700692987788001F1cG&search=ServiceNow#/session/1696278742562001JcJ2

來自貝萊德、美敦力、SAP 和 Uber 的高管們將就其在金融、醫(yī)療、企業(yè)軟件和業(yè)務(wù)運(yùn)營(yíng)領(lǐng)域中使用 NVIDIA AI 平臺(tái)開展的工作進(jìn)行探討。

此外,總部位于德國(guó)汽車保險(xiǎn)公司全球應(yīng)用提供商 ControlExpert 的高管將與大家一同分享如何利用 NVIDIA AI Enterprise 軟件開發(fā) AI 理賠管理解決方案。

NVIDIA 對(duì)數(shù)百個(gè)內(nèi)外部的生成式 AI 項(xiàng)目進(jìn)行了評(píng)估,并將這些項(xiàng)目全部集成到一個(gè)經(jīng)過穩(wěn)定性和安全性測(cè)試的軟件包中,讓越來越多的公司能夠從中受益。




審核編輯:劉清

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點(diǎn)僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場(chǎng)。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請(qǐng)聯(lián)系本站處理。 舉報(bào)投訴
  • NVIDIA
    +關(guān)注

    關(guān)注

    14

    文章

    4978

    瀏覽量

    102987
  • 機(jī)器學(xué)習(xí)

    關(guān)注

    66

    文章

    8406

    瀏覽量

    132562
  • GPU芯片
    +關(guān)注

    關(guān)注

    1

    文章

    303

    瀏覽量

    5804
  • ai技術(shù)
    +關(guān)注

    關(guān)注

    1

    文章

    1266

    瀏覽量

    24285
  • 生成式AI
    +關(guān)注

    關(guān)注

    0

    文章

    502

    瀏覽量

    471

原文標(biāo)題:GTC24 | NVIDIA 推出微服務(wù),助力企業(yè)邁向生成式 AI

文章出處:【微信號(hào):NVIDIA_China,微信公眾號(hào):NVIDIA英偉達(dá)】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。

收藏 人收藏

    評(píng)論

    相關(guān)推薦

    NVIDIA助力企業(yè)創(chuàng)建定制AI應(yīng)用

    NVIDIA 近日宣布與眾多技術(shù)領(lǐng)導(dǎo)者一同使用最新NVIDIA NIM Agent Blueprint以及NVIDIA NeMo和NVIDIA NIM
    的頭像 發(fā)表于 11-20 09:12 ?336次閱讀

    NVIDIA助力Amdocs打造生成AI智能體

    正在使用NVIDIA DGX Cloud 與 NVIDIA AI Enterprise軟件開發(fā)和交付基于商用大語(yǔ)言模型(LLM)和領(lǐng)域適配模型的解決方案。該公司還在使用NVIDIA
    的頭像 發(fā)表于 11-19 14:48 ?327次閱讀

    借助NVIDIA Metropolis微服務(wù)構(gòu)建視覺AI應(yīng)用

    伴隨著視覺 AI 復(fù)雜性的增加,精簡(jiǎn)的部署解決方案已成為優(yōu)化空間和流程的關(guān)鍵。NVIDIA 能夠加快企業(yè)的開發(fā)速度,借助 NVIDIA Metropolis
    的頭像 發(fā)表于 09-09 09:46 ?325次閱讀
    借助<b class='flag-5'>NVIDIA</b> Metropolis<b class='flag-5'>微服務(wù)</b>構(gòu)建視覺<b class='flag-5'>AI</b>應(yīng)用

    借助NVIDIA NIM微服務(wù)助力可口可樂公司擴(kuò)展生成AI內(nèi)容

    借助 NVIDIA NIM 微服務(wù) USD Search 和 USD Code,市場(chǎng)營(yíng)銷領(lǐng)導(dǎo)者 WPP 幫助飲料公司在全球范圍內(nèi)加速創(chuàng)意活動(dòng)的迭代。
    的頭像 發(fā)表于 08-13 16:16 ?560次閱讀

    全新NVIDIA NIM微服務(wù)生成AI引入數(shù)字環(huán)境

    生成物理 AI NIM 微服務(wù)以及 NVIDIA Metropolis 參考工作流旨在協(xié)助創(chuàng)建智能的沉浸
    的頭像 發(fā)表于 08-02 15:20 ?534次閱讀

    NVIDIA攜手Meta推出AI服務(wù),為企業(yè)提供生成AI服務(wù)

    NVIDIA近日宣布了一項(xiàng)重大舉措,正式推出NVIDIA AI Foundry服務(wù)NVIDIA
    的頭像 發(fā)表于 07-25 16:57 ?532次閱讀

    英偉達(dá)推出全新NVIDIA AI Foundry服務(wù)NVIDIA NIM推理微服務(wù)

    NVIDIA 宣布推出全新 NVIDIA AI Foundry 服務(wù)NVIDIA NIM 推
    的頭像 發(fā)表于 07-25 09:48 ?698次閱讀

    NVIDIA AI Foundry 為全球企業(yè)打造自定義 Llama 3.1 生成 AI 模型

    Foundry 提供從數(shù)據(jù)策管、合成數(shù)據(jù)生成、微調(diào)、檢索、防護(hù)到評(píng)估的全方位生成 AI 模型服務(wù),以便部署自定義 Llama 3.1
    發(fā)表于 07-24 09:39 ?706次閱讀
    <b class='flag-5'>NVIDIA</b> <b class='flag-5'>AI</b> Foundry 為全球<b class='flag-5'>企業(yè)</b>打造自定義 Llama 3.1 <b class='flag-5'>生成</b><b class='flag-5'>式</b> <b class='flag-5'>AI</b> 模型

    NVIDIA推出NVIDIA AI Computing by HPE加速生成 AI 變革

    關(guān)系進(jìn)一步深化。助力生成 AI企業(yè)級(jí)應(yīng)用與發(fā)展加速駛?cè)肟燔嚨馈?HPE Private Cloud
    的頭像 發(fā)表于 06-20 17:36 ?711次閱讀

    NVIDIA宣布全面推出 NVIDIA ACE 生成 AI 微服務(wù)

    采用 NVIDIA 宣布全面推出 NVIDIA ACE 生成 AI
    的頭像 發(fā)表于 06-04 10:18 ?656次閱讀

    NVIDIA發(fā)布數(shù)字人微服務(wù),為制作生成AI數(shù)字化身鋪平未來之路

    ? ? COMPUTEX—2024年6月2日— NVIDIA宣布全面推出NVIDIA ACE生成AI
    發(fā)表于 06-03 17:43 ?176次閱讀

    NVIDIA生成AI微服務(wù)助力企業(yè)在幾秒內(nèi)檢測(cè)并解決軟件安全問題

    得益于生成 AI,軟件正在編寫軟件。
    的頭像 發(fā)表于 03-21 09:41 ?359次閱讀

    NVIDIA發(fā)布生成AI微服務(wù),推動(dòng)藥物研發(fā)、醫(yī)療科技和數(shù)字醫(yī)療發(fā)展

    NVIDIA 今日推出二十多項(xiàng)全新微服務(wù),使全球醫(yī)療企業(yè)能夠在任何地點(diǎn)和任何云上充分利用生成
    的頭像 發(fā)表于 03-20 10:03 ?1683次閱讀

    NVIDIA推出生成AI微服務(wù),供開發(fā)者在CUDA GPU系統(tǒng)中創(chuàng)建部署生成AI助手

    NVIDIA 于今日推出數(shù)十項(xiàng)企業(yè)級(jí)生成 AI 微服務(wù)
    的頭像 發(fā)表于 03-20 09:56 ?455次閱讀

    NVIDIA即將推出一項(xiàng)新的生成AI專業(yè)認(rèn)證

    NVIDIA 即將推出一項(xiàng)新的生成 AI 專業(yè)認(rèn)證,助力開發(fā)者在這一重要領(lǐng)域證明自身技術(shù)實(shí)力。
    的頭像 發(fā)表于 03-14 09:43 ?541次閱讀
    RM新时代网站-首页