RM新时代网站-首页

0
  • 聊天消息
  • 系統(tǒng)消息
  • 評論與回復(fù)
登錄后你可以
  • 下載海量資料
  • 學(xué)習(xí)在線課程
  • 觀看技術(shù)視頻
  • 寫文章/發(fā)帖/加入社區(qū)
會員中心
創(chuàng)作中心

完善資料讓更多小伙伴認識你,還能領(lǐng)取20積分哦,立即完善>

3天內(nèi)不再提示

把握關(guān)鍵節(jié)點,美格智能持續(xù)推動端側(cè)AI規(guī)模化拓展

美格智能 ? 2024-11-26 01:00 ? 次閱讀

當(dāng)前,AI大模型走向端側(cè)已經(jīng)是大勢所趨,端側(cè)AI的發(fā)展將推動人工智能成為影響世界的第四次工業(yè)革命。與傳統(tǒng)的云端大模型相比,端側(cè)大模型擁有更小的參數(shù)體量和更垂直的訓(xùn)練數(shù)據(jù)。對于終端產(chǎn)品而言,端側(cè)AI將成為和系統(tǒng)同樣重要的存在,如果說電路是連接身體的“血管”,那么AI就將成為終端的智慧“大腦”。

加速演進

大模型加速走向端側(cè)

手機移動端開始,端側(cè)AI正逐步在車載、PC以及各類可穿戴設(shè)備等終端落地,端云協(xié)作的混合AI模式成為未來人工智能發(fā)展的主要方向。AI Agent、具身智能、人機協(xié)同、生成式智能體等LLM(大語言模型)的主要研究方向均對模型的性能和運行條件提出了新的要求。

為推動AI與各行業(yè)的深度融合,AI大模型正通過模型剪枝、知識蒸餾和量化技術(shù)進行不斷精簡和提升數(shù)據(jù)質(zhì)量,端側(cè)硬件也在不斷提升端側(cè)算力和優(yōu)化結(jié)構(gòu)。如面向AI設(shè)計的神經(jīng)網(wǎng)絡(luò)處理器(NPU)、提高性能和降低功耗的異構(gòu)計算技術(shù),軟件與硬件的協(xié)同發(fā)展正在加速端側(cè)AI部署,賦能全新增強的AI體驗。

從行業(yè)趨勢來看,今年10月,高通公司發(fā)布全新旗艦芯片產(chǎn)品驍龍8至尊版,搭載第二代定制的Oryon CPU、全新切片架構(gòu)的Adreno GPU和增強的Hexagon NPU。Oryon CPU擁有2個主頻高達4.32GHz的超級內(nèi)核和6個主頻3.53GHz的性能內(nèi)核,支持面向端側(cè)AI計算的高達10.7Gbps速率的LPDDR5X內(nèi)存;全新的Hexagon NPU,AI性能提升45%,每瓦特性能提升45%,支持70+ tokens/sec的輸入,首次支持終端側(cè)個性化多模態(tài)AI助手,能夠賦能規(guī)模更大且更加復(fù)雜的多模態(tài)生成式AI用例在終端側(cè)高效運行。驍龍8至尊系列新產(chǎn)品的發(fā)布,也在一定程度上表明了未來數(shù)字化發(fā)展的方向,即垂直的硬件適配、不斷提升的端側(cè)算力和更強悍的綜合性能。

AI與千行百業(yè)的融合發(fā)展,被行業(yè)稱為“AI+”時代。作為全球領(lǐng)先的無線通信模組及解決方案提供商,美格智能圍繞AI+時代的算力、算法、數(shù)據(jù)、用例四大重要因素,以豐厚研發(fā)經(jīng)驗和創(chuàng)新實力助力端側(cè)AI落地,為全球數(shù)字化發(fā)展貢獻重要力量。

智算領(lǐng)先

以澎湃算力承接大模型落地

從開創(chuàng)到引領(lǐng),美格智能以端側(cè)算力為切入點,行業(yè)率先打造高算力AI模組矩陣,憑借優(yōu)質(zhì)的產(chǎn)品品質(zhì)和定制化服務(wù)能力受到行業(yè)客戶的一致好評。算力是端側(cè)AI運行的基座,針對不同客戶對算力、功耗、尺寸的要求,美格智能打造包含SNM973、SNM932、SNM950、SNM960、SNM970、SNM952、SNM962、SNM972等系列模組,AI算力覆蓋12Tops~48Tops,涵蓋入門級、中端、旗艦級多層次算力水平,能夠適應(yīng)不同行業(yè)和應(yīng)用場景的需求。同時在高算力AI模組的基礎(chǔ)上,美格智能團隊正不斷與行業(yè)領(lǐng)先的SoC陣列式服務(wù)器客戶密切合作,相關(guān)產(chǎn)品成為各類端側(cè)通用AI、邊緣計算AI服務(wù)器的優(yōu)質(zhì)選擇,憑借高性能和高性價比助力邊緣側(cè)AI部署,推動邊緣側(cè)算力發(fā)展。

c591cf2a-ab4e-11ef-8084-92fbcf53809c.jpg

隨著以智能座艙和“端到端”的自動駕駛為代表的車載大模型應(yīng)用需求逐步提升,美格智能也在不斷加強技術(shù)創(chuàng)新研發(fā),正逐步打造綜合AI算力超過100Tops的尖端AI模組,為更強力的端側(cè)AI落地和更廣闊的應(yīng)用場景提供澎湃算力。

加速部署

以技術(shù)實力打通模型部署通路

AI技術(shù)的引進為產(chǎn)業(yè)終端提質(zhì)增效起到重要作用,而如何快速地將算法與終端進行適配和部署是每一個終端廠商無法避免的課題。為此,美格智能以自身研發(fā)實力為基礎(chǔ)搭建試驗平臺,自主進行大語言模型運行驗證,行業(yè)內(nèi)首家在端側(cè)算力模組上運行文生圖大語言模型Stable Diffusion,并先后驗證運行LLaMA-2、通義千問Qwen、百川大模型、RedPajama、ChatGLM2等眾多中英文大語言模型,以實際用例為客戶打通模型部署通路。

c5b7493a-ab4e-11ef-8084-92fbcf53809c.jpg

此外,為幫助客戶更快速地打造更加垂直的模型應(yīng)用,在模型算法優(yōu)化方面,美格智能為行業(yè)客戶打造AI算法部署服務(wù)APP——MEIG AI,內(nèi)置多個模型和算法,客戶在APP上即可完成AI算法在不同美格智能模組平臺的應(yīng)用驗證,并為客戶和開發(fā)者提供開發(fā)文檔和算法轉(zhuǎn)換、集成的相關(guān)視頻教程,幫助理解App結(jié)構(gòu)、代碼和模型,提高開發(fā)效率。在模型部署方面,美格智能攜手行業(yè)合作伙伴打造AIMO(AI模型優(yōu)化器),實現(xiàn)一站式模型轉(zhuǎn)寫,僅使用Python即可開發(fā)部署AI應(yīng)用,有效降低開發(fā)門檻,大幅縮短模型落地周期,節(jié)約開發(fā)投入。

值得一提的是,為推動全行業(yè)各領(lǐng)域端側(cè)AI技術(shù)的應(yīng)用和開發(fā)落地,美格智能基于高算力AI模組,打造SNM970、SNM932等高算力AI模組面向開發(fā)者套件。豐富的硬件接口和軟件的開發(fā)套件,能夠廣泛適配各類應(yīng)用場景,為客戶產(chǎn)品原型開發(fā),性能驗證提供助力,完整的操作指引能夠顯著降低開發(fā)難度,加速終端開發(fā)周期,有效節(jié)省客戶產(chǎn)品迭代的二次開發(fā)投入。

c5d8538c-ab4e-11ef-8084-92fbcf53809c.jpg

應(yīng)用先行

以廣泛用例助力端側(cè)AI生態(tài)發(fā)展

當(dāng)前美格智能高算力AI模組、智能模組已在海量應(yīng)用終端廣泛落地,成為推動端側(cè)AI高速發(fā)展和布局的重要推動。如在具身智能領(lǐng)域,基于美格智能高算力AI模組的解決方案為行業(yè)領(lǐng)先的人形機器人提供充足算力,為打造“端到端”的AI機器人提供支持;在AR/AI眼鏡領(lǐng)域,美格智能與國際知名AR/AI眼鏡品牌客戶合作,基于高算力AI模組開發(fā)的新一代AR眼鏡產(chǎn)品,在系統(tǒng)能力、AI性能方面較上一代產(chǎn)品顯著提升;無人機智控領(lǐng)域,美格智能與國內(nèi)領(lǐng)先的高端無人機品牌攜手,以高算力AI模組賦能無人機智控、圖像追蹤技術(shù)、實時3D渲染、高速圖傳等領(lǐng)域,共同打造行業(yè)領(lǐng)先的智能無人機產(chǎn)品;在AI+醫(yī)療領(lǐng)域,基于高算力AI模組為行業(yè)頭部客戶及海外客戶研發(fā)AI掌上超聲終端、手持式血液快速檢測終端等,以AI助力移動醫(yī)療快速發(fā)展。

端側(cè)AI能力是實現(xiàn)AI全球規(guī)?;瘮U展的關(guān)鍵,在全產(chǎn)業(yè)鏈的推動下,用戶對AI功能的接受程度和期待也進一步提升,端側(cè)大模型的發(fā)展不僅帶動了消費市場的升級,也讓產(chǎn)業(yè)鏈上下游的合作更加緊密。美格智能憑借行業(yè)領(lǐng)先的產(chǎn)品研發(fā)和創(chuàng)新實力,以及豐厚的解決方案用例,成為全球端側(cè)AI產(chǎn)業(yè)鏈中的重要一環(huán)。面向未來的廣闊市場,美格智能也將攜手行業(yè)合作伙伴,為客戶提供更高算力、高性能、高性價比的模組產(chǎn)品和解決方案,助力端側(cè)AI生態(tài)高速、健康發(fā)展。

聲明:本文內(nèi)容及配圖由入駐作者撰寫或者入駐合作網(wǎng)站授權(quán)轉(zhuǎn)載。文章觀點僅代表作者本人,不代表電子發(fā)燒友網(wǎng)立場。文章及其配圖僅供工程師學(xué)習(xí)之用,如有內(nèi)容侵權(quán)或者其他違規(guī)問題,請聯(lián)系本站處理。 舉報投訴
  • AI
    AI
    +關(guān)注

    關(guān)注

    87

    文章

    30728

    瀏覽量

    268874
  • 美格智能
    +關(guān)注

    關(guān)注

    2

    文章

    246

    瀏覽量

    11112
  • 大模型
    +關(guān)注

    關(guān)注

    2

    文章

    2423

    瀏覽量

    2639
收藏 人收藏

    評論

    相關(guān)推薦

    廣和通開啟側(cè)AI新時代

    AI發(fā)展正酣,隨著終端芯片算力越來越高、側(cè)模型能力越來越強、實時響應(yīng)及隱私保護的側(cè)應(yīng)用需求增加,
    的頭像 發(fā)表于 12-12 10:35 ?162次閱讀

    把握關(guān)鍵節(jié)點美格智能持續(xù)推動側(cè)AI規(guī)?;?/b>拓展

    當(dāng)前,AI大模型走向側(cè)已經(jīng)是大勢所趨,側(cè)AI的發(fā)展將推動
    的頭像 發(fā)表于 11-25 16:45 ?231次閱讀
    <b class='flag-5'>把握</b><b class='flag-5'>關(guān)鍵</b><b class='flag-5'>節(jié)點</b>,<b class='flag-5'>美格</b><b class='flag-5'>智能</b><b class='flag-5'>持續(xù)</b><b class='flag-5'>推動</b><b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b><b class='flag-5'>規(guī)模化</b><b class='flag-5'>拓展</b>

    側(cè)AI,風(fēng)起移動智能計算

    新一代驍龍旗艦芯片,側(cè)AI的繁榮肇始
    的頭像 發(fā)表于 11-22 09:55 ?2241次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>,風(fēng)起移動<b class='flag-5'>智能</b>計算

    AI風(fēng)向標(biāo)|算力與通信的完美融合,SRM6690解鎖側(cè)AI智能密碼

    當(dāng)前,5G技術(shù)已經(jīng)成為推動數(shù)字經(jīng)濟和實體經(jīng)濟深度融合的關(guān)鍵驅(qū)動力,進入5G發(fā)展的下半場,5G與AI的融合正推動諸多行業(yè)的數(shù)字轉(zhuǎn)型和創(chuàng)新發(fā)展
    的頭像 發(fā)表于 11-15 01:01 ?186次閱讀
    <b class='flag-5'>AI</b>風(fēng)向標(biāo)|算力與通信的完美融合,SRM6690解鎖<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>的<b class='flag-5'>智能</b>密碼

    AI風(fēng)向標(biāo) 算力與通信的完美融合,SRM6690解鎖側(cè)AI智能密碼

    當(dāng)前,5G技術(shù)已經(jīng)成為推動數(shù)字經(jīng)濟和實體經(jīng)濟深度融合的關(guān)鍵驅(qū)動力,進入5G發(fā)展的下半場,5G與AI的融合正推動諸多行業(yè)的數(shù)字轉(zhuǎn)型和創(chuàng)新發(fā)展
    的頭像 發(fā)表于 11-14 17:19 ?208次閱讀

    側(cè)AI浪潮已來!炬芯科技發(fā)布新一代側(cè)AI音頻芯片,能效比和AI算力大幅度提升

    側(cè)AI音頻芯片。 ? 2028 年中小型模型側(cè)AI市場迅速增長,技術(shù)上有三大挑戰(zhàn) ? “近年
    的頭像 發(fā)表于 11-06 09:11 ?2465次閱讀
    <b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>浪潮已來!炬芯科技發(fā)布新一代<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>音頻芯片,能效比和<b class='flag-5'>AI</b>算力大幅度提升

    側(cè)AI應(yīng)用趨熱:NPU如何解決其關(guān)鍵痛點

    當(dāng)前,AI大模型正逐步從云端遷移至邊緣,甚至深入至日常生活中的手機、個人電腦(PC)、汽車等終端。在這場變革中,側(cè)智能正逐漸嶄露頭角,預(yù)示著未來的
    的頭像 發(fā)表于 10-31 15:00 ?502次閱讀

    AI for Science:人工智能驅(qū)動科學(xué)創(chuàng)新》第一章人工智能驅(qū)動的科學(xué)創(chuàng)新學(xué)習(xí)心得

    的同時,確保其公正性、透明度和可持續(xù)性,是當(dāng)前和未來科學(xué)研究必須面對的重要課題。此外,培養(yǎng)具備AI技能的科研人才,也是推動這一領(lǐng)域發(fā)展的關(guān)鍵。 4. 激發(fā)創(chuàng)新思維 閱讀這一章,我被深深
    發(fā)表于 10-14 09:12

    IBM陳旭東:攜手IBM加速 AI 規(guī)?;?/b>應(yīng)用,解鎖企業(yè)新質(zhì)生產(chǎn)力

    、總經(jīng)理陳旭東應(yīng)邀參會,并以"加速 AI 規(guī)?;?/b>應(yīng)用,解鎖企業(yè)新質(zhì)生產(chǎn)力"為題作主旨演講。 他認為,在企業(yè)規(guī)模化應(yīng)用AI的路徑中,最關(guān)鍵的是
    的頭像 發(fā)表于 07-15 16:13 ?316次閱讀
    IBM陳旭東:攜手IBM加速 <b class='flag-5'>AI</b> <b class='flag-5'>規(guī)?;?/b>應(yīng)用,解鎖企業(yè)新質(zhì)生產(chǎn)力

    廣和通發(fā)布基于高通 QCM6490和QCS8550處理器的側(cè)AI解決方案

    、高算力推動移動機器人、工業(yè)機器視覺、智慧零售、自動駕駛等領(lǐng)域智能化。 ? 相較于云側(cè)AI,側(cè)
    的頭像 發(fā)表于 06-07 16:44 ?963次閱讀

    廣和通發(fā)布基于高通QCM6490和QCS8550的側(cè)AI解決方案,使AI“更接地氣”

    6月7日,COMPUTEX 2024期間,為拓展物聯(lián)網(wǎng)生態(tài)系統(tǒng)并滿足側(cè)AI應(yīng)用需求,廣和通發(fā)布基于高通? QCM6490和QCS8550處理器的
    的頭像 發(fā)表于 06-07 16:36 ?400次閱讀

    廣和通發(fā)布基于高通QCM6490和QCS8550的側(cè)AI解決方案,使AI“更接地氣”

    6月7日,COMPUTEX 2024期間,為拓展物聯(lián)網(wǎng)生態(tài)系統(tǒng)并滿足側(cè)AI應(yīng)用需求,廣和通發(fā)布基于高通? QCM6490和QCS8550處理器的
    的頭像 發(fā)表于 06-07 16:30 ?804次閱讀
    廣和通發(fā)布基于高通QCM6490和QCS8550的<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>解決方案,使<b class='flag-5'>AI</b>“更接地氣”

    MWC2024世界移動通信大會圓滿結(jié)束,美格智能5G-A、側(cè)AI解決方案掀熱潮

    作為全球領(lǐng)先的無線通信模組及解決方案提供商,美格智能亮相2024世界移動通信大會,發(fā)布了5G-A、5G RedCap系列FWA、側(cè)AI等創(chuàng)
    的頭像 發(fā)表于 03-02 11:17 ?1949次閱讀
    MWC2024世界移動通信大會圓滿結(jié)束,<b class='flag-5'>美格</b><b class='flag-5'>智能</b>5G-A、<b class='flag-5'>端</b><b class='flag-5'>側(cè)</b><b class='flag-5'>AI</b>解決方案掀熱潮

    美格智能聯(lián)合羅德與施瓦茨完成5G RedCap模組SRM813Q驗證,推動5G輕量化全面商用

    了堅實的基礎(chǔ)。憑借輕量化的5G RedCap模組,我們將為物聯(lián)網(wǎng)中高速業(yè)務(wù)場景提供支持,賦能應(yīng)用創(chuàng)新,推動5G技術(shù)在更多行業(yè)落地?!?作為5G RedCap技術(shù)應(yīng)用的開路先鋒,未來,美格智能將依靠自身技術(shù)優(yōu)勢,矢志創(chuàng)新,和產(chǎn)業(yè)合
    發(fā)表于 02-27 11:31

    高通持續(xù)推動終端側(cè)生成式AI變革,推出高通AI Hub賦能開發(fā)者

    高通現(xiàn)賦能終端側(cè)AI在下一代PC、智能手機、軟件定義汽車、XR設(shè)備和物聯(lián)網(wǎng)等領(lǐng)域規(guī)?;?/b>商用,讓智能計算無處不在。
    的頭像 發(fā)表于 02-26 16:46 ?609次閱讀
    RM新时代网站-首页