正在流行的視覺(jué)AI大模型SAM究竟是一種什么樣的技術(shù),會(huì)形成什么樣的產(chǎn)業(yè)影響?經(jīng)濟(jì)觀察報(bào)就此采訪三位IEEE(電氣電子工程師學(xué)會(huì))專家,解讀了視覺(jué)大模型SAM技術(shù)、應(yīng)用路線以及對(duì)原有產(chǎn)業(yè)的影響。
今年4月,Meta公布了一款名為SAM(Segment Anything Model)的技術(shù),這是一款用于圖像分割的AI大模型,會(huì)對(duì)圖像進(jìn)行觀察、感知、思考、邏輯推理、得出結(jié)果,且操作極其簡(jiǎn)單,類似于ChatGPT用人類語(yǔ)言對(duì)話的方式給機(jī)器下命令。
IEEE高級(jí)會(huì)員、天津理工大學(xué)教授、AR/VR技術(shù)專家羅訓(xùn)對(duì)記者表示,SAM是視覺(jué)領(lǐng)域的通用大模型,很多報(bào)道中把它比喻成視覺(jué)領(lǐng)域的ChatG-PT,SAM和ChatGPT的支撐技術(shù)和應(yīng)用場(chǎng)景都是不同的,但是在通用性這一點(diǎn)上,它們都是當(dāng)前技術(shù)發(fā)展趨勢(shì)的代表者。
“SAM技術(shù)、應(yīng)用路線和顛覆性
作為AI的一個(gè)重要分支,機(jī)器視覺(jué)的目標(biāo)是讓計(jì)算機(jī)模仿人類視覺(jué)系統(tǒng),實(shí)現(xiàn)圖像和視頻的理解和處理。
IEEE數(shù)字化轉(zhuǎn)型聯(lián)合會(huì)策略與架構(gòu)主席汪齊齊對(duì)記者表示,高效準(zhǔn)確的圖像分割結(jié)果,對(duì)于日常生活和商業(yè)場(chǎng)景,甚至科研領(lǐng)域都具有重大意義。正因?yàn)槿绱耍湓?a href="http://hljzzgx.com/v/tag/3744/" target="_blank">計(jì)算機(jī)視覺(jué)領(lǐng)域一直是個(gè)重要的課題。SAM的圖像分割功能,是機(jī)器視覺(jué)的核心任務(wù)之一。過(guò)去,機(jī)器視覺(jué)分割圖像的過(guò)程需要大量圖像標(biāo)注、堆疊算法,消耗大量算力。如今,SAM更容易地實(shí)現(xiàn)了機(jī)器視覺(jué)的目標(biāo)。
Meta將SAM大模型和背后數(shù)據(jù)集一并開(kāi)源,相關(guān)的研究手稿也于今年4月5日發(fā)布在arXiv上(用于學(xué)術(shù)交流的預(yù)印本平臺(tái)),作者有Alexander Kirillov,Eric Mintun等12人。
此后,SAM在開(kāi)源社區(qū)Github上獲得大量關(guān)注,一些華人學(xué)者又照此原理提出了相關(guān)的大模型GroundingDI-NO,用于物體檢測(cè),不久GitHub上有人再創(chuàng)新,將GroundingDINO和SAM結(jié)合,達(dá)到了對(duì)圖像識(shí)別、檢測(cè)、分割的效果。
汪齊齊表示,該模型在準(zhǔn)確程度、效率上,達(dá)到了驚人的提升。尤其是SAM開(kāi)源的SA-1B數(shù)據(jù)庫(kù),用巨量的圖像以及更加巨量的Mask(這里譯為圖層遮罩),將有助于許多科研項(xiàng)目和商業(yè)化項(xiàng)目在高起點(diǎn)上快速更新迭代,產(chǎn)生更好的模型和更優(yōu)化的數(shù)據(jù)。
Meta從AR、VR、內(nèi)容創(chuàng)建等領(lǐng)域,介紹了SAM的應(yīng)用場(chǎng)景。中國(guó)的專家看到了更廣泛的應(yīng)用場(chǎng)景。
羅訓(xùn)對(duì)記者表示,鑒于計(jì)算機(jī)視覺(jué)的廣泛應(yīng)用場(chǎng)景,SAM的發(fā)布對(duì)產(chǎn)業(yè)的影響也會(huì)是巨大的,會(huì)賦能更多的長(zhǎng)尾創(chuàng)新者進(jìn)入產(chǎn)業(yè),并進(jìn)一步豐富應(yīng)用場(chǎng)景和商業(yè)模式。
汪齊齊表示,早前人工智能技術(shù)就能實(shí)現(xiàn)回答用戶問(wèn)題的功能,而Chat-GPT第一次讓很多人產(chǎn)生了“生成的回復(fù)可以在接受的比例下用于日常、商用和科研”,并因此達(dá)到了在這個(gè)垂直領(lǐng)域前所未有的高度。目前SAM的分割結(jié)果,以及其公開(kāi)的大量供公眾使用的資源來(lái)看,SAM在其擅長(zhǎng)的垂直領(lǐng)域也達(dá)到了相當(dāng)可觀的高度,并會(huì)從技術(shù)、數(shù)據(jù)以及對(duì)于這個(gè)領(lǐng)域的關(guān)注度等多方面幫助計(jì)算機(jī)視覺(jué)在短時(shí)間內(nèi)產(chǎn)生大量突破,而計(jì)算機(jī)視覺(jué),是一個(gè)非常重要的“廣義AI生態(tài)”中的基礎(chǔ)設(shè)施,該方面的突破將實(shí)現(xiàn)對(duì)數(shù)字化世界的理解和升級(jí),帶來(lái)質(zhì)變的效率和價(jià)值提升。
IEEE會(huì)士、河海大學(xué)信息科學(xué)與工程學(xué)院院長(zhǎng)韓光潔對(duì)記者表示,SAM將會(huì)在自動(dòng)駕駛、安防控制、醫(yī)學(xué)影像處理等應(yīng)用領(lǐng)域改變業(yè)態(tài)布局,甚至引發(fā)技術(shù)革命。SAM作為一個(gè)基礎(chǔ)模型,可為這些應(yīng)用領(lǐng)域快速孵化出適用性更強(qiáng)的專用網(wǎng)絡(luò)模型。
SAM的變革性可能會(huì)顛覆一批原有的AI技術(shù)優(yōu)勢(shì)。汪齊齊表示,視覺(jué)大模型會(huì)在相當(dāng)多的領(lǐng)域抵消技術(shù)壁壘,這在任何一次產(chǎn)業(yè)技術(shù)升級(jí)中都多次出現(xiàn),也是無(wú)法避免的。
羅訓(xùn)表示,通用大模型就相當(dāng)于AI的能力開(kāi)放平臺(tái),之前頭部企業(yè)的AI能力優(yōu)勢(shì),會(huì)因?yàn)橥ㄓ么竽P偷呐d起而被一定程度削弱。但是這些企業(yè)是否本身會(huì)變?nèi)?,取決于它們的轉(zhuǎn)型。
羅訓(xùn)舉例稱,回顧移動(dòng)計(jì)算在本世紀(jì)前十年的變化,iOS和安卓的能力開(kāi)放平臺(tái)在賦能長(zhǎng)尾創(chuàng)新者方面起到了非常重要的作用,極大增加了移動(dòng)計(jì)算產(chǎn)業(yè)規(guī)模。在移動(dòng)計(jì)算領(lǐng)域,WindowsMobile和塞班的封閉平臺(tái)最終因?yàn)槿狈Ω?jìng)爭(zhēng)力而退出了市場(chǎng)。
汪齊齊表示,作為有核心技術(shù)儲(chǔ)備和深入理解的企業(yè),首先是需要擁抱大模型,尤其是應(yīng)該感謝相對(duì)公開(kāi)的大模型,將自己對(duì)于產(chǎn)業(yè)的理解和領(lǐng)先部分,在大模型的加持下快速升級(jí),演化出更新的形態(tài)。同時(shí),計(jì)算機(jī)視覺(jué)領(lǐng)域也一定會(huì)有大模型目前還不擅長(zhǎng)的領(lǐng)域,仍然可以作為技術(shù)壁壘,并在這些方面繼續(xù)深挖獨(dú)有優(yōu)勢(shì)。
“AIGC帶來(lái)知識(shí)和技術(shù)的平權(quán)?
此前有科技企業(yè)表示,AIGC的本質(zhì)是技術(shù)平權(quán)和知識(shí)平權(quán),這在很大程度上將大廠與小廠拉到了同一起跑線上。
羅訓(xùn)就該觀點(diǎn)對(duì)記者表示,技術(shù)和知識(shí)平權(quán)的說(shuō)法并不是很準(zhǔn)確,因?yàn)橹安](méi)有系統(tǒng)性的歧視。AIGC帶來(lái)的是“易得”,本質(zhì)上是市場(chǎng)規(guī)模急劇擴(kuò)大后的成本降低。AIGC會(huì)促進(jìn)整個(gè)社會(huì)對(duì)算力和計(jì)算模式使用的轉(zhuǎn)型升級(jí),大規(guī)模提高AI使用者的生產(chǎn)效率,同時(shí)利好AI軟硬件設(shè)施生態(tài)企業(yè)。過(guò)程中,巨頭和大廠是技術(shù)進(jìn)步的先期投入者,它們?cè)谄渲芷趦?nèi)獲取回報(bào)也是合理的,因?yàn)樗鼈兏冻隽烁叩某杀荆渤袚?dān)了更大的風(fēng)險(xiǎn)。
汪齊齊認(rèn)為,AIGC確實(shí)帶來(lái)了一定的技術(shù)平權(quán),但技術(shù)本身是有一個(gè)價(jià)值屬性的。例如,曾經(jīng)做網(wǎng)頁(yè)可以帶來(lái)不菲的收入,隨著工具升級(jí)和模板的完善,一個(gè)漂亮網(wǎng)頁(yè)制作難度數(shù)量級(jí)地下降,但是他帶來(lái)的價(jià)值也產(chǎn)生數(shù)量級(jí)地下降。
同樣,AIGC將一個(gè)需要大量技術(shù)和知識(shí)儲(chǔ)備才能產(chǎn)生優(yōu)質(zhì)內(nèi)容的時(shí)代,帶入輕易產(chǎn)生的優(yōu)質(zhì)內(nèi)容的時(shí)代,這會(huì)讓原有定義的“優(yōu)質(zhì)內(nèi)容”的平均價(jià)值急速下降。
汪齊齊表示,AIGC是否帶來(lái)了知識(shí)平權(quán)仍然有待商榷。長(zhǎng)期來(lái)看,AIGC可能會(huì)使人們更容易獲取到真實(shí)有用的知識(shí)。但是今天,人們還處于“技術(shù)帶來(lái)了前所未有的體量的知識(shí),也同時(shí)讓篩選這些知識(shí)的可用度達(dá)到了前所未有的高成本”。
汪齊齊表示,盡管AIGC可以產(chǎn)生大量的知識(shí)和內(nèi)容,但其準(zhǔn)確性和可信度是個(gè)挑戰(zhàn),相當(dāng)部分AIGC是基于老的訓(xùn)練數(shù)據(jù),“一本正經(jīng)供應(yīng)錯(cuò)誤知識(shí)”的案例已經(jīng)有很多。目前在大量、無(wú)法辨別真?zhèn)蔚臄?shù)據(jù)和內(nèi)容的情況下,是否真正達(dá)到了知識(shí)平權(quán),是要打問(wèn)號(hào)的。
-
SAM
+關(guān)注
關(guān)注
0文章
112瀏覽量
33519 -
ChatGPT
+關(guān)注
關(guān)注
29文章
1558瀏覽量
7595 -
AIGC
+關(guān)注
關(guān)注
1文章
361瀏覽量
1539 -
大模型
+關(guān)注
關(guān)注
2文章
2423瀏覽量
2640
原文標(biāo)題:對(duì)話三位IEEE專家:如何理解SAM視覺(jué)大模型
文章出處:【微信號(hào):IEEE_China,微信公眾號(hào):IEEE電氣電子工程師】歡迎添加關(guān)注!文章轉(zhuǎn)載請(qǐng)注明出處。
發(fā)布評(píng)論請(qǐng)先 登錄
相關(guān)推薦
評(píng)論