越來越多的人選擇用通過照片與視頻的方式保留記憶，而在剛過去的五一假期，出門游玩中攜帶一部影像系統(tǒng)優(yōu)秀的手機(jī)就能展現(xiàn)出對(duì)于生活記錄的優(yōu)勢(shì)，而對(duì)于一部拍照優(yōu)秀的手機(jī)來說，除了鏡頭參數(shù)的耀眼外，也離不開手機(jī)SoC和AI提供的性能支持。

如果說起安卓手機(jī)陣營中，影像性能最好的SoC，旗艦機(jī)型標(biāo)配的驍龍865自然當(dāng)仁不讓，除內(nèi)置Spectra 480ISP外，還有Qualcomm第五代人工智能引擎AI Engine的加持。提起AI，很多人會(huì)下意識(shí)和營銷手段、噱頭聯(lián)系在一起，但從實(shí)際的移動(dòng)端影像系統(tǒng)來看，通過SoC內(nèi)置的Spectra 480ISP+Qualcomm AI引擎的結(jié)合，給手機(jī)拍照有著強(qiáng)悍的表現(xiàn)，下面我們結(jié)合搭載865 SoC手機(jī)的實(shí)際拍照表現(xiàn)來闡述第五代Qualcomm人工智能引擎AI Engine在實(shí)際拍照中的作用。

01AI引擎帶來是全方位畫質(zhì)升級(jí)

在移動(dòng)端影像飛速發(fā)展的過程中，業(yè)內(nèi)也嘗試通過對(duì)于移動(dòng)端鏡頭的升級(jí)全面帶動(dòng)移動(dòng)端影像的進(jìn)步，但移動(dòng)端影像系統(tǒng)的發(fā)展方向并不是復(fù)刻專業(yè)相機(jī)的“鏡頭路線”，而是借助移動(dòng)端使用便捷的優(yōu)勢(shì)讓普羅大眾記錄生活。而手機(jī)作為當(dāng)前用戶最智能的使用終端，通過AI引擎實(shí)現(xiàn)對(duì)于視覺能力的全方位提升才是更貼近用戶的發(fā)展方向。

可以說當(dāng)前相機(jī)的影像系統(tǒng)和手機(jī)影像系統(tǒng)走上了兩種不同的方向。相機(jī)追求的是保留更多細(xì)節(jié)便于留出更多后期處理空間，移動(dòng)端則是更快更便捷記錄與分享生活。在這一過程中，移動(dòng)端通過AI引擎對(duì)于成像結(jié)果的自動(dòng)調(diào)校就起到了很大的增益作用。以的影像系統(tǒng)為例，AI引擎對(duì)于這套影像系統(tǒng)的實(shí)際使用也有明顯的增益作用。

驍龍865的AI算力來源于第五代Qualcomm人工智能引擎AI Engine。第五代AI引擎則由 Kryo 585 CPU+Adreno 650 GPU+Hexagon 698張量構(gòu)成，每一部分都有各自的運(yùn)算專長，系統(tǒng)會(huì)根據(jù)實(shí)際負(fù)載將需求分配到到CPU、GPU和張量處理器上。高通第五代AI Engine的AI算力達(dá)到了15TOPS，保證高性能與功耗低兼?zhèn)洌瑵M足移動(dòng)端的使用需求。

常規(guī)拍攝對(duì)于圖片表現(xiàn)力的增強(qiáng)

Pro常規(guī)樣張

常規(guī)場景下移動(dòng)端拍攝過程經(jīng)歷“鏡頭與CMOS收集圖片信息”到“Spectra 480 ISP+AI引擎增強(qiáng)畫面表現(xiàn)力”再到“最終成像結(jié)果”的過程。在第二個(gè)步驟中，Spectra 480 ISP和AI引擎會(huì)根據(jù)實(shí)際的算法提升圖片的細(xì)節(jié)與質(zhì)感，達(dá)到增強(qiáng)像系統(tǒng)表現(xiàn)力的目的。

AI場景識(shí)別是提升拍攝表現(xiàn)力的關(guān)鍵

AI引擎提升最終拍攝表現(xiàn)力的原因主要是AI基于深度學(xué)習(xí)功能對(duì)移動(dòng)端進(jìn)行最終畫質(zhì)的針對(duì)性優(yōu)化，保證拍攝的最終觀感。當(dāng)你使用移動(dòng)端影像拍攝時(shí)，驍龍865內(nèi)置的第五代AI引擎則會(huì)識(shí)別你當(dāng)前拍攝場景是人、食物、風(fēng)景還是是動(dòng)物。

AI場景識(shí)別

AI優(yōu)化拍攝過程中最重要的是AI引擎對(duì)于場景的識(shí)別。采用驍龍865的手機(jī)會(huì)默認(rèn)打開這個(gè)功能，第五代AI引擎會(huì)幫助用戶自動(dòng)識(shí)別當(dāng)前場景并選擇最佳的拍攝參數(shù)，并會(huì)根據(jù)實(shí)際場景選擇“夜景模式”、“微距模式”等。同時(shí)，AI引擎還會(huì)對(duì)拍攝選擇合適的曝光和色彩調(diào)節(jié)，讓用戶從繁瑣的拍攝參數(shù)中解放，享受所見即所得的拍攝樂趣。

弱光環(huán)境下提升拍攝降噪的處理

OPPO Pro弱光拍攝

弱光對(duì)于移動(dòng)端的拍攝要求相對(duì)較高。這是因?yàn)槭謾C(jī)CMOS受元器件體積的限制，弱光下的表現(xiàn)往往不盡人意。移動(dòng)端解決弱光拍攝的手段是通過短時(shí)間內(nèi)拍攝多張不同曝光下的照片，通過挑選與合成的方式實(shí)現(xiàn)對(duì)于移動(dòng)端弱光拍攝增強(qiáng)的效果。這個(gè)過程中除了對(duì)于鏡頭與CMOS參數(shù)的硬件要求外，也對(duì)于ISP和AI Engine的計(jì)算性能提出了要求。

搭載驍龍865 SoC的OPPO Find X2 Pro 上的“超級(jí)夜景 3.0”技術(shù)，一方面通過Spectra 480 ISP以每秒處理20億像素的速度處理圖片信息，另一方面利用AI引擎則通過場景識(shí)別等功能實(shí)現(xiàn)對(duì)于圖片的噪點(diǎn)去除、壞點(diǎn)修補(bǔ)、曝光校正等功能，進(jìn)而呈現(xiàn)優(yōu)質(zhì)的弱光拍攝效果。正式在ISP和AI Engine的聯(lián)合作用下，實(shí)現(xiàn)了對(duì)于實(shí)際的夜景環(huán)境進(jìn)行圖像重建和色彩重建。

對(duì)于高清視頻支持

視頻是當(dāng)前最重要的分享媒介之一，移動(dòng)端的影像系統(tǒng)也讓普通人能夠通過極低的成本完成對(duì)于視頻的錄制與處理。用戶對(duì)于視頻的需求無非兩點(diǎn)——“看得清”（更高的畫質(zhì)）和“拍得穩(wěn)”（更好的防抖控制）。采用驍龍865 SoC的手機(jī)實(shí)現(xiàn)對(duì)于 4K 視頻的錄制，而驍龍865借力Spectra 480ISP與第五代AI引擎最高實(shí)現(xiàn)了對(duì)于8K視頻的錄制。

在Spectra 480 ISP和高通第五代AI Engine的算力支持下，移動(dòng)端影像系統(tǒng)最終成像表現(xiàn)有了長足的進(jìn)步。AI引擎在不同的環(huán)境下帶來了不同的畫面表現(xiàn)力，使移動(dòng)端影像系統(tǒng)擺脫了傳統(tǒng)拼鏡頭與參數(shù)的桎梏，帶來了更多的拍攝趣味、更豐富的畫面色彩表現(xiàn)、更優(yōu)秀的成像效果。

02除了對(duì)影像效果升級(jí)外，AI提升了相機(jī)的智能程度

上文我們闡述了高通驍龍第五代AI引擎在手機(jī)影像系統(tǒng)中的具體作用。從AI引擎在影像系統(tǒng)中的處理我們不難發(fā)現(xiàn)“不搭載AI引擎的傳統(tǒng)智能手機(jī)”與搭載“搭載AI引擎的智能手機(jī)”的區(qū)別：

傳統(tǒng)智能手機(jī)只能一對(duì)一解決問題，用戶如果要得到一張精致的照片，首先需要用相機(jī)拍出一張照片，然后通過App對(duì)圖片進(jìn)行后期處理；而搭載AI引擎的智能手機(jī)則可以在用戶拍攝后就可以得到精致的照片，無需任何處理。

這個(gè)過程中，AI引擎根據(jù)用戶的實(shí)際需求簡化了拍照的流程。AI引擎對(duì)于移動(dòng)端最重要的提升是實(shí)現(xiàn)移動(dòng)設(shè)備對(duì)于人需求的理解：通過提升移動(dòng)設(shè)備的感知能力，讓移動(dòng)設(shè)備了解消費(fèi)者的需求才是移動(dòng)端的未來，而高通AI引擎深入?yún)⑴c移動(dòng)端影像系統(tǒng)，進(jìn)而讓移動(dòng)端影像系統(tǒng)變得更好用。

AI引擎帶來平滑順暢的變焦過程

移動(dòng)端的影像系統(tǒng)受制于體積無法搭載體積龐大的光學(xué)變焦鏡頭，因而移動(dòng)端的變焦是通過后置多攝的鏡頭接力與算法補(bǔ)足實(shí)現(xiàn)的。目前移動(dòng)端主流的變焦是通過在廣角、主攝與長焦鏡頭中切換來實(shí)現(xiàn)的。但因?yàn)槎鄠€(gè)攝像頭的位置不一樣，所以在變焦過程中會(huì)出現(xiàn)變焦過程不夠順暢的問題。

采用驍龍865手機(jī)的變焦效果

而采用驍龍865的手機(jī)則能夠?qū)崿F(xiàn)平滑的光學(xué)變焦和保持變焦過程中畫面曝光與色彩的一致， 可以說Spectra 480 ISP和高通AI引擎正是移動(dòng)端實(shí)現(xiàn)平滑變焦幕后功臣。移動(dòng)端影像系統(tǒng)不借助AI引擎強(qiáng)大的算力能夠保證用戶在不同鏡頭的切換過程中保持拍攝畫面取景框的穩(wěn)定，從而使移動(dòng)端變焦過程呈現(xiàn)更平滑流暢的使用效果。

同時(shí)，移動(dòng)端影像系統(tǒng)變焦面臨的另外一個(gè)問題是拍攝最終樣張的實(shí)際曝光與色彩呈現(xiàn)不一致的現(xiàn)象，這是移動(dòng)端影像系統(tǒng)常見的問題。而高通第五代 AI 引擎以運(yùn)算的形式修正拍攝畫面的參數(shù)，實(shí)時(shí)優(yōu)化變焦畫面，最終將變焦拍攝得到的圖片風(fēng)格、色彩與曝光控制在同一風(fēng)格。

眾多手機(jī)廠商在高通第五代AI Engine基礎(chǔ)上開發(fā)屬于自己的變焦技術(shù)。其中realme在高通第五代AI Engine的基礎(chǔ)上研發(fā)出SAT平滑變焦技術(shù)，可以模擬出單反鏡頭變焦的感覺，多個(gè)鏡頭切換畫面穩(wěn)定不跳躍，而且可以保持曝光、色溫等效果的一致。

AI引擎實(shí)現(xiàn)對(duì)于4單元色彩濾鏡陣列硬件加速

高通憑借這種理解在AI引擎中實(shí)現(xiàn)了對(duì)于4單元色彩濾鏡陣列硬件加速的支持?，F(xiàn)在很多的移動(dòng)端傳感器是像素四合一，像素四合一的優(yōu)勢(shì)是提升實(shí)際拍攝效果，但過去在處理像素四合一的運(yùn)算是1個(gè)像素1個(gè)像素進(jìn)行的，而AI引擎的硬件加速則實(shí)現(xiàn)對(duì)一次運(yùn)行處理4個(gè)像素，通過CPU、DSP與ISP的接入處理，降低功耗的同時(shí)提升運(yùn)行效率。

4單元色彩濾鏡陣列硬件加速

AI引擎帶來更聰明的對(duì)焦

移動(dòng)端影像的躍進(jìn)帶來的是用戶對(duì)于移動(dòng)端影像系統(tǒng)的對(duì)焦有著更高的要求。在AI引擎全面應(yīng)用移動(dòng)端之前，移動(dòng)端已經(jīng)出現(xiàn)了提升對(duì)焦效率的算法，但AI引擎加持下的手機(jī)對(duì)焦則有了聰敏的大腦，移動(dòng)端對(duì)焦效率得到大幅度提升，經(jīng)過AI場景識(shí)別的取景框會(huì)自動(dòng)識(shí)別畫面焦點(diǎn)并實(shí)時(shí)追焦，實(shí)現(xiàn)真正意義上的“自動(dòng)對(duì)焦”。

NEX3s“人眼追焦”功能需要AI Engine支持

此外，有些傳感器搭載的“全對(duì)焦區(qū)域自動(dòng)”功能則需要同分調(diào)用Spectra 480 ISP和第五代AI Engine性能，帶來更準(zhǔn)確的對(duì)焦效果；還有vivo NEX3s借助AI Engine的算力實(shí)現(xiàn)了對(duì)于“人眼追焦”功能的實(shí)現(xiàn)，進(jìn)而實(shí)現(xiàn)了更好的人像拍攝效果。

上述這些讓人驚艷的拍攝功能，如果離了AI引擎，會(huì)出現(xiàn)不能實(shí)現(xiàn)或者表現(xiàn)效果大打折扣的問題。而AI引擎對(duì)于影像系統(tǒng)的影響還體現(xiàn)在拍攝過程的電量消耗上：不僅可以將攝像頭的功耗控制在1毫瓦以內(nèi)，還可以將視頻拍攝的功耗降低16%。而ISP+AI引擎在通過全方位的優(yōu)化提升移動(dòng)端影像系統(tǒng)的使用體驗(yàn)，重新定位移動(dòng)端影像操作的前進(jìn)方向。

03AI引擎還提升了移動(dòng)端后期處理

如果手機(jī)不具備AI算力或者AI算力不足，我們可以借助第三方App對(duì)圖片進(jìn)行AI處理，具體步驟為：“圖片傳輸?shù)皆贫恕薄敖柚?wù)器AI算力對(duì)圖片進(jìn)行處理”→“從云端回本地”。在這個(gè)過程中不僅需要流量，還對(duì)于網(wǎng)絡(luò)也有一定的要求，當(dāng)移動(dòng)端的AI算力足夠強(qiáng)，我們可以在手機(jī)端實(shí)現(xiàn)對(duì)于圖片的AI美化。

實(shí)時(shí)路人消除

在拍攝過程中，很難避免路人搶鏡，而搭載高通865的概念機(jī)借助第五代AI引擎實(shí)現(xiàn)了實(shí)時(shí)路人消除功能。

實(shí)時(shí)路人消除

這種功能依靠移動(dòng)端高通第五代AI引擎的強(qiáng)大算力實(shí)現(xiàn)了對(duì)于圖片與視頻的復(fù)原，消除視頻與圖片中的“路人甲”，進(jìn)而保證移動(dòng)端的拍攝主體不被搶鏡。保證視頻與圖片的純凈度，突出主體。

AI一鍵換天

“AI一鍵換天”則是移動(dòng)端AI技術(shù)大熱的功能，這項(xiàng)技術(shù)借助高通第五代AI引擎的每秒15萬億次運(yùn)算，在極短的時(shí)間內(nèi)實(shí)現(xiàn)圖像分割，優(yōu)化圖片背景，成為移動(dòng)端的AI修圖神器。

AI一鍵換天

上圖中不難看出，“AI一鍵換天”可以瞬間將圖片中的背景更改為彩色或者換成完全不一樣的天空。特別是當(dāng)我們?cè)谀程幣臄z后，可將不滿意的天空背景換成其他顏色，而手機(jī)廠商搭載的“AI一鍵換天”則就是基于高通第五代AI引擎實(shí)現(xiàn)的。先通過高通第五代AI引擎實(shí)現(xiàn)對(duì)于圖像的分割，繼而根據(jù)用戶需求變換天空色彩與背景，呈現(xiàn)效果如魔法般神奇。

除了上述AI引擎在移動(dòng)端后期的功能，還有AI智能構(gòu)圖、AI聲音對(duì)焦等貫穿于移動(dòng)端影像系統(tǒng)的功能。AI引擎在移動(dòng)端的作用已經(jīng)打通了影像信息采集、影像處理、成像與后期處理等全過程。而高通第五代AI引擎的強(qiáng)大算力是為了更好地滿足用戶對(duì)于Vlog、旅游記錄、保留更清晰的記憶等越來越多、越來越嚴(yán)苛的需求。

04總結(jié)

AI引擎給手機(jī)帶來的優(yōu)勢(shì)是讓手機(jī)越來越智能，越來越好用，越來越理解用戶的心意，而移動(dòng)端影像系統(tǒng)則是AI引擎最能體現(xiàn)價(jià)值與發(fā)揮作用的場景，在AI引擎的加持下，用戶只需要按照AI引擎的指引實(shí)現(xiàn)構(gòu)圖與按下快門就行了。繁瑣的技術(shù)細(xì)節(jié)于傳統(tǒng)的拍攝技巧都可以放諸腦后。

把用來調(diào)節(jié)參數(shù)、考慮技巧與后期處理的時(shí)間解放出來，交給高通第五代AI引擎去處理，這是移動(dòng)端影像系統(tǒng)發(fā)展的必然趨勢(shì)，也是移動(dòng)端在不同環(huán)境下呈現(xiàn)最優(yōu)質(zhì)影像效果的核心。每一段影像都是美好回憶，每一段影像都需要被銘記，而高通第五代AI引擎身居幕后統(tǒng)御移動(dòng)端影像，時(shí)刻候命記錄用戶每一段記憶。