天天看點

移動影像計算時代,那些AI無法替代的事

前言:嗨囖,大家好,這裡是數懶,今天要跟大家聊一個枯燥但又特别有意思的話題,那就是關于移動影像的未來趨勢。之是以說它枯燥,因為目前大部分的移動影像在技術硬體瓶頸之下,基本上都依靠AI算法進行圖檔的優化,雖然優化出來的照片确實十分讨喜,但也存在一個問題,當每一家的影像都依賴AI算法優化的時候,也就意味着每個品牌,甚至每個人出來的照片風格以及格調等等都幾乎一樣,這樣的情況從藝術的層面來說自然是顯得相當枯燥。不過有意思的是在聽完了vivo影像戰略溝通會之後,原來移動影像也能把人文感性的情感融入到計算攝影裡,這是一個特别有意思的移動影像的未來趨勢,也是接下來我要跟大家分享這場溝通會裡一些創作啟發。

移動影像計算時代,那些AI無法替代的事

技術研發與創作者的交流

這場溝通會跟以往不大一樣,以前都是以技術交流為主,有很多硬核的黑科技來給我們做點分享以及科普,但這一次不僅隻有技術上的分享,攝影藝術家段嶽衡⽼師、攝影藝術家⾼遠⽼師、⻘年導演張⼩鲨都參與了這次的溝通會,并且通過他們的作品來表達出影像技術對于藝術創作的啟發以及重要性,是以溝通會上有一半的時間都能感受到科技結合人性化的深度探讨。

移動影像計算時代,那些AI無法替代的事

段嶽衡老師分享了用vivo手機創作的風光,他覺得好的⻛光有三⼤要素:⾊彩、影調、畫質。在段嶽衡老師的vivo手機作品下有天藍的清澈、巍峨的故宮、唯美的山水以及夕陽的光影等等,在這些作品之下畫面已經不是單純還原,畫面色彩真實、飽滿,影調的呈現立體有層次,畫質細節豐富、細膩,畫面的整體都加深了段嶽衡老師的主觀情感。

移動影像計算時代,那些AI無法替代的事

在段嶽衡老師介紹他的作品以及分享他的拍攝分享時,能夠讓感受到vivo手機在色彩、影調、畫質上有着自己的一套完整的處理方式。

移動影像計算時代,那些AI無法替代的事

色彩有vivo與蔡司聯合精細調教,是以準确度特别高;影調是借鑒了攝影行業裡頭常用的技巧“智能⽩加⿊減“,然後把AE訓練集拓展⾄原來的5.5倍,影調的平衡讓畫面看起類立體感更強的同時,也讓畫面的故事感更濃郁;關于畫質方面,段⽼師也在分享中提到了SuperRaw功能,可以輸出14bit⾼位深的多幀算法融合SuperRAW⽂件,另外在長焦作品裡也可以看到vivo手機的成像也特别銳利。

移動影像計算時代,那些AI無法替代的事

聊到關于畫質這一部分,vivo給我們埋下了個彩蛋,那就是段嶽衡老師帶着新一代技術評測機拍回來的一些樣張,暗光部分的表現尤為驚豔。

移動影像計算時代,那些AI無法替代的事
移動影像計算時代,那些AI無法替代的事

随手抽取了兩張段嶽衡老師在暗光之下拍攝的大足石刻圖,看圖的那一刻确實有被照片裡豐富的細節以及莊嚴的色彩震撼到,真的是不愧現為世界文化遺産,世界八大石窟之一。當然從這組大足石刻的暗光圖可以看到vivo這款新機在暗光影調這一方面的處理以及超越所見,以前傳統的暗光照片都是暗部與亮部都是一樣亮,雖說暗部有細節,但粗暴地拉亮暗部會讓照片看上去缺少立體感。但這組大足石刻的暗光照片裡,佛像的立體感極強,明暗光比處理相當到位,暗部保留暗光陰影的同時也保留了細節,更關鍵是暗光略帶金光的氛圍感也真實還原出來,每張畫面裡佛像的光澤感以及周圍石窟的腐蝕痕迹都展現得淋漓盡緻,同時能讓人感受到暗光之下那種靜谧莊嚴環境。

移動影像計算時代,那些AI無法替代的事

在這次樣張專業的畫質背後有vivo自研的“光學超分算法”還有一項全新的技術VCS仿⽣光譜技術(vivo camera-bionic spectrum),這項技術的思路特别有意思,也是目前我覺得在影像優化裡頭最為人性化且讓畫面看起來更舒服的一項技術。攝影無非就是記錄光影,是以當光線進入傳感器的時候與光線進入人眼其實是大不相同,是以普通圖像傳感器的color filter光譜要貼近人眼看到的效果時,需要經過複雜處理後,才能還原人眼所感覺的資訊,這個處理過程會導緻畫質變差。VCS技術,就是通過改進color filter,讓傳感器接收的原始資訊不斷接近人眼,進而實作更好的噪聲表現和色彩還原,信噪比提升20%, 色彩還原提升15%。

移動影像計算時代,那些AI無法替代的事

用我自己的語言小結就是參照了生物學,利用人眼的效果作為參考标準來實作色彩優化。再配合上更大的傳感器、大量的場景訓練,才練就出如今經驗全場的風光大片效果。

移動影像計算時代,那些AI無法替代的事

在聊完風光大片之後,人像部分就由⾼遠⽼師則專門分享X80創作的人像作品,這個作品最有意思的地方在于老師拍攝了一組從0~90歲+的照片,回顧⼈⽣101個珍貴時刻,人文攝影一直都是攝影創作者們特别熱衷的主題,作為一種具有社會價值的記錄,去呈現人類社會文化為主的攝影類别,這類的攝影對于拍攝器材的要求并不低,尤其是在光線複雜的情況下去做快速的畫面捕抓。

從出生到青年到中年再到衰老,于老師用手機記錄下了一個客觀的世界,但看者卻能從該作品裡的每個時期的照片都有着該年齡段的氛圍感,一種獨特的主觀情感,幼時的人像畫面色彩清新通透,小朋友的肌膚顯得吹彈可破,每一個人眼神的抓拍都極其到位。

移動影像計算時代,那些AI無法替代的事

到了青年部分色彩顯得鮮豔亮麗充滿活力,随後就是中年到老年的畫面,vivo之是以能在人像美化方面拿捏恰到,vivo在這麼多年來一直在以不同年齡、性别、場景的數以百萬計的素材,經過反複的機器學習成長,推出vivo全新更新的微米級煥膚塑顔技術,使皮膚觀感更加自然、健康,也更好地保留了五官的立體感。這一整組的作品裡,能讓人感受到讓人心曠神怡的色彩,明亮的畫面散發出一種朝氣蓬勃的生命力,即便是老人的畫面,也能讓人感受一種歲月洗禮下的生命燦爛。

移動影像計算時代,那些AI無法替代的事

說起人像,我自己個人是從vivo X1開始用,幾乎每一代都是我的主力機,作為女生兼攝影師,手機人像是我特别看重的一部分,其實從X1開始,在我接觸過這麼多的手機裡,vivo人像一直都是天花闆級别,不僅是X系列,還有後來的S系列都是,無論是前置攝像自拍也好還是後置人像,一直以來我都覺得是表現最好的。

移動影像計算時代,那些AI無法替代的事

在人像上vivo是拿捏到了人像攝影裡的精髓,⼈像了解,⼈像美化,⼈像氛圍,這三大點也演變成了vivo如今的“超感⼈像系統”的三⼤核⼼技術子產品。

這三個子產品其實就是我們現在拍寫真時候用的套路:化妝造型、環境影調氛圍、後期修圖。

移動影像計算時代,那些AI無法替代的事

vivo的人像照片之是以好看,最重要的是vivo人像并不隻是一個單純的美顔,而是注重處理人與景的關系,這個就是經典攝影師拍攝思維,相比起普通人,攝影師更看重整個畫面的格局。vivo“人像氛圍融合”技術,基于人像語義了解,在影調、色彩、亮度、虛化等層面上進行人與場景的融合處理,實作人與景和諧、自然的效果,這就相當于vivo在攝影上自帶攝影人的思維,也是為什麼普通人拍出來的照片都好看的原因。随後參考專業鏡頭拍出來的畫面氛圍感,也就是與蔡司合作的深度感覺虛化,還原了多種經典蔡司鏡頭的虛化效果,把人像與此場景融合在一起,這才有了如今媲美專業器材的人像大片。

移動影像計算時代,那些AI無法替代的事

最後來到視訊部分,⻘年導演張⼩鲨老師則是帶來了一部用vivo X80 Pro拍攝的短片,利用vivo X80 Pro的專業Log模式,讓片子擁有理想的後期空間。該片裡有很多跟随鏡頭,但專業的防抖性能帶來很不錯的穩定效果。另外在逆光環境下的HDR表現也顯得頗為專業。

移動影像計算時代,那些AI無法替代的事

視訊應該是近兩年猛增的市場需求,vivo的自研晶片也算是來得十分及時,從上面的視訊短片可以看出通過自研晶片的計算加成,不僅照片體驗提升,在視訊方面也有着明顯的進步,從HDR效果到夜景的表現,手機的響應速度都相當理想,也适合1個人去自由地創作。

從這次的交流當中所洞察出的影像未來趨勢

從上面3位老師的分享裡,我們基本上可以看到下一代影像旗艦的雛形,原本已有的優秀功能在畫質提升的基礎上效果會更好,其中由更大的傳感器,更優秀的長焦效果,在技術上有自研的“光學超分算法”還有一項全新的技術VCS仿⽣光譜技術,蔡司相關的内容肯定不會落下。當然要數我最期待的應該還是新一代的vivo自研晶片。

移動影像計算時代,那些AI無法替代的事

新的自研晶片從傳統ISP架構更新到了AI-ISP架構,這裡官方技術人員介紹得比較專業,在這裡我用我自己簡短簡單地語言來描述就是給傳統的影像處理器裝個腦子,也就是這款晶片比原來的晶片更聰明,且應對複雜和未知的能力更強更快。簡單舉個例子,比方說在夜景時我們會遇到的環境會更複雜,當你在夜景拍攝裡有個紫色的霓虹燈時,如果傳統的ISP并沒有處理過類似的問題,那麼這個紫色的霓虹燈有可能就會偏色甚至出錯,但如果有了AI的介入,就相當于它能夠從更精細的色彩問題去判斷,進而計算出最合适的效果呈現出來,簡單來說就是會“思考“判斷出最優的解決方案。同時這個AI-ISP架構也意味着全新更新的AI-NR降噪、HDR影調融合、MEMC插幀等算法,總之就是vivo這次的晶片性能把牙膏給擠爆了。

移動影像計算時代,那些AI無法替代的事

現在的移動攝影硬體大多都到達了瓶頸期,傳感器的大小、攝像頭模組等,手機的機身限制,為了兼顧手機手感以及尺寸,基本上也隻能止步于一英寸左右的傳感器,這也是為什麼近年來大部分手機廠商把精力轉移到AI計算上,在影像技術這一部分直接選擇躺平。

如今的vivo手握蔡司合作的研發,影像硬體要挑最好的,AI算法還做到自家的影像架構裡融合在一起,明明靠着堆料就能躺赢,非得搞自研,vivo基于AI-ISP這個架構的革新,自研片上記憶體單元、自研AI計算單元、自研圖像處理單元,這代自研革新最大的優勢在于通過提升資料吞吐速率用超高的能效比來最大限度發揮出AI的圖像算法,有全新的算法作為支撐,那也就不難猜測接下來vivo在影像硬體上應該也會推新,接下來我們可以期待vivo在夜景以及視訊等等上會有一個質的飛躍。

移動影像計算時代,那些AI無法替代的事

看到如今的vivo,不禁讓我想起前段時間去講影像分享課時的一段話:“雖然現在是AI算法時代,但AI出來的終究是大資料下的輔助,想要拍出自己風格的照片還得要有自己的想法。“這個感覺就像是vivo在如今的AI計算攝影的時代之下,vivo并不是純依靠AI,而是vivo融入了品牌對影像人文化了解的融合。

特别佩服這樣的一個做影像産品的思路,這相當于把一個專業攝影師的一整套攝影流程都濃縮在了産品裡,相當于從器材到參數調整到後期,一整個矩陣下來就把照片完成了,它能讓你把整個心思都放在記錄畫面上,讓普通⼈也可以通過簡單操作收獲令⼈動容的影像。

移動影像未來趨勢 AI計算之上的人性訴求

vivo接下來要推出的全新影像旗艦系列應該就是标志着移動影像未來趨勢,通過更簡單、人性化的操作,讓每一位普通消費者都能拍攝出媲美專業的照片或視訊。要達成這一理念,把這工作量全推給AI顯然是不靠譜的,AI充其量隻是一個輔助的角色,影像品質的進步同樣需要硬體推陳出新,比方說更大的傳感器,讓畫面有更多的圖像資訊可以進行算法處理,同時也能給到創作者更多的後期空間。

移動影像計算時代,那些AI無法替代的事

是以vivo與蔡司聯合開發,投入大量的資金精力去自研晶片以及算法,形成一個完整的攝影技術矩陣,從硬體到軟體同時疊代更新。

移動影像計算時代,那些AI無法替代的事

不得不說vivo在移動影像技術這一方面在手機行業内一直出于模範代表,這次溝通會上有光學超分算法、VCS仿生光譜技術、蒼穹夜景系統、超感人像系統,全新的架構AI-ISP、HDR影調融合算法等等,還有一系列的自研技術講解,算法的提升應該是為了接下來的新品要搭載的硬體作為支撐。接下來我們期待vivo即将帶來的影像旗艦新品的最終效果。最後我相信移動影像未來趨勢必是把獨家自研技術掌握在自己手裡的才是最好的牌面。

繼續閱讀