天天看點

經典永流傳,華為雲媒體 AI 讓老電影煥發新生

摘要:近日,在華為雲TechWave全球技術峰會(人工智能&資料)上,馬欄山視訊文創産業園首席專家周蘇嶽受邀發表演講《經典永流傳,媒體 AI 讓老電影煥發新生》,分享與華為雲原生媒體服務合作的媒體AI在老電影修複方面的應用。

本文分享自華為雲社群《華為雲媒體 AI,實作黑白老電影的彩色夢》,原文作者:音視訊大管家 。

近日,華為雲TechWave全球技術峰會(人工智能&資料)在上海成功舉辦。AI技術分論壇以“AI技術創新,加速行業智能更新”為主題,邀請到行業嘉賓分享了AI在網際網路媒體、醫療、環境等行業的落地實踐。馬欄山視訊文創産業園首席專家周蘇嶽受邀發表演講《經典永流傳,媒體 AI 讓老電影煥發新生》,分享與華為雲原生媒體服務合作的媒體AI在老電影修複方面的應用。

華為雲圍繞馬欄山園區企業視訊從制作到釋出全流程業務場景,搭建了馬欄山視訊産業雲,滿足視訊生産、制作、分發等各個環節的雲服務需求。在修複經典影視領域,通過引入AI修複增強和上色技術,解決膠片及錄音帶儲存劣化及當時拍攝技術限制造成的問題,與純人工相比,處理速度可提高100+倍;而引入混合雲平台,使得計算和存儲資源池能夠無限動态擴容,極大提升效率,降低成本。

周蘇嶽指出,利用媒體AI做老電影的修複,特别是黑白視訊上色方面,難度比我們想象的要大很多,以他曾負責的黑白電影《雷鋒》上色為例,主要有兩大難點:第一、搜尋空間大,計算複雜性高;第二、顔色語義資訊複雜,模型建立困難。在AI分論壇上,周蘇嶽表示,要解決這兩大難題,主要是運用多GPU并行計算,建立AI自動上色 + 人工矯正 + AI疊代優化上色的自學習疊代上色工藝;另外,形成整體到局部的疊代優化流程,空間尺度上,通過篩選框定點優化局部顔色,時間尺度上,通過顔色傳播算法優化連續幀之間的顔色效果。

經典永流傳,華為雲媒體 AI 讓老電影煥發新生

馬欄山視訊文創産業園首席專家周蘇嶽

電影《雷鋒》的修複,解決了AI神經網絡自動學習與上色的3大難題:不同幀之間的顔色時序一緻性;單幀圖檔内的顔色空間協調性;物品對象的顔色語義一緻性。周蘇嶽也坦誠道,AI視訊上色還面臨很多挑戰,比如在運動及光影變化明顯時,存在由于焦點不實導緻的輪廓識别精度不高而顔色溢出,少部分物品如衣領、紅領巾等顔色比對錯誤,多人物場景下極少數物品顔色漏上等問題。

周蘇嶽還分享了華為雲原生媒體服務如何高效地幫助馬欄山5G高新視訊公共服務雲平台在影視劇生産、廣電制播及融媒體營運等多場景應用。未來,馬欄山視訊文創産業園與華為雲将進一步加強合作,在篩選框定點優化局部顔色、關鍵幀顔色傳播算法、以及模型層面增加物體追蹤及上色限制方面進行針對性攻關,以解決目前AI系統存在的兩個主要問題:目前模型在低分辨率圖檔(480P)上訓練不适應高清和4K視訊上色;光影變化導緻全局灰階變化,顔色相似性變得模糊。預計明年将會有更優秀的AI工藝生産的經典影視作品跟大家見面。

華為深耕音視訊領域30多年,擁有1000多項音視訊算法專利,在5G、IT基礎設施、智能終端、晶片等方面全棧領先。華為雲原生媒體服務,在老舊視訊修複和标清/高清視訊的超高清轉置方面,有着豐富的經驗,目前已與國内多家媒體平台以及産業園區達成合作,得到業界的廣泛認可。未來雲上内容制作正在成為趨勢,華為雲原生媒體服務将持續深耕影視制作領域,為推進中國影視工業數字化更新、促進整個電影産業發展打造堅實的雲服務平台。

在近日舉辦的華為雲TechWave雲原生媒體服務專題日上,華為雲原生視訊服務正式更新為華為雲原生媒體服務,專題日深度解讀三大産品領域-“媒體生産”,“媒體分發”,以及“媒體應用”。看華為三十年媒體技術積累如何為傳統業務賦予新的競争力,拓展新賽道,激活行業生産力。點選連結了解更多雲原生媒體服務幹貨看點。https://www.huaweicloud.com/about/techwave_video.html

點選關注,第一時間了解華為雲新鮮技術~

繼續閱讀