社交媒體時代有意思的一點就是,誰更富攻擊性誰的發聲更多更大,誰就占據了輿論的先手。網際網路出身的小米自然深谙此道。隻是在電視領域中小米電視一直處于沒有正面對手的情況,是以相對來說一直比較安靜。
去年華為和榮耀的入場則像是一種催化劑,讓聲量不大的電視市場開始有了社交活力,智慧屏的出現更是一顆深水炸彈逼迫小米不得不正面交鋒。而在這個你來我往的過程中,很多原先并不為大家熟知的東西或技術名詞開始一個個被抛出來,比如之前的揚聲器功率之争,而在小米電視 5 Pro 之前一直不支援的 MEMC 功能也在這場厮殺中成了小米的一個軟肋。
MEMC 是簡寫,原文單詞為 Motion Estimate and Motion Compensation,意為運動估計和運動補償。
直白一點說,這是一種目前很常見的視訊插幀技術,在電視的插幀補償中其實一共大體出現過三種不同的插幀類型,分别是插複制幀、插黑幀和插計算幀。
其中插複制幀的效果最差,隻是提升了原視訊的幀速,但是對于視訊的流暢度平滑度并沒有幫助。插黑幀的目的是減輕視覺殘留現象以減小拖影的感覺。而插計算幀則是效果最好的一種,随着晶片計算能力的猛增,這種插幀方法效果也越來越好,同時插幀數量也能支援到更多。
▲ 索尼的 motionflow 技術
插計算幀的作用原理就是通過運動估計預估畫面中運動物體的軌迹,然後通過插幀技術在兩個相鄰幀中間插入一張中間幀,這樣原視訊的幀數就能夠實作翻倍,30 幀速率的視訊變成 60 幀視覺上就會流暢平滑很多。
以現在電視顯示晶片的計算能力來看,很多電視早已不僅支援「倍速驅動」了,如今甚至能把視訊插幀達到 200 幀速率,同時結合多種插幀方法可以做到畫面效果的最優化,比如索尼的 MotionFlow 技術就是通過插幀和掃黑兩種方式來提高畫面流暢度與減小拖影現象。
▲ 三星的插幀技術叫 Auto Motion Plus
不光是索尼,其實大多數電視品牌早就都上馬了類似的技術,隻不過功能的叫法不太一樣,比如三星的叫 Auto Motion Plus,LG 的叫 TruMotion,東芝的叫做 ClearFrame 等等。國産電視像華為的智慧屏,和小米最新的小米電視 5 Pro 也都具備 MEMC 技術。
雖然大家都有類似的技術,但最終的效果卻可能仍然有很大差距,比如目前公認插幀效果最好的應當屬索尼的高端電視,而為什麼索尼的效果好,自然是因為運動估算的更準,計算生成的中間幀也更合适。
在知乎藍大仙人的素材中有一段素材是華為智慧屏和索尼 XG8500 在 MEMC 功能上的對比,通過慢鏡頭來看,左邊智慧屏的畫面抖動和流暢度都遜色于右邊,索尼電視明顯要平滑許多。
「人無我有,人有我優」,至于怎麼做到優秀,那就靠的是技術的積累和沉澱了。
在實際應用場景中,MEMC 在電視領域更多的應用案例是在體育賽事類節目,比如足球或者賽車競速之類。由于物體運動速度較快以及鏡頭擺動幅度較大,這類節目最大的問題就是畫面又糊又晃,而通過 MEMC 補償之後,畫面的流暢度的會得到質的提升,晃動感也會有所減弱。
盡管 MEMC 在電視上使用的已經很頻繁,但是在我們每天接觸更多的移動裝置上卻鮮有涉及。
插幀技術并不稀奇,但前提是需要具備獨立的顯示計算晶片,對于紅海競争非常激烈的手機來說,多一塊晶片就是多一截成本,在大衆需求還沒有挖掘到這個領域的時候,搭載獨立的顯示計算晶片可能隻是徒增成本。
▲ 圖檔來自:MobileMagazine
如果把遊戲手機也歸類到主流手機中,可能隻有黑鲨是較早在做 MEMC 補償的手機,這項功能在黑鲨手機裡叫做超級影院模式,本質上就是利用那顆 Pixelworks Iris 顯示處理晶片進行插幀補償,但是這項功能卻一直沒有出現在更主流的手機廠商中。
是以,幾天前一加的那場螢幕技術溝通會就值得一提了,除了我們已經熟悉的 120Hz 高重新整理率之外,也正式公布了支援 MEMC 功能消息,最高能夠将視訊插幀到 120 幀播放。
手機上的 MEMC 究竟應該用在哪些方面,其實也是一個可以讨論的問題,值得一提的是在手機上并非所有的 App 都支援高重新整理率,很多應用都是限制到了 60Hz 的最高重新整理率,如果能夠通過全局插幀的方式去進行補幀,這可能是拉近軟體流暢度的一次曲線救國。
在電視上 MEMC 最大的用途是體育賽事,但是在手機上盡管現在賽事直播很多,但真正用手機日常看球賽等體育運動的人相對來說還是比較少的,是以像黑鲨宣傳的超級影院插幀功能更多是為電影而服務。
回到标題的那個問題,如何将 24 幀的電影看出 60 幀的感覺?答案已經全在上面了。
當然,以現有的技術來說,其實直接拍 60 幀電影或者更高的 120 幀電影都不是問題,隻是在制作成本上以及電影觀衆的觀看習慣來說,沿用了多年的 24 幀标準依然是權衡利弊的最佳選擇。
比如電影中經常遇到需要進行單幀調色或者做一些複雜特效的場景,24 幀的電影一秒隻需要做 24 幀的特效,而 120 幀一秒就需要做 120 幀的特效畫面,是 24 幀工作量的五倍,同樣制作成本也會急劇上升。
另外放映端同樣是一個問題,導演拍出了 60 幀甚至 120 幀的電影時,許多影院因為放映機采用的還是 24 幀标準的老裝置是以不能播放,而更新技術裝置對影院來說不僅是額外一筆開支,更可能面臨後續高幀率電影數量不足的放映問題。
以拍文藝片而聞名的導演李安算是個異類,從《比利林恩的中場戰事》到《雙子殺手》,他兩次采用 120 幀+4K+3D 的拍攝技術,但受限于題材和裝置,兩部影片都不像第一個采用 3D 技術拍攝的《阿凡達》那樣票房全球大爆,也為超高幀率電影的前景蒙上了一層陰影。
對于電影本身來說,盡管最後壓制的時候基本都是 24 幀,但不同的導演有可能會在不同的片段通過減幀的手段來豐富自己的表達手法。
舉個例子,在 B 站《一代宗師》的電影中,有很多個鏡頭的幀數明顯不足,比如在葉問在和宮羽田掰餅二人轉那一段,鏡頭切換很多,但一部分鏡頭的幀數肉眼可見要低于正常的 24 幀。
有人說《一代宗師》裡部分有「掉幀」和噪點的鏡頭是技術瑕疵,也有人說這是王家衛的表達風格,在《重慶森林》和《旺角卡門》中都有過類似的畫面,具體原因如何王家衛肯定不會解釋,我們也就當做藝術表達手法就好。
其實這種藝術手法叫做「step printing」,中文翻譯叫做抽幀。既然有 MEMC 這樣的自動補幀來提升流暢感,有主動抽幀來營造不連貫的迷幻感自然并不奇怪。抽幀造成的不連貫不光能營造迷幻,有些動畫電影甚至會采用抽幀來打造更獨特的觀感。
2018 年末,索尼娛樂打造的電影《蜘蛛俠:平行宇宙》中,索尼就大量采用了抽幀的手法配合螢幕上的拟聲詞來營造一種類似漫畫的感覺。
對于電影來說,MEMC 的插幀技術是一把雙刃劍,一不小心甚至就會「弄巧成拙」,因為插幀不完善而導緻畫面撕裂的狀況時有發生,這個現象叫做「肥皂劇效應」(soap opera effect),形容的就是高速運動的畫面因為插幀不完善導緻圖像像肥皂一樣容易撕裂。
▲ James Gunn
是以對于許多電影導演和演員來說他們其實完全不喜歡插幀技術,甚至是厭惡。《銀河護衛隊》的導演 James Gunn 曾公開發文抵制插幀技術帶來的「肥皂劇效應」,他還聯合了《極盜車神》的導演 Edgar Wright,《星球大戰:最後的絕地武士》導演 Rian Johnson,《猩球崛起》系列導演 Matt Reeves 等一起發聲。
過高的幀數和過于平滑的效果也會讓電影本身産生一種「不像電影」的感覺,但同時也不像我們用肉眼去觀看世界,有時候會覺得有點兒像遊戲 CG,但畫面又過于真實,最接近這種感覺的反而是家電賣場裡那些高端電視播放的高幀率展示片段。
目前來說,MEMC 對中高端電視來說已經是必備功能,在電視上也已經十分普及。對于手機來說,MEMC 還在起步的階段,也更像是作為一個錦上添花的功能,在一加去年帶起過一波 90Hz 重新整理率後,這些更為專注特定領域的功能或許又能引發一次集體跟進。
因為從今年開始,更高素質的 OLED 面闆将會比以往出貨量更多,在旗艦機顯示效果平均線提升的情況下,MEMC 這種高端功能就能夠為拉開差距添磚加瓦。
至于會不會又是一個「真香」技術,今年的新機或許會給我們答案。