天天看点

移动影像计算时代,那些AI无法替代的事

前言:嗨囖,大家好,这里是数懒,今天要跟大家聊一个枯燥但又特别有意思的话题,那就是关于移动影像的未来趋势。之所以说它枯燥,因为目前大部分的移动影像在技术硬件瓶颈之下,基本上都依靠AI算法进行图片的优化,虽然优化出来的照片确实十分讨喜,但也存在一个问题,当每一家的影像都依赖AI算法优化的时候,也就意味着每个品牌,甚至每个人出来的照片风格以及格调等等都几乎一样,这样的情况从艺术的层面来说自然是显得相当枯燥。不过有意思的是在听完了vivo影像战略沟通会之后,原来移动影像也能把人文感性的情感融入到计算摄影里,这是一个特别有意思的移动影像的未来趋势,也是接下来我要跟大家分享这场沟通会里一些创作启发。

移动影像计算时代,那些AI无法替代的事

技术研发与创作者的交流

这场沟通会跟以往不大一样,以前都是以技术交流为主,有很多硬核的黑科技来给我们做点分享以及科普,但这一次不仅只有技术上的分享,摄影艺术家段岳衡⽼师、摄影艺术家⾼远⽼师、⻘年导演张⼩鲨都参与了这次的沟通会,并且通过他们的作品来表达出影像技术对于艺术创作的启发以及重要性,因此沟通会上有一半的时间都能感受到科技结合人性化的深度探讨。

移动影像计算时代,那些AI无法替代的事

段岳衡老师分享了用vivo手机创作的风光,他觉得好的⻛光有三⼤要素:⾊彩、影调、画质。在段岳衡老师的vivo手机作品下有天蓝的清澈、巍峨的故宫、唯美的山水以及夕阳的光影等等,在这些作品之下画面已经不是单纯还原,画面色彩真实、饱满,影调的呈现立体有层次,画质细节丰富、细腻,画面的整体都加深了段岳衡老师的主观情感。

移动影像计算时代,那些AI无法替代的事

在段岳衡老师介绍他的作品以及分享他的拍摄分享时,能够让感受到vivo手机在色彩、影调、画质上有着自己的一套完整的处理方式。

移动影像计算时代,那些AI无法替代的事

色彩有vivo与蔡司联合精细调教,所以准确度特别高;影调是借鉴了摄影行业里头常用的技巧“智能⽩加⿊减“,然后把AE训练集拓展⾄原来的5.5倍,影调的平衡让画面看起类立体感更强的同时,也让画面的故事感更浓郁;关于画质方面,段⽼师也在分享中提到了SuperRaw功能,可以输出14bit⾼位深的多帧算法融合SuperRAW⽂件,另外在长焦作品里也可以看到vivo手机的成像也特别锐利。

移动影像计算时代,那些AI无法替代的事

聊到关于画质这一部分,vivo给我们埋下了个彩蛋,那就是段岳衡老师带着新一代技术评测机拍回来的一些样张,暗光部分的表现尤为惊艳。

移动影像计算时代,那些AI无法替代的事
移动影像计算时代,那些AI无法替代的事

随手抽取了两张段岳衡老师在暗光之下拍摄的大足石刻图,看图的那一刻确实有被照片里丰富的细节以及庄严的色彩震撼到,真的是不愧现为世界文化遗产,世界八大石窟之一。当然从这组大足石刻的暗光图可以看到vivo这款新机在暗光影调这一方面的处理以及超越所见,以前传统的暗光照片都是暗部与亮部都是一样亮,虽说暗部有细节,但粗暴地拉亮暗部会让照片看上去缺少立体感。但这组大足石刻的暗光照片里,佛像的立体感极强,明暗光比处理相当到位,暗部保留暗光阴影的同时也保留了细节,更关键是暗光略带金光的氛围感也真实还原出来,每张画面里佛像的光泽感以及周围石窟的腐蚀痕迹都展现得淋漓尽致,同时能让人感受到暗光之下那种静谧庄严环境。

移动影像计算时代,那些AI无法替代的事

在这次样张专业的画质背后有vivo自研的“光学超分算法”还有一项全新的技术VCS仿⽣光谱技术(vivo camera-bionic spectrum),这项技术的思路特别有意思,也是目前我觉得在影像优化里头最为人性化且让画面看起来更舒服的一项技术。摄影无非就是记录光影,因此当光线进入传感器的时候与光线进入人眼其实是大不相同,因此普通图像传感器的color filter光谱要贴近人眼看到的效果时,需要经过复杂处理后,才能还原人眼所感知的信息,这个处理过程会导致画质变差。VCS技术,就是通过改进color filter,让传感器接收的原始信息不断接近人眼,从而实现更好的噪声表现和色彩还原,信噪比提升20%, 色彩还原提升15%。

移动影像计算时代,那些AI无法替代的事

用我自己的语言小结就是参照了生物学,利用人眼的效果作为参考标准来实现色彩优化。再配合上更大的传感器、大量的场景训练,才练就出如今经验全场的风光大片效果。

移动影像计算时代,那些AI无法替代的事

在聊完风光大片之后,人像部分就由⾼远⽼师则专门分享X80创作的人像作品,这个作品最有意思的地方在于老师拍摄了一组从0~90岁+的照片,回顾⼈⽣101个珍贵时刻,人文摄影一直都是摄影创作者们特别热衷的主题,作为一种具有社会价值的记录,去呈现人类社会文化为主的摄影类别,这类的摄影对于拍摄器材的要求并不低,尤其是在光线复杂的情况下去做快速的画面捕抓。

从出生到青年到中年再到衰老,于老师用手机记录下了一个客观的世界,但看者却能从该作品里的每个时期的照片都有着该年龄段的氛围感,一种独特的主观情感,幼时的人像画面色彩清新通透,小朋友的肌肤显得吹弹可破,每一个人眼神的抓拍都极其到位。

移动影像计算时代,那些AI无法替代的事

到了青年部分色彩显得鲜艳亮丽充满活力,随后就是中年到老年的画面,vivo之所以能在人像美化方面拿捏恰到,vivo在这么多年来一直在以不同年龄、性别、场景的数以百万计的素材,经过反复的机器学习成长,推出vivo全新升级的微米级焕肤塑颜技术,使皮肤观感更加自然、健康,也更好地保留了五官的立体感。这一整组的作品里,能让人感受到让人心旷神怡的色彩,明亮的画面散发出一种朝气蓬勃的生命力,即便是老人的画面,也能让人感受一种岁月洗礼下的生命灿烂。

移动影像计算时代,那些AI无法替代的事

说起人像,我自己个人是从vivo X1开始用,几乎每一代都是我的主力机,作为女生兼摄影师,手机人像是我特别看重的一部分,其实从X1开始,在我接触过这么多的手机里,vivo人像一直都是天花板级别,不仅是X系列,还有后来的S系列都是,无论是前置摄像自拍也好还是后置人像,一直以来我都觉得是表现最好的。

移动影像计算时代,那些AI无法替代的事

在人像上vivo是拿捏到了人像摄影里的精髓,⼈像理解,⼈像美化,⼈像氛围,这三大点也演变成了vivo如今的“超感⼈像系统”的三⼤核⼼技术模块。

这三个模块其实就是我们现在拍写真时候用的套路:化妆造型、环境影调氛围、后期修图。

移动影像计算时代,那些AI无法替代的事

vivo的人像照片之所以好看,最重要的是vivo人像并不只是一个单纯的美颜,而是注重处理人与景的关系,这个就是经典摄影师拍摄思维,相比起普通人,摄影师更看重整个画面的格局。vivo“人像氛围融合”技术,基于人像语义理解,在影调、色彩、亮度、虚化等层面上进行人与场景的融合处理,实现人与景和谐、自然的效果,这就相当于vivo在摄影上自带摄影人的思维,也是为什么普通人拍出来的照片都好看的原因。随后参考专业镜头拍出来的画面氛围感,也就是与蔡司合作的深度感知虚化,还原了多种经典蔡司镜头的虚化效果,把人像与此场景融合在一起,这才有了如今媲美专业器材的人像大片。

移动影像计算时代,那些AI无法替代的事

最后来到视频部分,⻘年导演张⼩鲨老师则是带来了一部用vivo X80 Pro拍摄的短片,利用vivo X80 Pro的专业Log模式,让片子拥有理想的后期空间。该片里有很多跟随镜头,但专业的防抖性能带来很不错的稳定效果。另外在逆光环境下的HDR表现也显得颇为专业。

移动影像计算时代,那些AI无法替代的事

视频应该是近两年猛增的市场需求,vivo的自研芯片也算是来得十分及时,从上面的视频短片可以看出通过自研芯片的计算加成,不仅照片体验提升,在视频方面也有着明显的进步,从HDR效果到夜景的表现,手机的响应速度都相当理想,也适合1个人去自由地创作。

从这次的交流当中所洞察出的影像未来趋势

从上面3位老师的分享里,我们基本上可以看到下一代影像旗舰的雏形,原本已有的优秀功能在画质提升的基础上效果会更好,其中由更大的传感器,更优秀的长焦效果,在技术上有自研的“光学超分算法”还有一项全新的技术VCS仿⽣光谱技术,蔡司相关的内容肯定不会落下。当然要数我最期待的应该还是新一代的vivo自研芯片。

移动影像计算时代,那些AI无法替代的事

新的自研芯片从传统ISP架构升级到了AI-ISP架构,这里官方技术人员介绍得比较专业,在这里我用我自己简短简单地语言来描述就是给传统的影像处理器装个脑子,也就是这款芯片比原来的芯片更聪明,且应对复杂和未知的能力更强更快。简单举个例子,比方说在夜景时我们会遇到的环境会更复杂,当你在夜景拍摄里有个紫色的霓虹灯时,如果传统的ISP并没有处理过类似的问题,那么这个紫色的霓虹灯有可能就会偏色甚至出错,但如果有了AI的介入,就相当于它能够从更精细的色彩问题去判断,从而计算出最合适的效果呈现出来,简单来说就是会“思考“判断出最优的解决方案。同时这个AI-ISP架构也意味着全新升级的AI-NR降噪、HDR影调融合、MEMC插帧等算法,总之就是vivo这次的芯片性能把牙膏给挤爆了。

移动影像计算时代,那些AI无法替代的事

现在的移动摄影硬件大多都到达了瓶颈期,传感器的大小、摄像头模组等,手机的机身限制,为了兼顾手机手感以及尺寸,基本上也只能止步于一英寸左右的传感器,这也是为什么近年来大部分手机厂商把精力转移到AI计算上,在影像技术这一部分直接选择躺平。

如今的vivo手握蔡司合作的研发,影像硬件要挑最好的,AI算法还做到自家的影像架构里融合在一起,明明靠着堆料就能躺赢,非得搞自研,vivo基于AI-ISP这个架构的革新,自研片上内存单元、自研AI计算单元、自研图像处理单元,这代自研革新最大的优势在于通过提升数据吞吐速率用超高的能效比来最大限度发挥出AI的图像算法,有全新的算法作为支撑,那也就不难猜测接下来vivo在影像硬件上应该也会推新,接下来我们可以期待vivo在夜景以及视频等等上会有一个质的飞跃。

移动影像计算时代,那些AI无法替代的事

看到如今的vivo,不禁让我想起前段时间去讲影像分享课时的一段话:“虽然现在是AI算法时代,但AI出来的终究是大数据下的辅助,想要拍出自己风格的照片还得要有自己的想法。“这个感觉就像是vivo在如今的AI计算摄影的时代之下,vivo并不是纯依靠AI,而是vivo融入了品牌对影像人文化理解的融合。

特别佩服这样的一个做影像产品的思路,这相当于把一个专业摄影师的一整套摄影流程都浓缩在了产品里,相当于从器材到参数调整到后期,一整个矩阵下来就把照片完成了,它能让你把整个心思都放在记录画面上,让普通⼈也可以通过简单操作收获令⼈动容的影像。

移动影像未来趋势 AI计算之上的人性诉求

vivo接下来要推出的全新影像旗舰系列应该就是标志着移动影像未来趋势,通过更简单、人性化的操作,让每一位普通消费者都能拍摄出媲美专业的照片或视频。要达成这一理念,把这工作量全推给AI显然是不靠谱的,AI充其量只是一个辅助的角色,影像质量的进步同样需要硬件推陈出新,比方说更大的传感器,让画面有更多的图像信息可以进行算法处理,同时也能给到创作者更多的后期空间。

移动影像计算时代,那些AI无法替代的事

所以vivo与蔡司联合开发,投入大量的资金精力去自研芯片以及算法,形成一个完整的摄影技术矩阵,从硬件到软件同时迭代更新。

移动影像计算时代,那些AI无法替代的事

不得不说vivo在移动影像技术这一方面在手机行业内一直出于模范代表,这次沟通会上有光学超分算法、VCS仿生光谱技术、苍穹夜景系统、超感人像系统,全新的架构AI-ISP、HDR影调融合算法等等,还有一系列的自研技术讲解,算法的提升应该是为了接下来的新品要搭载的硬件作为支撑。接下来我们期待vivo即将带来的影像旗舰新品的最终效果。最后我相信移动影像未来趋势必是把独家自研技术掌握在自己手里的才是最好的牌面。

继续阅读