天天看点

创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?

创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?

感觉自拍不够过瘾?来看看这个能把自拍照片转制为三维立体头像的应用。

加州初创公司推出智能 3d 模型软件 loom.ai ,利用机器学习和计算机视觉技术,根据用户 2d 平面照片,生成 3d 头像。该公司表示,该技术能做到:

媲美 3d 扫描的的视觉保真度

头像是可动的,像动画人物一样

算法生成的 3a 级面部肌肉,自动契合不同脸型

头像可以通过嘴巴、眼镜、面部肌肉的活动做出各种表情,表现丰富的情感

去除照片光线。生成的头像可以融入各种光线环境,产生不同光照效果

口说无凭,我们来看看实际效果。开发者上传了一帮名人的照片,给 loom.ai 站台。结果成了这个样子:

创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?
创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?
创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?

看出是谁来了吗?没错,他们是安吉丽娜·朱莉、马斯克和威尔·史密斯。朱莉的性感厚唇很传神嘛,不过那发型是怎么回事?开发人员们,拜托,憋偷懒,给 loom.ai 加几款发型成么?识别不了披肩长发。你让广大自拍女神怎么办?

忽略头发的问题,我们来看看眼部细节:

创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?

是不是很传神? loom.ai 不仅可以做高仿真的细节,还能让头像高度虚拟化,成为可爱的动漫人物:

创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?

这些 3d 头像可以表现伤心、快乐、愤怒和感兴趣的情绪。但目前也只能这样,loom.ai 只开发了这么几种表情包。该系统需要一分钟来生成 3d 头像,再另外一分钟生成个性化的面部表情包。它使用 sketchfab (一个 3d 模型的展示、分享网站)来查看生成的头像,上传头像至 sketchfab 需要五分钟。

好消息是,这家初创公司正在开发让用户改变头像发型(安吉丽娜·朱莉松口气)、眼睛颜色,添加装饰品(眼镜)的功能,以便把 loom.ai 应用于3d 虚拟世界中的合成动画场景和动态交互。

loom.ai 是视觉特效艺术家 mahesh ramasubramanian 和 kiran bhat 的研究心血。这两人的来头都不小。mahesh ramasubramanian 此前在好莱坞梦工厂(dreamworks studios)工作,为《怪物史瑞克》、《功夫熊猫》这样的动画电影担任视觉效果督导。而 kiran bhat 之前在卢卡斯电影公司,为《加勒比海盗》和《复仇者联盟》做特效。

创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?

kiran bhat,mahesh ramasubramanian 和同事 akash garg 的 3d 头像。这么有科技感,不愧是 loom.ai 开发者。

kiran bhat 对福布斯说:“我们认为需要把用户带入到(虚拟空间)体验之中。这意味着,要找到一种把普通用户像电影演员那样数字化的方式(但不能那么贵)。”

于是,他们开发出这款只需要一张照片,就能对整个头部进行建模的软件。机器学习算法会识别照片中的面部细节。至于照片中无法获得的信息(毕竟只有脸的正面),人工智能会自动脑补,进行填充。

随着 loom.ai  处理更多照片,它会不断进步,脑补面部特征和表情的能力会不断提高。

这项技术仍旧在 beta 内测阶段。公测之后,用户只需要登录 loom.ai 网站,上传脸部正面照片(谢绝 45° 仰望天空),等待两分钟,就可以获得你自己的、或者你想黑的那个人的 3d 头像。开发者尚未公布 ios 或 android 手机端的计划。

loom.ai 将许可给第三方公司使用,让他们把 3d 头像功能加入自己的平台。事实上,已经有些公司在秘密测试 loom.ai 。开发者拒绝透露这些客户都有谁——除了 facebook。mahesh ramasubramanian 表示:

“facebook 有海量用户。如果他们用 loom.ai 技术来把用户的 2d 头像变成会做表情的 3d 头像,我们会很高兴。 ”

随着 oculus vr 头显的热销,facebook 甚至在十月份推出了 vr 版的 facebook,用户可以加入 vr 虚拟空间,可以一起看电影,也可以去火星旅游。但目前 oculus 的 toybox 沙盒游戏还是这样的:

创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?

可以想象,若举行 vr 情人节集体活动,出现频率最高的一句话会是:“亲爱的,哪个是你?”从这可以看出,loom.ai 在 vr 的应用潜力几乎是无限的。雷锋网认为,真人 3d 建模是 vr 体验的关键一环——这决定了你能否在 vr 中辨认出熟悉的朋友。将来和女朋友在 vr 中探索世界,登喜马拉雅,漫步火星,你一定不愿像图中这样,两个“光头人”含情脉脉,对吧?

这两年有个很火的 11 区动漫《刀剑神域》(sword art online),不知各位大大是否看过?它的设定中,被困在 vr 游戏“刀剑神域”里的玩家,由于 vr 头显事先拍摄下了真实照片,每个人在游戏里以真面目出现。正因如此,后来桐人和亚丝娜的罗曼情节才成为可能(否则面对千篇一律的网游角色造型,恋爱就谈不下去了吧)。

创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?

《刀剑神域》戴着脑电波 vr 头盔(真的是头盔啊)的女猪脚 asuna

虽然原著出版时,loom.ai 还未诞生。《刀剑神域》未卜先知得为这类 3d 建模软件的 vr 游戏应用指明了方向。即便是传统桌游、网游,比如《模拟人生》、wow 和《九阴真经》,如果能让玩家用自己的“真面目”游戏,也应该会更受欢迎吧?

不过,小编更关心的是,能否把自己的 3d 头像应用到动漫、电影里?——那个啥,下次拍《最终幻想》,直接把小编的头像拿去用吧,不要钱。

虽然 vr、游戏、动漫电影可能是 loom.ai 在将来潜力最大的领域,但不可忽视它眼下就可以掀起的社交革命——facebook 已经在进行相关测试。若 facebook、微信这样的社交平台推出一个小游戏,让用户创建、分享自己的 3d 头像,它可能会像此前的“脸萌”一样,迅速火遍大江南北。但这还不是最重要的,更有前景的正是 mahesh ramasubramanian 所指出的:让 facebook 和微信这样的社交应用,支持可动的真人 3d 模型来做头像——当你点开好友主页,看到的不再是她的大头贴,而是会卖萌、会对你笑的三维头像,说不行还能配合表情说个“蓝瘦香菇”,那会多么有趣?至少,玩陌陌这样的应用不必再通过看自拍照“猜真人”了,多年无人问津的腾讯 qq 秀也可以有新玩法(收费)了:

创建三维头像只需一张自拍,AI 技术即将开启 3D 社交时代?

现版 qq 秀,童年回忆有木有?

一个颠覆性的事实是:人体 3d 扫描技术一直存在,但从未服务于大众消费者,而 loom.ai 有能力让它迅速普及。 此前,如果有人想要这么做,要去找专门的游戏、电影工作室,还要付一大笔酬金。所以它根本无法在大众市场商业化。对游戏产品和社交应用来说,由于没人用,也确实没有必要支持真人 3d 头像。

但现在不一样了,通过 loom.ai ,每个人都可以为自己建立数字 3d 头像。在将来,loom.ai 是否能支持扫描全身照片,对人体 3d 建模呢?

感兴趣的读者,可以去 loom.ai  网站预约名单做个登记,开放公测时会通知你,获得第一批尝鲜特权。在此,雷锋网(公众号:雷锋网)善意提醒  loom.ai ,公测前务必升级服务器,防火防盗防流量爆,具体请参考黑色星期五和中国双十一。

【招聘】雷锋网坚持在人工智能、无人驾驶、vr/ar、fintech、未来医疗等领域第一时间提供海外科技动态与资讯。我们需要若干关注国际新闻、具有一定的科技新闻选题能力,翻译及写作能力优良的外翻编辑加入。

简历投递至[email protected],工作地 深圳;或投递至[email protected],工作地 北京。

继续阅读