感觉自拍不够过瘾?来看看这个能把自拍照片转制为三维立体头像的应用。

加州初创公司推出智能3D模型软件Loom.ai ,利用机器学习和计算机视觉技术,根据用户2D平面照片,生成3D头像。该公司表示,该技术能做到:

媲美3D扫描的的视觉保真度

头像是可动的,像动画人物一样

算法生成的3A级面部肌肉,自动契合不同脸型

头像可以通过嘴巴、眼镜、面部肌肉的活动做出各种表情,表现丰富的情感

去除照片光线。生成的头像可以融入各种光线环境,产生不同光照效果

20161216 07 ai01

口说无凭,我们来看看实际效果。开发者上传了一帮名人的照片,给Loom.ai站台。结果成了这个样子:

20161216 07 ai02

20161216 07 ai03

20161216 07 ai04

看出是谁来了吗?没错,他们是安吉丽娜·朱莉、马斯克和威尔·史密斯。朱莉的性感厚唇很传神嘛,不过那发型是怎么回事?开发人员们,拜托,憋偷懒,给Loom.ai加几款发型成么?识别不了披肩长发。你让广大自拍女神怎么办?

忽略头发的问题,我们来看看眼部细节:

20161216 07 ai05

是不是很传神? Loom.ai不仅可以做高仿真的细节,还能让头像高度虚拟化,成为可爱的动漫人物:

20161216 07 ai06

这些3D头像可以表现伤心、快乐、愤怒和感兴趣的情绪。但目前也只能这样,Loom.ai只开发了这么几种表情包。该系统需要一分钟来生成3D头像,再另外一分钟生成个性化的面部表情包。它使用Sketchfab(一个3D模型的展示、分享网站)来查看生成的头像,上传头像至Sketchfab需要五分钟。

好消息是,这家初创公司正在开发让用户改变头像发型(安吉丽娜·朱莉松口气)、眼睛颜色,添加装饰品(眼镜)的功能,以便把Loom.ai应用于3D虚拟世界中的合成动画场景和动态交互。

开发背景

Loom.ai是视觉特效艺术家Mahesh Ramasubramanian和Kiran Bhat的研究心血。这两人的来头都不小。Mahesh Ramasubramanian此前在好莱坞梦工厂(DreamWorks Studios)工作,为《怪物史瑞克》、《功夫熊猫》这样的动画电影担任视觉效果督导。而Kiran Bhat之前在卢卡斯电影公司,为《加勒比海盗》和《复仇者联盟》做特效。

20161216 07 ai07

Kiran Bhat,Mahesh Ramasubramanian和同事Akash Garg的3D头像。这么有科技感,不愧是Loom.ai开发者。

Kiran Bhat对福布斯说:“我们认为需要把用户带入到(虚拟空间)体验之中。这意味着,要找到一种把普通用户像电影演员那样数字化的方式(但不能那么贵)。”

于是,他们开发出这款只需要一张照片,就能对整个头部进行建模的软件。机器学习算法会识别照片中的面部细节。至于照片中无法获得的信息(毕竟只有脸的正面),人工智能会自动脑补,进行填充。

随着Loom.ai处理更多照片,它会不断进步,脑补面部特征和表情的能力会不断提高。

这项技术仍旧在beta内测阶段。公测之后,用户只需要登录Loom.ai网站,上传脸部正面照片(谢绝45°仰望天空),等待两分钟,就可以获得你自己的、或者你想黑的那个人的3D头像。开发者尚未公布iOS或Android手机端的计划。

前景

Loom.ai将许可给第三方公司使用,让他们把3D头像功能加入自己的平台。事实上,已经有些公司在秘密测试Loom.ai。开发者拒绝透露这些客户都有谁——除了Facebook。Mahesh Ramasubramanian表示:

“Facebook有海量用户。如果他们用Loom.ai技术来把用户的2D头像变成会做表情的3D头像,我们会很高兴。 ”

随着Oculus VR头显的热销,Facebook甚至在十月份推出了VR版的Facebook,用户可以加入VR虚拟空间,可以一起看电影,也可以去火星旅游。但目前Oculus的Toybox沙盒游戏还是这样的:

20161216 07 ai08

可以想象,若举行VR情人节集体活动,出现频率最高的一句话会是:“亲爱的,哪个是你?”从这可以看出,Loom.ai在VR的应用潜力几乎是无限的。小编认为,真人3D建模是VR体验的关键一环——这决定了你能否在VR中辨认出熟悉的朋友。将来和女朋友在VR中探索世界,登喜马拉雅,漫步火星,你一定不愿像图中这样,两个“光头人”含情脉脉,对吧?

这两年有个很火的11区动漫《刀剑神域》(Sword Art Online),不知各位大大是否看过?它的设定中,被困在 VR 游戏“刀剑神域”里的玩家,由于 VR 头显事先拍摄下了真实照片,每个人在游戏里以真面目出现。正因如此,后来桐人和亚丝娜的罗曼情节才成为可能(否则面对千篇一律的网游角色造型,恋爱就谈不下去了吧)。

20161216 07 ai09

《刀剑神域》戴着脑电波VR头盔(真的是头盔啊)的女猪脚Asuna

虽然原著出版时,Loom.ai还未诞生。《刀剑神域》未卜先知得为这类3D建模软件的VR游戏应用指明了方向。即便是传统桌游、网游,比如《模拟人生》、WOW和《九阴真经》,如果能让玩家用自己的“真面目”游戏,也应该会更受欢迎吧?

不过,小编更关心的是,能否把自己的3D头像应用到动漫、电影里?——那个啥,下次拍《最终幻想》,直接把小编的头像拿去用吧,不要钱。

虽然VR、游戏、动漫电影可能是Loom.ai在将来潜力最大的领域,但不可忽视它眼下就可以掀起的社交革命——Facebook已经在进行相关测试。若Facebook、微信这样的社交平台推出一个小游戏,让用户创建、分享自己的3D头像,它可能会像此前的“脸萌”一样,迅速火遍大江南北。但这还不是最重要的,更有前景的正是Mahesh Ramasubramanian所指出的:让Facebook和微信这样的社交应用,支持可动的真人3D模型来做头像——当你点开好友主页,看到的不再是她的大头贴,而是会卖萌、会对你笑的三维头像,说不行还能配合表情说个“蓝瘦香菇”,那会多么有趣?至少,玩陌陌这样的应用不必再通过看自拍照“猜真人”了,多年无人问津的腾讯QQ秀也可以有新玩法(收费)了:

20161216 07 ai10

现版QQ秀,童年回忆有木有?

一个颠覆性的事实是:人体3D扫描技术一直存在,但从未服务于大众消费者,而Loom.ai有能力让它迅速普及。 此前,如果有人想要这么做,要去找专门的游戏、电影工作室,还要付一大笔酬金。所以它根本无法在大众市场商业化。对游戏产品和社交应用来说,由于没人用,也确实没有必要支持真人 3D 头像。

但现在不一样了,通过Loom.ai,每个人都可以为自己建立数字3D头像。在将来,Loom.ai是否能支持扫描全身照片,对人体3D建模呢?

感兴趣的读者,可以去Loom.ai网站预约名单做个登记,开放公测时会通知你,获得第一批尝鲜特权。在此,小编善意提醒Loom.ai,公测前务必升级服务器,防火防盗防流量爆,具体请参考黑色星期五和中国双十一。