日本CG大神又整活了！3D建模软件拿来搞面部实时捕捉

慧眼识英雄1

博雯 发自 凹非寺
量子位 | 公众号 QbitAI

最近，拿Maya加一个换脸软件就能做到的实时面部捕捉在日推火了：

不管怎么挤眉弄眼，褶子和肌肉的细微厘革都跟得上。
连续两个演示视频点赞分别突破4k和3k，甚至被网友评价为“效果好得有点可怕”。

怎么说呢……直接杵一个脸在摄像头前，就能实时替换脸部心情确实更方便。
至少和满脸小点+机械装置比起来，不再那么密恐福利了……

开发者横原大和（Hirokazu Yokohara） 是日本的一位“全才”艺术家，3D建模、场景、特效、甚至像这种沾边前沿科技的活儿都会做。

好比我们之前介绍过的那位在电车上啾咪顺拐的萌妹，也是出自这位大神之手：

接下来，我们先从他这次所用的技术开始了解。
又见DeepFake

横山提到，他在几天前看到有人将UE5和DeepFace Live结合起来，直接合成了一个视频：

于是他便也起了心思，打算用Maya试试看。而且他还实现了实时面部捕捉的效果。

具体来说，技术方案是Maya + 换脸软件DeepFace Live。
其中Maya是有软件自带的面部绑定系统。
而DeepFace Live听名字就知道，与曾经爆火的DeepFake有关。
这是一种利用机器学习中的深度学习实现的深度视频换脸的技术，基于这种技术诞生了无数的下载即用，甚至在线可玩的工具和软件。
（肌肉金轮就是其成果之一）
DeepFace Live就是其中一种。

这是一个去年刚刚公开的开源工具，特点是可以在流媒体或直播视频中实时换脸，也就是说让用户通过网络摄像头应用面部过滤器，与大多数基于视频的流媒体和信息服务结合使用。
好比常见的Skype，Zoom，Tik Tok，Twitch上都可以使用：

当然，DeepFaceLive的人脸交换功能也可以应用于预先录制的视频。
开发者是来自俄罗斯的Iperov，同时，他也是曾经应用最广泛的DeepFaceLab的开发者质之一。

开发者也是老二刺猿了

至于这位横原大神自己，我们开头介绍过，这是一位在各领域都造诣颇深的通才。
他来自东京的khaki工作室，主要负责为CM，MV，动画，大型游戏等各种媒体或设备设计视觉特效（VFX）。
不说工作室的名字，只说他们的作品，总有一款你熟悉的。
好比阴阳师2017年的这个宣传PV：

2020年的VR游戏设备hexaRide中的第一款合作游戏，《攻壳机动队》的CG：

还为世界第一的公主殿下做过MV：

怎么说呢，老二刺猿了。

参考链接：
[1]https://twitter.com/Yokohara_h
[2]https://www.dailydot.com/debug/deepfacelive-DeepFake-live-streaming/
— 完 —
量子位 QbitAI · 头条号签约
关注我们，第一时间获知前沿科技动态

风吹吹蛋蛋疼风w

这么说乌克兰总统可能已经跑了

123456848

以后不需要演员了，只需要表情动作师，配合捏脸技术，像要什么样的角色都可以。影视行业大变革，化妆师、造型师等等也跟着消失

风吹吹蛋蛋疼风w

转发了

向往草原403

看了一下原视频，其实方法不难，此人并没有在maya面捕插件上做什么工作，他只是把maya的viewport当成视频流通过OBS传给了Deepface live，看上去像是在是maya的界面上，实际上是在live里面，只是把界面上viewport显示的脸换掉了。

墙和鸡蛋

真厉害

慧眼识英雄1

maya一旦被美国卡脖子，中国的影视同行拿什么搞三维动画？？

知足常乐77

转发了

敢想敢做敢拼

爱！现在也只有阿凡达还是实拍的啦，去趟阿凡达星就得好几个月

戏做顿

游戏拍照捏脸是大趋势[奸笑]