46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了

Xsens动作捕捉 2023-04-09 26040

你是否曾经感觉,80年代和90年代那些老照片里,都是俊男靓女。现在却难以见到同款巅峰颜值?动不动都是高P照片?

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第1张

实际上,你之所以觉得他们美,不一定都是因为颜值问题,也和当时成像技术的模糊也有关系。模糊的照片,能让人脑补出无瑕的肤质和自然的面貌比例。而在当下,随便一台手机就达到几百万像素,面部轮廓的瑕疵和小细节全部被放大到毛孔。如果不P图、不遮瑕,即便是顶级明星也能被拍成路人甲。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第2张

道理是这个道理,偏偏有些游戏厂商喜欢另辟蹊径。网易旗下的古风武侠网游《逆水寒》最近就整了个名为4D人脸扫描技术的新活。这技术能动用46台相机,每秒协同曝光50次来扫描人脸,别说毛孔了,恐怕连螨虫都能扫出来。这要是一般的模特,估计听到这个频率都要产生焦虑了——这种无死角的抓拍,如何扬长避短?

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第3张

但看过实际成像以后,焦虑的人却换成了我们!

看看官方演示人物这精致的面部细节,自然而然地还原了真人的样貌。当他动起来的时候,表情的细微变化,乃至于肌肉的收放也都和真人无异。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第4张

甚至就连角色的瞳孔也会随着面部动作的变化自然位移,显得双眼更加有神。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第5张

因为完全复刻了真实世界里的表情细微变化,角色不管是开心还是忧虑,都能通过细微的变化凸显出来。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第6张

好家伙,虚拟世界的映射都快赶上真人反应,而且就这样细致抓拍,还一点不显丑,这能不让人焦虑吗?

如此精致的效果,《逆水寒》是如何做到的呢?这首先得从官方在技术上的突破说起。以往来说,人脸扫描常用3D的方式。也就是基于二维的图像,在三维软件里建模。雷火此前给《逆水寒》应用的,就是同时用46台相机组成3D相机阵列,一次性拍下一张脸的46个角度,这样重建人脸面部的建模和贴图。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第7张

但官方对于这样的技术并不满足。硬是升级到了4D水准。这多了的“1D”,主要是把单次拍摄,变成了连续跟进。46台相机每秒协同曝光50次,通过技术重建成一个3D模型,这个模型能以每秒50帧的高帧率做出动作。自然就能完全复刻真实人类的面部动作以及细微的表情了。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第8张

虽然听起来只是由静到动这么简单。实际上技术提升的难度和挑战一点都不低。毕竟真人的表情非常复杂,一点点差异就完全可以解读成不同的初衷。当被扫描的演员用微表情传递信息时,那一点点细微的动作也需要被完整计算进去。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第9张

万幸的是,这些复杂的计算需求,得到了网易伏羲人工智能系统的帮助。要知道,人工智能最擅长的就是参考海量数据,做出学习和分辨以及复杂的计算。而通过结合图形学与深度学习能力,雷火写实人脸的拟合精度已经到了1毫米之内,基本上达到了“毫厘不差”的阶段。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第10张

这项技术的帮助下。面部扫描可以最大精度地复刻真人演员的表情和演技,让游戏里角色有更传神的表演和更接近真人的表情。因为计算和抓取都是集中在面部动作细节上,所以自然也不用担心瑕疵被捕捉,保留下来的都是精髓。也许遇到好的演员,真人都要被比下去呢。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第11张

看到这里你可能会很纳闷。《逆水寒》一个MMO,脸只是一小部分,用得着花这么大心思和科技去打磨吗?其实这也算是《逆水寒》这个产品的一大特色了。

自从2018年上线,这款游戏就已经代表了国内MMO的最高清画质,而官方这些年即便没人竞争,也不断做出提升,各种黑科技和技术使劲往里塞,不光率先实装RTX光追,连英伟达展示新硬件技术,都要借他的游戏内容做演示。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第12张

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第13张

画质如此,玩法亦然。当各家MMO还纠结自己那点老套玩法的时候。《逆水寒》官方已经把自走棋、生存玩法、吃鸡、开放世界等元素融入自己的玩法体系里。每周四一小更,一年多个大型资料片的更新频率也是备受玩家好评。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第14张

而且伴随着这个技术的时装,玩家们期待已久的NPC模型优化也会继续推进到第二阶段。目前官方放出了游戏内师姐叶雪青的迭代图例,意味着精度更高、更贴近角色设定的游戏模型已经能看到了。

46台相机每秒协同曝光50次,看到扫出的这张人脸后,我焦虑了  第15张

看到这里,你大概也能理解。为什么《逆水寒》会对一张脸的技术下那么多心思了吧?你认为这个技术的应用会对游戏造成哪些改变呢?一起在评论区聊聊?

The End