您的位置:主页 > 新闻资讯 > 科技情报 >

国外VR初创公司通过iPhone X等系列设备来实现动作捕捉

发布时间:2018-01-11 10:25   来源: 芬莱科技

导读:上个月,斯特拉斯伯格公开演示了这套面部捕捉系统的独特使用方法,并计划将数据与Xsens全身装备结合来进行完整的动作捕捉。

  过去两个月,我一直在关注洛杉矶VR开发公司Kite and Lightning联合创始人克里·斯特拉斯伯格(Cory Strassburger)的动向。他之前开始了一项利用iPhone X手机和手机原深感摄像头的尝试,将新款iPhone功能用作一项低成本技术,为公司即将推出的VR游戏《巴比伦:圣战(Babylon: Battle Royale)》捕捉人物面部表情。

国外VR初创公司通过iPhone X等系列设备来实现动作捕捉

  斯特拉斯伯格这次尝试的想法在于,如果他能够做出足够多的表情并被捕捉,就能以最低的预算让游戏中非常愚蠢的人物Beby更具真实感。

  上个月,斯特拉斯伯格公开演示了这套面部捕捉系统的独特使用方法,并计划将数据与Xsens全身装备结合来进行完整的动作捕捉。

   斯特拉斯伯格在邮件中写道,“我们游戏的宗旨是要让玩家在获得真正乐趣的同时,还能在VR中向对手和VR现场观众展示出最狂野的一面。而这些结果让我知道我的方法可以完成这个目标。

  为了这次尝试,斯特拉斯伯格购买了一顶彩弹游戏中使用的“战术”头盔,并改装了GoPro来固定他的iPhone。他的第一次试验(视频的最后部分)以失败告终,因为固定iPhone的支架突然折断并把他崭新的iPhone手机摔倒了地上。幸好iPhone没有摔坏,之后,斯特拉斯伯格又找来了橡皮筋确保iPhone的安全。而这一切的总花费还不到200美元(约合人民币1301元)。

国外VR初创公司通过iPhone X等系列设备来实现动作捕捉

  斯特拉斯伯格提到,“挑选战术头盔的关键是头盔能固定在头部。这和建筑工地头盔的固定装置一样,你能把内部的松紧带调紧来加固。我之所以要提这点是因为很多廉价头盔没有这个功能,没有这个功能头盔就不能固定在头部,加上支架和iPhone X的重量,头盔很有可能会滑动。”

  同时,斯特拉斯伯格还推荐使用铝合金的iPhone固定支架,因为塑料支架很有可能会因为iPhone的重量而变形。此外,他还在头盔后部施加了一些重量来平衡。由于他头上只有一台手机,他还要另找一台手机来录下声音和录像,才能让大家看到这段原生态的面部捕捉视频。

国外VR初创公司通过iPhone X等系列设备来实现动作捕捉

  斯特拉斯伯格写道,“一开始我以为结果会一塌糊涂,因为我的头一直晃动,iPhone X失去了平衡势必会造成很多头部的幻影。奇怪的是,这并没有影响实际的表情/融合变形数据,也就是说,无论在捕捉时的动作幅度有多大,最后拍下的表情数据都是清晰的,就好像我没有乱动一样。事实上,如果我用iPhone X捕捉头部姿势和晃动的话,可能并不会成功,恰好我当时用的是Xsens动作捕捉设备。”

  斯特拉斯伯格为iPhone X设计的App可以简化捕捉流程,把数据直接传输到Maya的.ANIM格式。斯特拉斯伯格还让记录数据直接Airdrop到Mac电脑上,节省了用数据线连接手机和电脑传输文件的步骤。

  据称,公司一年前就购买了Xsens MVN Link动作捕捉套装,但斯特拉斯伯格直到此次尝试才开封这款产品。

  他写道,“整个安装和操作过程都非常简单。我只看了一些在线教程就在极短的时间里安装成功,并开始在我的房间里狂舞并进行无线数据采集。反正我什么都不用学就完成了。而且最终结果比我预想的要清晰很多。”

  斯特拉斯伯格表示,在“表演”完之后,捕捉的数据传输到Maya耗时约10分钟,之所以这么久是因为他要手动同步音频传输。

  “在我预告片和电影的制作中,这些数据可以用于节省和增强等后期制作。它可以作为电影动画视效预览,不仅平价、使用方便,而且无需大笔开销,就能把这些真实数据用于游戏开发。”

  下一步计划

  斯特拉斯伯格计划在他开发的iPhone X App中加入声效捕捉功能。当前,他需要手动把声音传输到视频中,而添加了声效捕捉功能就能节省时间,也可以省去第二台手机。

  除了让数据无线传输到台式机上,他还在尝试捕捉分屏视频,让表演者的面部不被Beby的脸部遮挡。如果他需要捕捉其他表演者的表情,这个功能会很实用。


推荐阅读