小钻风
VR 技术并不单单应用于VR。近日,HTC VIVE 发布一站式虚拟制片解决方案—— VIVE Mars CamTrack,将多年开发VR的经验应用到虚拟制片领域,大大简化了虚拟制作流程,节省了制片时间和成本。
对于此次发布,不少人可能会感到好奇,HTC VIVE 最早以硬件产品、追踪定位技术闻名业内,此次为何会面向影视业推出虚拟制片解决方案?
图源:VIVE Mars 官网
借助 VIVE 追踪技术
HTC VIVE 试图破解虚拟制片冗长昂贵难题
虚拟制作是一种通过虚幻引擎实现,从2019年开始得到大力推广的新的制片方式,《曼达洛人》、《沙丘》等知名电影均使用了虚拟制作。
此前虚拟场景的制作多采用绿幕拍摄,该技术涉及大量的后期制作,制作过程冗长且花费巨大,以2015年《火星救援》这部电影为例,据称投资近1.1亿美元,用时超一年。
图源:网络
因此如何让这一过程变得更加高效且能有效降低成本成了影视拍摄的现实需求。
影视方向的需求似乎与 HTC VIVE 并不相交,事实却并非如此。很多电影场景可以采用虚拟制作的方式来降低整个实体搭建的成本,同时,可以通过实时渲染解决实际拍摄的一些问题。
HTC 高级副总裁、全球解决方案负责人鲍永哲表示,2019 年、2020 年开始,虚拟制片的话题不断升温,很多独立玩家或者小型工作室会使用 VIVE Tracker 做相机追踪。
据他介绍,“好莱坞会建非常棒的影棚,里面会采用一些其他类型的追踪技术,但价格很贵。近几年,我们看到越来越多的人通过 VIVE Tracker,做一个黑客版,自己去做一些方案出来。”
“但由于很多信息有一些技术技巧,他们可能没有办法特别理解,所以我们团队看到这样的机会,既然在思考这种解决方案,就把整体整合起来做成一个解决方案,目标是把硬件上所有相关的复杂事情通通简化起来,对拍摄团队来说可以在很短时间内把追踪系统架设好,在一整天的大部分时间里做真正拍摄的动作。”
HTC VIVE 判断这种方案在行业内有很大需求,最终决定做解决方案帮助解决行业痛点,所以我们今天看到了一站式虚拟制片解决方案 VIVE Mars CamTrack。
图源:VIVE Mars 官网
基于小型工作室、独立玩家需求的出发点,也奠定了其用户群体会重点锁定中、小型工作室。HTC 销售经理赵鹏表示:
“我们的目标人群有两大类:第一类是终端用户,比如中小型的工作室或者针对一些商业行为,例如汽车广告、MV等产品广告的一种解决方案。另外,我们也会针对企业人群,比如专业的电影棚,包括设备的租赁公司,我们都觉得 VIVE Mars CamTrack 是他们非常合适、非常有效并且经济可控的解决方案。”
同时,鲍永哲这样定义这款虚拟制片解决方案:“VIVE Mars CamTrack 的诞生,标志着 HTC 进入虚拟制片新时代,技术交给我们,您只要集中精力制作内容就行。”
虚拟制片解决方案
HTC VIVE Mars CamTrack
当听到虚拟制片当中的虚拟两个字时,容易将其与VR联系起来,但据鲍永哲介绍,整个系统与VR头显没有任何关系,而是利用了VR技术或者说VR的定位技术。
通过“将VR技术应用到电影、电视视频的拍摄场合,让他们可以通过电脑的实时渲染引擎,同步展现背景,利用追踪相机把背景和人物进行即时合成,让整个电影或视频制作的成本大幅降低,让整个拍摄可以更可控。”
从成本角度来看,越是非现实的场景、需要远距离拍摄交通不变的场景、非当季的场景下,使用虚拟制作越能降低成本,具体能降低多少则要看剧本需求。
此外,即使与同类型“虚拟制作的相机追踪”解决方案相比,这套方案也能帮助减少至少50%的成本。
回到该系统本身, HTC 在 VR 中被广泛应用的定位追踪技术成了这套方案的关键,我们可以在展示视频中看到这张熟悉的面孔。VIVE Tracker 与探测器一起出现在摄像机顶端、需定位的物体身上。
https://res.vrtuoluo.cn/production/admin/uploads/20220610/1654829603327HTC+12分钟5月24日.mp4
一套 VIVE Mars CamTrack 解决方案共包含:一个 Mars 主机、两个基站、两个追踪器(VIVE Tracker 3.0)、三个探测器。
图源:VIVE Mars 官网
视频对整套解决方案进行了展示,摄像机上架着追踪器,Mars 与电脑相邻。网线直接连接到 Mars,然后 Mars 通过网线连接工作站,通过 LiveLink 协议直接集成进虚幻引擎中。
鲍永哲对这套系统如何与虚幻引擎合作,做了解释:
“我们会提供相机追踪,会把相机追踪到的很多参数传送到电脑中去,真正合成是在软件中合成。各位可以想象有一个绿幕,有一个软件在做合成的动作,一方面Unreal会把场景渲染出来;另一方面Unreal会从电脑的HDMI接口或者SDI的接口获取到相机的画面,把相机的绿幕背景去掉,把人剪辑出来,紧接着叠合在背景上,形成最终的画面——背景叠合人物。”
Mars 可以独立工作,不需要利用计算机和 CPU 来处理运算,也无需更新 Steam VR 这一类驱动,同时也不需要房间校准,如果需要场景重设,只要点击重设按钮,就可以重新开始。
鲍永哲表示:“基本上把我们的 Mars 通过网线直接连接到电脑,把虚幻引擎启动起来,就可以做他原来想要做的内容创作,所以我们会处理好技术部分的问题,让所有创作者可以专注在创作部分。”
HTC VIVE 将一套完整拍摄相机追踪系统的工作流,整合成一个即插即用,且具备专业影视拍摄级别的解决方案,让整个虚拟制片过程变得更快捷、更简单、更经济。单从设置时间来看,便可缩短95%。
图源:HTC VIVE
针对 VIVE Mars CamTrack 重要特点,赵鹏进行了总结:“第一,我们有精准的定位方案;第二,拥有当下Unreal UE引擎这种成熟的技术和成熟的市场;第三,我们可以非常方便进行快速布置和搭建。”
他还提到了更为具体的优势特点:
“第一,支持2-4个定位器,最大可以支持10米×10米的空间定位;第二,可以对室外的摄像机进行追踪拍摄,操作也更简单,可以将原本5-8小时的设置时间以及每天都需要进行校准的这些时间缩短到15分钟。”
“同时我们支持自动校准,可以对镜头的偏移和失真进行自动校准;可以兼容现有的镜头编码器,自由地进行景深调节;同时还可以即插即用,并且支持虚幻引擎的Live Link实时链接,这项功能使我们不用导出就可以直接在屏幕上看到成片效果;此外我们支持同时对三台机位的数据进行切换,以及一键重置。”
正是这些优势,让VIVE Mars CamTracker拥有了让创作者轻松实现虚拟制作的可能,也让HTC VIVE正式入轨虚拟制片这条赛道。
结语
除去本次虚拟制片解决方案的发布,HTC VIVE 最近备受关注的新闻要属关于元宇宙的建构VIVERSE,VIVERSE与这套虚拟制作解决方案之间也存在着联系。
鲍永哲表示,“对于虚拟制片我们本身非常看好,我也跟我们VIVERSE团队谈过,未来元宇宙里面有很多3D场景,我们可以把这个场景拿出来使用,配合真人,其实可以做出很酷的宣传视频。”