Simulcam技术支持的摄像机可以跟随或者监视用“表演捕捉”技术创造的虚拟角色并即时将其合成到一个现场表演环境中,是好莱坞电影工业与科技深度结合的一个集中体现,加深了电影技术与艺术的融合,带给创作者更大的想象空间和所见即所得的舞台,将对未来的体验式娱乐产业产生深远的影响。
SimulCam (协同工作摄影机)简述:
电影工业在21世纪早期开始实际应用的新一代摄制技术,它能够在摄影机进行拍摄的同时,将CG(电脑图像)制作出的虚拟视觉内容与实拍内容实时呈递出来,帮助电影制作者更加准确和快速地拍摄大量带有VFX视觉特效的镜头。 可以看作是“增强实境”技术,和VR(虚拟现实技术)在影视工业中的良好结合应用。在制作那些全CG镜头的时候,可以将Simulcam看作是一个可以真实触碰并掌握的虚拟摄影机,此时,真实存在于拍摄现场的摄影机仅仅起到一个参数采集的作用。
Simulcam技术是好莱坞电影工业与科技深度结合的一个集中体现,加深了电影技术与艺术的融合,带给创作者更大的想象空间和所见即所得的舞台,将对未来的体验式娱乐产业产生深远的影响。
Simulcam应用案例:
Simulcam技术支持的摄像机可以跟随或者监视用“表演捕捉”技术创造的虚拟角色并即时将其合成到一个现场表演环境中。此外,它还能够让制作人直观地看到现场表演镜头中的虚拟背景是什么样子。大导演史蒂文・斯皮尔伯格(Steven Spielberg)在拍摄《人工智能》(A。I。)时就采用类似的技术。但这种技术只能展示建筑的线框图,因而很容易出现差错。而据卡梅隆自己介绍,这项新技术渲染出来的事物更具直观、可视性,或许与视频游戏有些相似。
詹姆斯・卡梅隆在惊世之作《阿凡达》中,将Simulcam技术应用到电影中绝大多数镜头里,是该技术应用的里程碑作品。在达新西兰之前,对Cameron和制作人员来说,立体技术已经不是问题了,在实拍中他们还有其他的技术创新。其中一项技术---Simulcam(协同工作摄影机)―无论对阿凡达还是对今后的电影事业都有重大的意义。使用Simulcam能够在拍摄时实时看到合成后的效果,也就是说Cameron在摄影机取景器中看到的不是绿屏,而是数字合成后的场景和角色。
其实Simulcam的开发早在两年前就开始了。有一天,Cameron在思考虚拟摄像机技术,然后他问了Glenn Derry一个问题,就是这个问题最终导致了Simulcam的研发。Cameron回忆道:“我当时站在虚拟摄影机前面,突然意识到这并不是一个“摄影机”,这只是一个物体。其实对于整套系统来说,它就是一个物体,你可以操纵它的方向,它从功能上讲算是一台摄影机,但归根结底它并不是真正的摄影机,它甚至可以是一台烤面包机。
突然我灵光一现,那如果它真是一台摄影机会怎么样呢?我们能不能创建一套网格系统,这样把虚拟摄影机和另一台摄影机的图像叠加在一起呢?你能把两个世界合成到一起吗?
当时我就问Glenn Derry:‘如果我们的虚拟摄影机是一台真正的摄影机,我们使用它拍摄绿屏表演,然后再Motion Builder中生成的数据也加到图像中,同时还要有一个实时的轨道,把虚拟的环境和角色也添加进来。让实拍演员和虚拟环境进行实时交互,这些能实现吗?Glenn想了一会儿说:“没什么不可能的。”当然整个开发过程中发生过成千上万的问题,Glenn一共花了两年才完成这套系统。系统开发以后,一切才真正开始。我们拥有了整套捕捉技术,我们还具备实拍技术,两种技术合二为一就是―Simulcam。
Simulcam是真人表演同CG画面相映成趣的合成观察平台。实际上其本身是一块空地(或者没有任何摆设的有限空间),但当你通过显示器观看时就会发现已经有各式虚拟场景存在。Cameron在使用Simulcam的手持终端导演可以通过虚拟摄影机来指挥演员的表演。演员类似于被放进一个充满CG物体的虚拟空间中,通过这个系统可以令导演在真实世界拍片一样,任意选取各种摄影角度,控制协调CG物体的活动,在第一时间看到真人表演同虚拟场景结合后的视效。协同工作摄影机(Simulcam)令CG场景呈现出高度拟真的效果。而这个系统的核心设备就是协同工作摄影机(Simulcam),由布满在摄影棚顶部的140个数字摄像机组成,搭建出一套表演捕捉技术平台。
摄像机通过追踪现场LED灯打出的近红外光谱的反射,将捕捉到的数据传输到一套系统中,再将光谱的反射与演员的运动进行组合分析,得出整个镜头的立体模型。之后,这些数据再被映射到后期的计算机处理,从而令CG场景呈现出高度拟真的效果。卡梅隆亲自参与研发的这种新型虚拟摄影机系统,是对表演捕捉技术的最重要的贡献之一。以前的传统做法都是先将演员的表演动作捕捉抓取后加入到数据库,然后再同虚拟场景进行搭配。卡梅隆让这一切变得更加直观和快捷,不仅令演员可以同步与数字环境进行互动,同时也为导演进行有效指导调配行了极大方便。“它就像一个强大的游戏引擎,如果我想在空中飞或是改变视角,我立刻就能办到。我还可以把整个场景变成50:1的模型布景,在里面穿梭。” 卡梅隆如是说。演员不仅身着表演捕捉服,还有装备着微缩高清摄影头的帽子。卡梅隆向身着特殊服装的演员讲戏。
《丁丁历险记》3D(2011)中,彼得・杰克逊和斯皮尔伯格依靠Simulcam技术,