Zero Density是一家致力于为广播电视、增强现实、现场活动和电子体育行业开发创意产品的国际科技公司。两位创始人都拥有电视广播和媒体领域方面的从业背景,他们为共同的目标通力合作,希望利用自己的创意为直播行业开发全新的虚拟制片解决方案。该公司的总部位于土耳其,但在全球拥有广泛的客户关系网。
(本视频转载自YouTube:视频原址) Zero Density借助其Reality Engine为数百万的观众提供了震撼人心的独特直播体验。该引擎是一款基于虚幻引擎打造的虚拟工作室和增强现实解决方案,拥有照片级的真实度。 Zero Density的技术创新核心是其领先的基于节点的实时合成工具,以及其专有的键控技术——Reality Keyer。从一开始,团队就意识到将这项技术与Epic的虚幻引擎深入集成至关重要——其所有计算都在GPU上执行。 传统的后期制作艺术家会发现,Reality Engine的用户界面和操作手法非常熟悉,与Autodesk Flame中的Batch工具没什么不同。但与Flame不同的是,Zero Density的虚拟制片解决方案是为实时直播环境设计的,这就需要画面清晰精确,并且将帧率始终维持在稳定水平。

系统参考了后期制作流程中的复杂性和灵活性特点,并借助强大的直播解决方案再现了这两种特点,这一技术功能可谓前无古人。传统上,图形化软件包只提供填充信号和关键信号,并假设图像切换器中存在基本合成画面。Zero Density提供了一种更为强大的系统,能够识别伽马信号,并且理解线性工作流和查找表。它能将通常为离线方案保留的控制功能添加到实时环境中。 VP_ZeroDensity_blog_body_election_img-1640x929-9e6877f6e9de6523c77302b137f5c9548da4d52c 在使用游戏行业技术密集研发两年后,团队成功地将其与要求严苛的实时直播整合到一起。公司在2016年全国广播协会(NAB)会议上首次发布了最终产品。该产品可以在虚拟场景中设置多台虚幻引擎摄像机。这次发布具有里程碑的意义,使Zero Density成为第一家在广播中使用虚幻引擎的公司。几个月后,该产品在阿姆斯特丹举办的国际广播大会(IBC)上赢得了一系列大奖。

由于Epic允许用户完全访问虚幻引擎源代码,所以Zero Density的所有代码都能在虚幻引擎中运行,并且能够利用着色器编译器、C++和虚幻引擎的跨平台功能。例如,该公司的核心技术Reality Keyer实际上是借助以GPU代码编写的着色器来实现的。

说到键控概念,Reality Keyer与Foundry领先的Image Based Keyer(IBK)并没有太大区别。IBK是该公司Nuke合成解决方案的一部分。Reality Keyer使用一块空白板,并将其与系统的追踪功能相结合。其生成的网格体可以用来表示摄影棚中的任意环形绿幕。三维图像是由程序生成的,支持更为干净的键控操作以及动态垃圾遮罩,即便是在扫描平移和倾斜时,也能生成干净而真实的键控最终图像。该系统通过在空白板上进行投影映射,协助键控操作,因此比普通的色度键控器更为先进。尽管它是基于UE4内的着色器实现的,但却是第一个也是唯一一个基于实时图像的键控器,并且拥有如此领先的空白板技术。 VP_ZeroDensity_blog_body_cricket_img-1640x924-e482a48336879cbcea4f315bfe21f465cec59c6f 福克斯体育于2019年2月采用了Reality Engine,并在其纳斯卡(NASCAR)比赛中心大量使用了键控技术。
  (本视频转载自YouTube:视频原址) Reality Engine旨在与各行业中的跟踪技术配合使用。Zero Density可以从大多数主要解决方案中提取跟踪数据。此外,它还可以提取程序提供的镜头数据。如果没有镜头数据可用,软件会从最后一次校准的变焦和聚焦数据入手,然后估算出镜头曲率和其他属性,例如视野。所有这些都在虚幻引擎中完成。

尽管公司因其与福克斯体育等广播公司的合作已而蜚声业内,但Zero Density目前仍在吸引制作儿童类电视剧集的客户。这些项目会在绿幕中拍摄,然后与录制好的真人片段一起直接进入最终剪辑阶段,无需传统的离线渲染,也无需后期制作的视觉效果。

在剧集工作流中,软件不仅可以输出最终合成画面,还可以输出各种关键图层,例如垃圾遮罩。未来,团队希望将软件从现有版本升级到更高级的版本,使其支持实时工作流并输出额外的数据,以便在后期阶段完整地调整并重新剪辑最终合成画面。

近期,团队推出NVIDIA RTX显卡实时光线追踪功能,这是我们目前取得的一项巨大进展。在2019年4月的NAB大会上,Zero Density展示了带有光线追踪的Reality Engine 2.8版本,演示了虚拟场景中的视频屏幕如何将光线反射到场景的其他相关部分上。此外它还演示了改进的阴影效果和许多其他光学提升效果。公司在8月份发布了2.8版本。最新的2.9版本将于2019年9月在IBC发布预览。

Reality Engine是一款功能强大、可靠耐用的高端解决方案,Zero Density不仅提供了主要系统,还提供了必要的自动化、监控和控制接口。该系统经设计可在多个虚幻引擎实例上运行,并且这些实例都被视作同一个实例进行控制和管理。例如,土耳其艺术文化频道TRT2借助其虚拟演播室播放了7个不同的节目,而这些节目仅由3个Reality Engine实例控制。
(本视频转载自YouTube:视频原址) 在不断向虚拟制片靠拢的同时,Zero Density还展示了对直播有严格要求的广播行业工作流程如何为各类节目提供高价值工具,并为要求日益严格的现场直播提供复杂的视觉效果。 本文是我们的视觉颠覆者系列的一部分。访问我们的虚拟制片专题网站,获取更多采访、文章、见解和资源。 原文地址:https://www.unrealengine.com/zh-CN/spotlights/zero-density-delivers-live-broadcast-virtual-production-solutions