2022年12月19日
By 瑞安Jespersen 杜比公司产品策略总监.io
聚光灯

如何掌握远程生产

在大流行期间，广播行业在人们合作现场制作音乐会的方式上发生了根本性的转变, 体育和赛事, 以及影视节目的远程制作和后期制作.

具有讽刺意味的是, 这与历史上对原创内容的高需求相吻合，因为我们试图分散自己的注意力，满足我们对人际关系的渴望.

这一转变对远程编辑和制作团队产生了巨大影响，他们要应对疫情带来的旅行和面对面限制. 好莱坞电影公司和国家广播公司尝试使用新技术，通过消费者级的工作流程实现广播质量.

演员, 董事, 颜色的年级, 后期制作编辑器, 视效监事, 音乐作曲家, 现场活动制作人, 他们都需要一种实时协作的方式来制作内容, 与他们的专业制作设备和实体工作室分开.

问题就在这里.

好莱坞因冠状病毒大流行而陷入停顿, 迫使编辑和制作团队在家工作. 但是在家工作需要你连接到本地的ISP, 忍受国内互联网连接的变幻莫测，在你的消费级电脑上工作.

无论你的家用电脑规格有多高，它都不是你的工作室设备.

而实时远程制作或后期制作并不新鲜, 这在历史上是通过文件交换和注释完成的, 哪个是迭代的，哪个是顺序的, 因此不具有互动性.

团队合作需要实时连接，以便协作后期制作. 这对广播生态系统来说也并不新鲜. 但现有的解决方案需要专用设备, 网络和稳健的互联网连接速度保证了必要的工作质量.

当现场和电影制作过程需要数字化连接的团队时, 所有工作都是实时的, 你突然面临一些重大问题.

让我们考虑一下在一个典型的电影制片厂会发生什么. 你是完全数字化的，在以下时间与你的同事实时联系:

预形象化:寻找地点, 使用虚幻引擎和Unity虚拟场景等3D工具测试视觉场景.
前期制作:测试场景变化，包括颜色, 定位, 相机镜头, 拍摄场景前的角度和灯光.
制作:在虚拟场景中拍摄和数字混合真实和虚拟组件.
后期制作:在制作电影成品的过程中，对视觉质量要求最高的阶段, 有特效, 颜色编辑, 声音剪辑, 音乐合成, 与大型编辑团队一起工作，以创造最终产品.

在后期制作中，“繁重的工作”发生了——实时制作完成的电影. 这里的术语“实时”指的是实时渲染，包括计算带有所有视觉效果的最终场景的能力, 有了一定的质量和解决方案，工作室就可以进行验证和发行了. 后期制作团队使用NLEs和VFX软件的组合. 这包括Adobe Premiere和After Effects, Avid Media Composer和Pro Tools或DaVinci Resolve结合编辑, 色彩校正, 视觉效果, 动态图形和音频后期制作. 以及Autodesk Maya, 3ds Max，或虚幻引擎的3D和VFX.

实时渲染曾经是一个挑战, 即使在没有远程工作流程挑战的物理工作室环境中. 它要求团队可以访问专用网络, 演播室级别的摄像机和显示器, 强大的服务器位于一个或多个连接的现场工作室. 这与通常的在家工作(WFH)环境相去甚远.

后期制作是一个需要团队合作的创造性过程. 今天的技术非常适合工作室和布景之间的内部工作, 团队成员站在哪里，并在现实生活中通过肩扛式评审相互交流.

音乐会的现场远程制作也是如此, 体育和其他活动, 需要从远程位置捕获实时内容并从中央工作室或控制室进行管理的地方.

然而, 当面对这个带有消费级硬件的新的远程WFH环境时，这些遗留工作流将失败, 台式机或笔记本电脑, 公共互联网接入.

但是，正如那句老话所说，演出必须继续.

为了让节目继续下去, 广播公司和好莱坞工作室必须找到一种方法，为他们的WFH队友提供现场和后期制作环境. 这是, 创建相同的专业广播质量输出，将实现在演播室与高速, 高容量网络和昂贵的硬件和应用程序.

远程后期制作

无论是在工作室还是在WFH，远程后期制作都需要同样的三位一体:

电影/广播质量制作
团队交互和实时协作的近乎零延迟
可负担性，因为每个人都需要在家里使用这些解决方案.

要求一:质量

是否使用桌面, 移动PC。, 浏览器或应用程序在家里, 你必须提供“电影质量”或“广播质量”的产品，以支持全色域和声音.

色彩测量指的是三件事:色彩深度、色彩精度和色彩采样:

颜色深度:基础是8位, 改进到10位，然后是12位，提供全范围的white, 红与蓝.
色彩准确性:色彩分级是后期制作过程中至关重要的一部分, 具有高动态范围(HDR)，对应于可以在现实世界中观察到的亮度或亮度的物理值. 请注意，HDR只能在最小10位色深的情况下实现.
色彩采样:不深入技术细节, 有3个级别(4:2:0), 4:2:2, 4:4:4)与图像的色度分量相关的数字. 4:4:4是图像的原始尺寸和最佳色度采样.

然后是音频质量. 最小的是立体声音频，5.1和7.1环绕声对大多数现场和后期制作项目的要求.

为了满足这些视觉和听觉质量要求, 这些特性需要在我们每天用来与远程同事互动的工具中得到原生支持:web浏览器. 但这说起来容易做起来难，因为浏览器厂商需要内置这种支持.

总结, 这些远程生产工作流必须支持专业级输入支持(SDI)。, 10位和12位颜色深度, HDR, 4:4:4色度采样, 环绕声. WFH意味着该解决方案需要在消费级家用台式机或笔记本电脑上运行, 并在公共互联网上工作.

需求2:接近零延迟

远程生产解决方案的另一个挑战是在保证质量的同时提供实时延迟，以便为位于世界各地的团队成员提供交互性.

使用延迟3的潜在HLS直播流是没有意义的, 五个。, 当你试图进行远程直播采访时，需要10秒钟或更长时间, 或者在后期制作中与同事一起回顾VFX场景. 有Zoom或Teams这样的视频会议应用, 但是你却因为无法控制媒体渠道而牺牲了交互性的质量.

需求三:成本

现有的远程制作设备，包括工作室服务器, 应用程序硬件和软件非常昂贵. 一些最常用的硬件编码和流媒体“盒子”的成本高达5万美元一个. 大多数需要安装在编解码器插图的专用专用网络, 质量和颜色配置文件设置. 首页。. 对于一个完整的WFH远程生产团队来说，这不是一个经济上有吸引力的提议——尽管性能有限.

但我们不是已经有解决办法了吗? 那NDI和SRT呢?

NDI(网络设备接口)允许任何人使用实时, 超低延迟视频在现有的IP视频网络, 创建虚拟视频和音频流在制作和广播行业都很流行. NDI的问题在于，它在公共互联网上的表现非常糟糕，因为它从来没有为此目的而设计，也没有在web浏览器中原生支持.\

SRT (Secure Reliable Transport，安全可靠传输)是一种开源的视频流协议，提供了高质量的视频流传输, 通过公共互联网的低延迟实时视频. SRT正迅速成为RTMP的后继者, 但像RTMP一样，web浏览器本身不支持, 需要硬件设备解码实时流以进行回放. 事实证明，这可能代价高昂且难以管理, 因为您需要将硬件设备发送给远程生产团队的每个成员.

互联网, 网络浏览器也是如此, 唯一的工具是专门为实现世界各地的远程生产团队所需的交互性和协作而构建的吗.

杜比.正是出于这个原因，io于2022年2月收购了Millicast. Millicast不仅能够支持好莱坞工作室和后期制作公司(包括NBC环球)的这些要求, 哥伦比亚广播公司维亚康姆, HBO和迪士尼, 也适用于NFL的实时远程制作和REMI用例, ESPN和NASA.

杜比.io在WebRTC中对编码器和解码器进行了优化，从而在web浏览器中添加了本地支持, 使远程制作工作室即使在视觉效果和色彩分级等最苛刻的工作方面也可以使用WFH.

质量

使用扩展版的WebRTC，杜比.IO支持4:4:4视频质量和5.1音频，同时保持与Chrome浏览器兼容的渲染和播放.

协作

团队成员之间的典型延迟小于250ms, 这种延迟需要在安全和加密的情况下实现人类的实时交互和协作，就像工作室现在已经使用的那样.

带宽

支持较新的视频编解码器提供更好的压缩，使用更少的带宽, 因此，降低成本并增加额外的弹性，以处理通过家庭公共互联网连接经历的不可靠质量.

成本

超越捕获和输出, 通常的SDI输入/输出卡可以在哪里使用, 不需要特殊的硬件或网络访问来启用完整的编辑, 设计和创意过程需要您的地理位置分散的编辑团队. 杜比的.io实时流解决方案适用于任何设备或web浏览器, 包括没有外部编码器或解码器的现成PC或Mac电脑.

杜比.io通过简单易用的api使开发人员和创作者能够访问视觉和声音科学. 这些api被广播公司和好莱坞工作室用来开发用于远程制作的内部产品. 我们也有像5thKind这样使用杜比的客户.为他们提供安全的CORE Live产品提供动力, 媒体制作工作流程的实时协作审查, 具有高质量的直播和视觉水印. 他们的产品在2020年获得了NAB年度最佳产品奖，并被许多工作室和后期制作公司使用.

5thKind提供远程制作工作流程，帮助电影和电视工作室进行每日评论, 后期制作和视觉特效.

任何制作集的关键组成部分是视频村, 工作人员和演员聚集在一起观看正在拍摄的东西. 视频助理负责将现场摄像机的视频信号分发给导演的监视器，以及客户的偏移和非现场监视器, 机组人员, 还有其他参与制作的人.

相机外回放允许适当的每一个镜头的回顾，而不涉及摄制组或相机的回放. 分开回放之所以重要是因为它允许摄像师, 助理, 在导演回顾拍摄内容的同时，DP处理现场图像, 让每个部门在设置之间自由工作.

制作团队对虚拟视频村的需求日益增长, 非现场编辑, 色彩分级师和视觉特效工程师可以实时查看开始的镜头，以捕捉错误并提供反馈，从而降低重拍场景所产生的昂贵生产成本.

电脑游戏和电影制作的融合几乎完成了，与虚幻引擎(Unreal Engine)等游戏引擎进行远程制作协作的需求日益增长, Unity和3D软件，如Maya和3D Studio Max. 从前期制作的所有阶段, pre-visualization, 故事板, 制作和后期制作现在都是由虚拟可视化驱动的.

近年来，从《百家乐app下载》到《百家乐软件app最新版下载》, 翻拍的《百家乐app下载》都在使用虚拟角色和虚拟场景来改进电影制作过程.

在一个任何东西都可以被操纵的数字世界里，创造力已经转移到了后期制作. 创意艺术家团队, 编辑们通过大容量网络与大型服务器、超高清显示器和软件相连. 实时协作和工作, 一部电影不再是从日常拍摄中“剪切”出来的，而是在数字场景中实时创作出来的.

雷米生产

REMI(远程集成模型)指的是允许从远程位置捕获实时内容并从中央控制室进行管理的生产工作流. REMI帮助广播公司和现场活动制作人获得了许多好处, 包括降低基础设施成本, 生产成本, 改进了工作流程，使生产团队更加高效.

REMI将广播级生产工具与云的灵活性相结合, 以协作的方式提供现场广播和活动, 基于浏览器的工作区. 它保留了在标准广播中可以找到的所有关键制作元素. 关键的区别在于，你在镜头前的才华是在一个偏远的地方.

托德•梅森, 广播管理集团首席执行官, 与ESPN合作，转播像少年棒球联盟世界大赛和疯狂三月这样的赛事, NCAA男子篮球全国锦标赛.

我最近参观了他们在拉斯维加斯的REMI设施, 我和托德谈过，他提到在今天的气候下, 人们不愿或无法离开家园, REMI生产工作流是有意义的. 它被全国的制作公司和内容创作者大量使用.

任何REMI制作都始于捕捉现场的视频和音频. 不管你制作的是什么内容, 你需要一种机制来捕捉你才能的高质量视频和音频. 这些视频和音频信号都需要被传送到你的中央控制室.

REMI生产工作流已经在体育界使用了多年(稍后会详细介绍)。. 现场体育节目, 你面对的是多个摄像头它们都需要被传送到中央控制室. 这需要在当地体育场安装更全面的摄像机，并建立可靠的机制来传输这些视频和音频.

如果你正在制作一个现场新闻或娱乐节目，你在偏远地区有单独的记者, 您的现场相机套件可以更精简和高效.

您在现场的相机和音频需求可能会有所不同, 但它们是任何REMI生产的必要组成部分.

在广播管理集团, 他们开发了家用相机套件，作为他们在家直播REMI解决方案的一部分, 包括一个4K PTZ摄像机.

所有REMI生产工作流都依赖于一个中央控制室. 这是你所有的相机和音频信号的馈送和你的主要开关, 混合, 传播就发生了.

您的REMI控制室可以从飞行包到专用控制室再到生产卡车. 您的REMI控制室可以——也将会——根据您的需要而变化. 这些需求将由你制作的内容决定.

一般来说，REMI控制室将需要以下设备:

视频切换器
混音器
图形系统
录音回放系统
通讯系统
入站和出站传输能力

同样，这些是基线需求. 您的内容将决定技术需求.

他们在Live At 首页。 REMI解决方案中集成的另一个方面是虚拟布景技术. 通过为你的人才提供绿幕, 您可以创建一个完全可定制的, 符合节目审美的品牌虚拟背景.

传输和连接是成功的REMI生产的重要组成部分.

您的传输需求可以分为三类:

在你的主要人才所在地的连接性
你的REMI控制室的传入传输能力
REMI控制室的出站传输能力

从你的主要人才所在地, 你需要以极低的延迟发送视频和音频信号. 对于使用REMI的现场体育制作，这些信号可能通过光纤或卫星发送回来. 对于单摄像机馈送，基于ip的解决方案(如LiveU)可能就足够了. 对于任何基于ip的内容，提前评估本地带宽可用性是很重要的. 最好的远程传输方法取决于你的主要位置和你的预算承受能力.

在REMI控制室，您需要能够接收所有传入的提要. 例如, 如果你用八台摄像机远程转播一场体育赛事, 您的REMI设施需要有可用的基础设施来接收这8个信号. 接收基础设施并不总是一对一的比例. 这意味着你并不总是需要一个接收器来接收每一个传入的信息. 例如，LiveU的LU-2000服务器最多可以引入四个远程提要.

最后，你需要有能力把你的信号发送到某个地方. 这可能意味着直播到网络上，或者通过光纤或卫星发送信号. 传输难题的这一部分取决于你的内容目标. 对于上述任何选项- IP, 纤维, 或卫星-您的REMI设施将需要有适当的设备和出站连接.

成功的REMI生产的关键要素是团队所有成员之间的清晰沟通和实时协作. 团队分布在世界各地, 团队成员之间哪怕一秒钟的延迟都可能是灾难性的.

为了解决这个问题, 广播演播室和控制室使用Multiviewer在单个显示监视器上显示多个视频源，并帮助工程师检查来自路由器的信号分布路径，这些路由器充当实时预览设备. 多路观看器能够完整地显示实时视频信号, 分裂, 四, 以及电视显示器的自定义配置. 杜比的.io实时流媒体服务提供了一个WebRTC CDN，使广播管理组能够以广播质量和低于500ms的玻璃到玻璃延迟将Multiviewer输出发送到远程客户端和员工, 在任何设备或web浏览器上具有本机播放支持.

REMI生产的应用程序

现在我们已经从高层次上介绍了REMI生产, 是时候深入研究一些可能的应用了. 什么类型的编程可以利用REMI工作流?

现场直播的体育

我们已经提到了现场直播的体育比赛. REMI工作流用于现场体育赛事已经有一段时间了. 从成本的角度来看，REMI是一个理想的解决方案. 即使是流线型的远程生产, 还有一些硬成本:技术人员, OB卡车, 传输, 旅行, 等. 如果你是一个大公司, 像ESPN, 拥有大量的物理基础设施和可用容量, REMI在财务上很有意义. 您可以在利用内部员工和现有基础设施的同时简化远程团队.

新闻直播

体育直播之外, REMI生产工作流可以用于现场新闻节目和事件. REMI非常适合与主持人进行现场或现场录音采访, 许多客人分布在许多目的地. 每个上镜的人才可以在制作前发送一个家庭相机工具包. 来自这些设备的视频和音频可以传输到一个中央控制室，在那里可以切换程序, 音频可以混合, 可以添加图形和播放资产, 并且程序可以被传输.