GUI of Pmfort Silverstack in dark mode listing clips of a porject

文件格式与数据处理

必要的知识

  • 复制粘贴?

    使用 MHL 复制数据

    从原始媒体传输记录材料时,不应该使用简单的文件复制。有不同的软件和硬件解决方案可用,可以将文件复制到一个或多个目的地,并执行校验和计算,比较原始媒体上的材料与副本,以提供最小努力的数据完整性安全检查。我们强烈建议使用带有校验和计算和验证的复制软件和工具。校验和文件应在第一次复制过程中计算并生成为附加文件。

    有许多不同类型的校验和,都是为了安全快速地复制。例如,有一个名为MHL(媒体哈希列表)的校验和文件。文件的结构是固定的。它是基于XML的文件,始终包含以下信息:

    • 创建者信息
      • 姓名
      • 用户名
      • 主机名
      • 工具
      • 开始日期
      • 结束日期
    • hash
      • 文件路径
      • 文件大小( bytes)
      • 文件最后一次修改日期
      • xxhash (经计算)
      • hash日期

    MHL

    媒体Hash列表是一个XML文件,其中包含:

    • 创建者信息(姓名,用户名,主机名,工具,校验和计算开始日期和完成日期),后跟
    • 处理的每个文件的Hash值(文件路径,大小(以字节为单位),上次修改日期,Hash值,Hash创建日期)。

    下次复制文件时,MHL文件中的Hash值将用作验证的参考。如果任何文件以任何方式被修改(即损坏或编辑),校验和将不再匹配,验证将失败。因此,应尽早创建校验和,即在从记录媒体复制原始摄影机数据时,将其与原始文件一起保存到存档中。虽然大多数人都认为校验和至关重要,但不同的工具、公司或个人可能会使用任何验证方法/校验和类型。这使得在制作过程中跟踪损坏或意外修改的发生位置变得困难。


    为了解决这个问题,美国电影摄影师协会的一个小组与工作室、软件公司、DIT和后期制作设施的成员一起,开发了原始MHL概念的扩展,即ASC MHL(版本2)。

    简而言之,ASC MHL优化了MHL文件的XML结构,并添加了所谓的“链文件”,它作为MHL历史记录。链文件跟踪每个ASC MHL文件的路径和文件哈希,以便可以验证它们的完整性。这使得生产商能够准确地确定问题出现在哪个环节。

    有关ASC MHL的更多信息可以在ASC网站上找到。


    数据管理软件

    以下是提供推荐安全级别验证的数据管理工具列表。请注意,此列表可能不是详尽无遗的!

    • Pomfort提供一系列用于媒体资产管理和数字成像的产品。他们的入门级数据管理软件是Offload Manager。在顶级产品中,您会发现功能齐全的Silverstack Lab,用于剪辑管理、QC和每日工作。Pomfort软件仅适用于macOS。
    • Imagine Products专注于将数据备份到磁盘和LTO。他们的数据管理软件名为ShotPut Pro,适用于macOS和Windows。
    • Hedge提供数据管理、报告、转码、审查和存档工具。他们的复制工具称为OffShoot(前身为Hedge)。Hedge软件适用于macOS、iPadOS和Windows操作系统。
    • OWC是专业存储硬件解决方案制造商,也提供备份、磁盘管理和归档软件。他们的数据管理软件名为Copy That(仅适用于macOS)。
    • Quine免费提供其解决方案。Quine Copy提供基本的复制和媒体管理功能,以及转码选项。
    • OTTOMATIC o/PARASHOOT不是一个复制工具,但从我们的角度来看,它确保在现场进行安全卸载和擦除过程,通过检查卡上的文件是否已经复制。它还提供了摄影机媒体的可逆擦除过程,只要驱动器没有在相机中擦除。
  • ARRIRAW 文件格式

    ARRIRAW是ARRI的格式,用于未压缩、未加密和未经过处理的传感器数据。它可以被视为摄影机底片的数字版本。ARRIRAW是唯一一种完全保留摄影机自然色彩响应和曝光宽容度的未处理传感器数据的格式。

    像底片一样,ARRIRAW数据必须被开发或处理,以将单通道图像(代表原始Bayer模式传感器读出)转换为适合正常观看的彩色图像。最初记录的原始数据保持原始状态,始终提供返回并改善结果的灵活性。这使得ARRIRAW成为数字电影制作和高质量视觉效果制作的完美格式。

    我们的摄影机系列支持机内录制ARRIRAW或MXF/ARRIRAW数据。MXF/ARRIRAW是ARRIRAW在容器格式(*.mxf)中,允许每个剪辑仅包含在一个文件中,而不是数千个文件,因为常规ARRIRAW格式(*.ari)需要。ari) 每一帧都是单独的文件。 前代ALEXA摄影机(ALEXA Classic,ALEXA Plus/Plus 4:3,ALEXA M和ALEXA Studio)需要一个理解T-Link信号的ARRI认证的外部记录器。"


    ARRIRAW 处理流程

    ARRI通过ARRI合作伙伴计划与后期制作设备制造商建立了长期的关系。这些关系使得所有领先的合成和颜色校正工具都能够直接处理ARRIRAW文件。

    此外,ARRI还提供了一个ARRIRAW处理软件开发工具包(SDK),其中包含ARRIRAW处理流程的文档和库——可执行代码——供供应商整合到他们的应用程序中。ARRI还支持希望自行实施ARRIRAW处理流程的供应商,通过全面的三阶段色彩处理流程文档和持续的直接支持。

    去拜尔A

    RRIRAW处理的第一阶段是最需要计算的。ARRIRAW图像(像所有相机的原始图像一样)只有一个“颜色”通道(实际上,它是一个带有颜色编码的亮度通道)。一种颜色重建算法根据摄影机传感器上的有色滤波器的类型和位置计算每个像素的缺失组件。ARRI摄影机使用贝尔模式彩色滤波器阵列。因此,“颜色重建”这个术语也被称为“去贝尔化”。Bayer模式过滤器过滤掉照射到传感器上的光线,使得传感器的50%光点用于表示绿色,25%光点表示红色,剩下的25%光点表示蓝色。因此,去贝尔算法需要重建75%的红色,50%的绿色和75%的蓝色信息:

    上面的图像显示了来自左侧传感器的单通道捕获图像,以及右侧重建图像,该图像利用了颜色滤波阵列。重建图像的一半绿色值是通过周围的光点进行插值而不是捕获的,红色和蓝色的四分之三也是如此。

    图像的输出质量取决于去马赛克算法。一般来说,简单的算法处理速度更快,但也存在更高的颜色错误的可能性。

    然而,对于VFX来说,图像通常使用本地传感器像素计数进行处理,然后在后期缩小到4K或2K等。使用这种方法可以利用亮度分辨率,该分辨率与传感器像素计数相关。

    ARRIRAW SDK和第三方实现

    在许多情况下,ARRI的SDK足够快速和适应性强,以满足应用程序的处理需求。但在某些情况下,特别是当产品使用自定义硬件(或以非标准方式使用标准硬件)时,合作伙伴计划成员可能希望自己实现ARRIRAW处理流程。在这种情况下,SDK作为一个参考,会员的开发人员可以在提交评估图像给ARRI的工作流组之前,测试他们的结果。在一些应用中,供应商的产品提供了两种处理解决方案,给用户提供了最大吞吐量和与SDK非常匹配的选择,或者与使用参考SDK实现的其他产品进行逐位匹配。


    ARRI 参考工具 (ART) 替换 ARRIRAW 转换器 (ARC)

    ARRI参考工具是一款软件应用程序,为ARRI的参考SDK提供图形用户界面。ART是一个结合了查看、渲染、元数据和外观文件的工具。它结合了ARRIRAW转换器、ARRI Color Tool和ARRI Meta Extract,因此取代了它们。

    您可以在这里进行下载: ARRI Reference Tool here.

    历史版本可以在这里找到: ARRIRAW Converter 

    测试您的工作流程

    ARRI建议进行测试以定义:

    • 如何使用所选工具集实现预期的风格。
    • 需要设置哪些不同的工具以满足制作对一致结果的期望。
    • 如果没有其他参考结果集可用,则所选工具所需的设置最接近SDK参考结果。

    您可以使用ARRIRAW帧抓取作为测试材料。ARRI在FTP服务器和Webgate.io上提供使用我们摄影机拍摄的样本素材。


  • 高密度编码 (HDE)

    HDE或CODEX高密度编码是一种无损、可变比特率编码方案,适用于ARRIAW数据。它可以将ARRIRAW数据的占用空间减少40-50%,但在解码时可以提供与原始文件完全相同的位精确匹配。因此,HDE不会在质量上妥协。

    得到主要内容提供商和后期制作应用程序的支持,HDE广泛应用于任何ARRI摄影机的ARRIRAW数据。

    HDE和ARRIRAW一样,有两种文件类型:作为ALEXA 35的MXF封装剪辑,或者作为所有先前摄影机的单帧*.arx文件序列。 将其移动到MXF容器中显著减少了在整个剪辑中将保持静态的元数据的冗余。ALEXA 35处理完全针对MXF容器中的元数据传输。因此,只有较早的摄影机型号才能使用单帧ARRIRAW和HDE。


    HDE for ALEXA 35

    您有两个选项将ALEXA 35 MXF/ARRIRAW数据转换为MXF/HDE数据:

    • CODEX设备管理器是macOS的系统扩展,可以从菜单栏控制。该软件可以自动在桌面上呈现虚拟HDE卷,旁边是包含原始ARRIRAW数据的实际CODEX驱动器。然后可以使用行业标准媒体资产管理工具(复制工具)复制该虚拟驱动器上的数据。 HDE文件是在传输时即时创建的。
    • ARRIRAW HDE转码器是适用于macOS、Windows和CentOs的独立应用程序。要创建HDE文件,您需要将软件指向包含ARRIRAW数据的源(驱动器或文件夹),并设置一个目标位置,它将在那里创建HDE文件。不需要第三方工具来传输数据。

    将HDE应用在其他型号的ARRI摄影机

    对于包含来自任何早期ARRI摄影机的ARRIRAW数据的驱动器,应用HDE的唯一选项是CODEX设备管理器。附加ALEXA Mini或AMIRA的客户需要CODEX CFast HDE授权,除非您仍然有CODEX USB CFast 2.0读卡器来访问这些卡。

  • ProRes 文件格式

    Apple ProRes 4444 XQ中的录制片段保留了对数编码的完整传感器量化,与ARRIRAW相同的色彩范围。以 4:4:4 编解码器录制的图像与未压缩的高清或超高清材料几乎没有区别。这使得内部录制对大银幕的故事片制作也很有吸引力。以任何高端 4:2:2 编解码器录制可为 Web 或电视应用程序提供完美的源材料。

    2010年,ALEXA成为市场上首款数字电影摄影机,提供将Apple QuickTime/ProRes文件在SxS PRO卡上的摄像机内录制,提供从Apple ProRes 422 Proxy到Apple ProRes 4444和后来的4444 XQ的全系列编解码器。

    2019年,ALEXA Mini LF为Apple ProRes录制引入了一种新的方法:声音、图像和元数据不再包装在QuickTime *.mov容器中,而是使用通用的MXF(Material eXchange Format)容器。

    MXF 是一种广泛支持的开放标准,允许更灵活地访问元数据。使用相同的容器还可以让我们将ARRIRAW和Apple ProRes录制到同一驱动器上,而无需重新格式化。Apple 支持 MXF/Apple ProRes。他们发布了“SMPTE RDD 44:MXF – Apple ProRes的映射和应用”(IEEE.org)。

    目前支持QuickTime/Apple ProRes的ARRI摄影机将继续使用QuickTime。


    请注意:
    Apple ProRes是一种可变比特率编解码器,因此摄影机上最初指示的录制时间可能比实际时间更长。
    Apple ProRes White Paper (2022)