未来的 8K 工作流
2021.10.22 16:08浏览量:94简介:来自不同公司的几个 8K 相关从业者结合了各自公司的业务,讨论了 8K 工作流程的最新趋势。
来源:8K Association
主讲人:Andy Blondin (Epic games), Thierry Fautier (Harmonic), Katie Fellion(Light Iron), Michael Cioni (Frame.io)
内容整理:彭峰
来自不同公司的几个 8K 相关从业者结合了各自公司的业务,讨论了 8K 工作流程的最新趋势。
目录
- 将游戏虚幻引擎用于电影制作
虚幻引擎
虚幻引擎用于电影制作
基于视觉效果的高分辨率电影制作
- 8K 广播和流媒体
8K 路线图
8K 直播流程
8K 转换到 4K
总结
- 8K 后期制作路线
8K 相比于 4K 的优势
8K 内容发布的挑战和机遇
- 关于 8K 的愿景
8K 视频市场成熟度
超级采样
带宽
总结
将游戏虚幻引擎用于电影制作
演讲者是 Epic games 的高级产品经理。本段演讲主要讨论了虚幻引擎是什么?为什么在电影制作过程中使用游戏引擎,会产生哪些影响?制作中的数字效果?如何通过相机视觉效果的过程实现高分辨率电影制作。
虚幻引擎
演讲者首先介绍了 Epic 在电子游戏上取得的成就,以著名的电子游戏堡垒之夜为例,该游戏拥有 3.5 亿玩家、1230 万玩家在 PC, PS4, Xbox One, Switch,Android 等设备上同时游戏、游戏支持跨平台运行、允许玩家与好友语音聊天等。堡垒之夜取得的巨大成功离不开虚幻引擎 (Unreal Engine) 的支撑,在 Epic 公司利用虚幻引擎 4 在游戏上获得巨大成功的同时,公司也发现虚幻引擎可以用于其他许多行业,例如建筑、工程、媒体娱乐、汽车工业等,现在 Epic 公司正朝着第五代虚幻引擎迈进,其一个关键亮点是能够拥有几乎无限的细节。演讲者展示了一段基于第五代虚幻引擎并运行在 PlayStation 5 平台的电子游戏视频,相比于传统的游戏,该游戏展现出更多的细节。
虚幻引擎用于电影制作
使用最新版本的引擎所带来的特点可以直接引入电影制作中而无需优化,并且实现的硬件成本很低(可以在 PlayStation 5 上进行实时渲染),这使得前所未有的高分辨率可以成为现实。演讲者接着展示了一些实现的示例,在例子中,视频包含了丰富的细节信息,甚至在一帧中也包含了许多的细节。在虚幻引擎 5 下,电子游戏、视觉效果以及电影制作过程之间的界限变得模糊,以致于自 2016 年以来,已经有 140 多个电影项目和 Epic 公司进行了合作。当虚幻引擎被用于电影制作时,电影制作的周期也在发生着变化。
电影制作周期的变化
基于视觉效果的高分辨率电影制作
接着演讲者以电视剧曼达洛人 (The Mandalorian) 为例介绍了如何通过相机视觉效果实现高分辨率电影制作。曼达洛人是一个在洛杉矶拍摄的情节电视节目,在洛杉矶有一个巨大的 LED 卷轴,这个卷轴宽 75 英尺,高 21 英尺,并且其中使用许多运动捕捉摄像机去跟踪摄像机的位置,从某种意义上说,该 LED 卷轴是一块巨大的画布,上面展示了曼达洛人的世界,其使用四个 4K 输出并全部链接在一起,以实现 8K 分辨率的无缝显示。只要可以为演员提供准确的照明,就可以使得演员仿佛真的在那个世界里一样。
在拍摄过程中相机的位置会产生视差,借助于运动捕捉摄像头,实际镜头可以正确移动,从而可以实现更真实的效果,例如,当电影人物走动时,其背景可以达到虚拟延伸到无限的视觉效果;同样借助于虚幻引擎产生的场景在卷轴展示并使用 360 度的相机捕捉,可以实现更逼真的视觉效果,例如人物盔甲的反射效果。
演讲者也提到了这一拍摄方法拥有许多优点,例如不受其他因素影响随时可以拍摄、布景方便、可以实现超高分辨率等。
8K 广播和流媒体
8K 路线图
演讲者首先介绍了 8K 的时间线,从 2018 年在 IFA 上第一次宣布 KTV 开始,2018 年底 NHK 推出了他们的 DTH 服务,8K 协会在 2019 开放,然后 Foster Division 进行了 8K over 5G 的首次演示,Harmonic 参与了这个激动人心的项目。然后在 2019 年的 IBC 上三星宣布实现了第一个 SVOD(Subscription Video on Demand),在 2022 年希望看到 8K 视频的北京冬季奥运会。演讲者提到为了应对 8K 带来的变化,许多的编码方法也在不断扩展,增添新的功能。此外,如下图所示在 UHD 的框架下,4K 和 8K 需要不同的支持,包括硬件和软件。
UHD 技术路线图
8K 直播流程
8K 视频可以使用广播或者 OTT 进行传输,下图是法国电视所 2019 年进行的一个实验,使用移动或者固定的 8K 摄像设备,将拍摄的视频先压缩到 50Gb/s 再经由光纤链路发送到视频交换器(Video swither)。
内容准备
得到源视频即完成内容准备之后,需要将视频编码并分发,如下图所示, Live 8K 编码器会将视频编码至 80Mb/s 然后发送到传输网络,然后利用云服务器的能力,依据内容将视频编码为不同码率的流,平均而言,其码率在 40Mb/s。
内容分发
8K 转换到 4K
可以看到 8K 视频的制作复杂性较高,传输占用带宽大,广播公司对是否可以盈利持怀疑态度,并且担心不可以吸引新用户。在这种情况下,一种解决方案是将 8K 视频转换到 4K,利用现有 4K 基础设施分发内容,用户接收到 4K 流之后进行播放,这就是三星的缩放技术。
总结
最后演讲者简单介绍了自家公司的 8K 相关产品,并对当下和未来的 8K 视频做了几点总结:
- 8K 广播已经在服务中
- 下一个前沿是 8K 流媒体
- Cloud & AI 可以延长 HEVC 的使用寿命
- 下一代编解码器不会在 2023 年之前出现
- 商业服务生态系统日趋成熟
- 未来几年会有一个临时的 8K 到 4K 的解决方案
8K 后期制作路线
演讲者首先介绍了 Light Iron 的背景,该公司自 2009 年成立以来一直在制作 4K 日报,2013 年后开始发布 6K 的内容,2016 年第一部 8K 摄像机上市后,公司也开始为其他公司制作 8K 电视和电影。所以演讲者强调我们已经处于 8K 的时代了,但是也表明 8K 内容的获取比制作要容易得多。
8K 相比于 4K 的优势
演讲者提出了一种情况,在理论下,当光学镜头不可避免出现拜尔模式 (bayer pattern) 时,相比于直接使用 4K 拍摄,使用 8K 拍摄的视频通过下采样可以得到更接近真实颜色的图像。演讲者展示了由 Light Iron 公司的 DXL2 拍摄的 8K 图像通过下采样得到的 2K 图像和直接拍摄的 2K 图像之间的差异,如下图所示,可以看到通过 8K 图像下采样得到的图像细节过度更为平滑,在直接使用 2K 拍摄的图像中,人物眼球部分的颜色出现了严重失真现象。此外,演讲中提到为了获得一张图像,当使用每多一倍分辨率的图像下采样获得时,图像的噪声会下降 3db。随着高效编码器和压缩选项的出现,经过处理压缩后的 8K 的存储消耗和 4K 甚至是 2K 的接近。
高分辨率图像下采样和低分辨率图像对比
8K 内容发布的挑战和机遇
在目前,8K 的内容发布还面临许多问题,例如缺乏专业显示器、未压缩的 8K 意味着更多的存储或者数据处理、工作室/发行商对 8K 内容需求不足。同时,也带来了如下的机遇,如影院需求下降/高端家庭娱乐市场上升、GPU加速解码/编解码器工作的提升、提高基于云的存储/工作流。
关于 8K 的愿景
演讲者是 Frame.io 的全球创新副总裁,Frame.io 是一个在线协作流程,旨在为全球视频协作者提供支持,拥有完善的审查和批准,有许多关于剪辑的分享,流程的所有数据都在云端,并且也支持为评论做注释和分享,并且也集成到了许多第三方应用上。Frame.io 框架目前已经支持对 8K 视频进行剪辑。
8K 视频市场成熟度
关于市场成熟度演讲者首先提到了一个比较有争议的一个点,即高分辨率和高质量像素之间的争议,大多数人希望追求高质量像素,而演讲者表明自己的观点为:大部追求高质量像素的人只是因为没有条件获得高分辨率的设备,并表示未来会追求高分辨率和高质量像素的结合。接着演讲者介绍了几家公司在制造高分辨率拍摄设备的解决方案,包括 RED、Panavision、 BlackMagic 等,表明市场已经开始关注高分辨率视频,朝着高分辨率和高质量像素结合的方向前进。
超级采样
演讲者以导演 David Fincher 的拍摄技巧为例,表明通过一个高分辨率的图像源,重新调整为较低分辨率图像可以得到更好质量的图像,并且后期调整的自由度更高。当然演讲者提到了像 IMAX 电影的高像素并非是为了采样,而是因为其本身就需要更多的像素。最后演讲者提出了,如果想利用超级采样得到一个质量较好的 4K 视频,那么至少需要 6K 分辨率以上的拍摄设备,如果想得到质量较好的 8K 视频,那么至少需要 12K 分辨率以上的拍摄设备。
带宽
演讲者简单介绍了无线网络的发展,在 1G 时代,带宽仅可以支持语音通话,2G 带宽支持短信和彩信,3G 带宽支持音频流,4G 支持视频流,而 5G 则可以支持低延时和大量数据的传输。演讲者表明,随着通信技术的发展,未来人们不需要再压缩自己的拍摄视频和图像,可以直接将原始图像传输到云端或者分享给他人。人们会对摄像机通过蜂窝网络直接连接到剪辑室而感到兴奋,低延时的传输会带来前所未有的协同工作体验。
总结
最后演讲者总结了自己提到的三个愿景,以及描述了关于未来的畅想——“我们所有的工作都可以近乎实时地访问,对于来自世界任何地方的任何团队成员。这是我们的希望,也是我们的梦想,但我不认为这是科幻小说。这不是我们所说的奇迹,这只是一个决定。我们决定朝这个方向创新并走这条路。在我的整个职业生涯中,我一直是高分辨率的倡导者和粉丝,因为我一直发现拥有更高分辨率的工作具有创造性和技术优势。现在我想非常非常期待什么时候可以使用这些解决方案,所以我想更快更快地得到它。”
未来愿景
发表评论
登录后可评论,请前往 登录 或 注册