文/VR陀螺 元桥
今年,空间视频几乎成为行业内备受关注的一条赛道。
各大厂商竞相出手,少数开发者更是开始斗法,在距离苹果 Vision Pro 上市还有一段时间里,市面上已经出现了可以查看空间视频的设备以及三方应用。
其实今年 6 月,Vision Pro 刚发布时并没有很多人关注空间视频这个功能,直到 iPhone 15 Pro 问世,才有越来越多的大众开始好奇这个功能。或许这也苹果的一大目的,通过与手机结合,引发大众讨论,进而推动更多人对其 XR 新品的关注。
不过还值得业内思考的是,空间视频的拍摄门槛直接被降低到了手机上,也就是说成千上万的 iPhone 15/16 Pro 的用户都可以成为空间视频的生产者,随着普通创作者的加入,产业生态将会进一步演变。
而从更长远的角度来看,手机就可以成为创作 3D 内容的工具,不仅使苹果的生态能力更强,也会进一步丰富空间计算时代所匮乏的 3D 素材,甚至改变整个行业游戏规则。
空间视频是什么?
其实,空间视频也并不是一件特别新鲜的事情。
与我们熟悉的 3D 电影很像,众所周知 3D 电影的实现原理是利用人眼的视差效果,在电影拍摄时用两个摄像机拍摄,放映时用两个放映机投像。
3D 电影拍摄时所用的双目相机
空间视频的拍摄也是基于人的双目立体视觉原理,类似于传统 3D 电影的制作方式。人是通过双眼感知三维世界,由于人的双眼在水平方向上有一定间距,因此双眼看到的画面具有一定视差,当两只眼睛分别形成的物体被转化成神经信号传输到大脑以后,大脑就会对它们进行综合加工处理,主观上可产生被视物体的厚度以及空间的深度或距离等感觉。
Vision Pro 所展示的空间照片
苹果用 iPhone 15 Pro 拍摄的空间视频,则是使用主摄像头与超广角摄像头模仿人眼采集具有一定水平视差的双目画面,结合 Vision Pro 设备上基于 Micro-OLED 的两块 2300 万像素显示器和高效眼追踪系统,将具备广色域和 HDR 的超高分辨率 8K 画质分别呈现给人的左眼和右眼,最终产生具有空间立体感的 3D 画面。
iPhone 15 Pro 的空间视频效果图
不同于普通视频,空间视频就犹如本人置身视频中一般,拥有自由观看角度。简单来说,在普通视频中,你很难感受到视频深度的距离,也就是说无论你转换什么视角,你都很难看的拍摄视频画面后面的实物。而空间视频则是通过模拟人眼的立体视觉,能够让你清晰感受到视频的深度与距离,从而提供身临其境的体验感,这就是空间视频的魅力所在。
左右眼是如何产生立体视觉的
而苹果这次不仅让拍摄空间视频的门槛降低,更让空间视频在兼容性上又往前了一步。在苹果发布 Vision Pro 时,苹果在 3D 内容系列专题讲座中提到了 3D 视频的编码格式——MV-HEVC(也称为多视图-高效视频编码),同时苹果也公布了对空间视频格式的编解码的 SDK 支持。
所谓的多视图是指在同一帧保存多个画面信息,例如空间视频的每一帧都保存左、右双眼的画面信息, 只是有别于当前以双目画面并排显示(Side by Side,SBS)的方式,MV-HEVC 通过主视图(Hero Eye)和辅助视图差别信息的方式存储。
MV-HEVC 可以理解为 HEVC(高效视频编码)的一种扩展,由于 MV-HEVC 本身完全可以被HEVC 解码器所兼容,因此在不支持以 3D 形式查看的设备上,它也完全可以被当做是一个普通的 HEVC 视频被播放。
而为了助力 3D 内容生态,通过添加 MV-HEVC 编码相关的语法和模式支持,腾讯 V265 也新增了 3D 视频编码能力。
在标准的编码器和开发工具的支持下,业内正在努力打通不同设备之间进行 3D 视频创作、分享的障碍。一直以来,3D 视频内容的创作都需要专业的相机拍摄以及复杂的技术手段实现。如今,结合 MV-HEVC 标准易于硬解支持的生态优势,与 3D 视频相关的应用正在迸发。
打响第一枪,支持空间视频的设备与三方应用滋生
无论是在 Vision Pro 或是 iPhone 15 Pro 上都能看出苹果对人类视觉体验的重视,从拍摄到电影再到MR,观看技术的变化不仅意味着人类视觉变迁,更牵连了一场影响深远的视觉革命,而空间视频无疑将会在人类视觉体验革新上发挥巨大价值。
毕竟观看技术的转变并不是单纯技术层面上的革新,背后还纠缠着对人类社会发展的崭新理解、社会关系、商业经济的演变等错综复杂的因素。
在这一技术革新的背景下,不少企业开始加入竞争,试图抢占先机。11 月 20 号左右,海外企业 Zappar 就推出了一款对标 Vision Pro 的超实惠头显 Zapbox,仅需 80 美元即可查看iPhone 15 Pro 拍摄的空间视频。
Zapbox 的设计类似于 Google Cardboard,但功能要比 Cardboard 丰富,Zapbox 包含了两个蓝牙控制器,可通过运动传感器和视觉跟踪在空间中的位置进行交互,这个设计考虑到了用户的舒适度和便捷性,使长时间佩戴和操作变得更加轻松。
更为重要的是,Zapbox 算是首批成为支持空间视频的头显,并且一定的价格优势,对广大iPhone 15 Pro 的用户来说也是一种平价吸引,反向推动空间视频进一步普及。
从苹果手机系列的出货量来看,据 Counterpoint 的统计数据,2022 年 iPhone 各型号总发货量为 2.2 亿台,其中,iPhone 14 Pro 和 iPhone 14 Pro Max 分别为 1400 万台和 2000 万台。
而据屏幕供应链咨询公司 DSCC 的报告显示:在 6 月至 10 月期间,iPhone 15 Pro 机型的面板出货量占比高于 iPhone 14 Pro 和iPhone 13 Pro 机型。iPhone 15 Pro 的市场份额为64%,而 iPhone 14 系列和 iPhone 13 系列的市场份额为 54%。
由此,据业内保守估计,即便 2024 年消费手机市场有下滑趋势,iPhone 15 与 iPhone 16 Pro 的年出货量也不会低于 7000 万台,这一数值对比 VR 出货量高峰年来看,苹果手机就有可能产生一条关于空间视频的新产业链。
从这方面来看,可以说 Zappar 的做法很讨巧,从市场边缘切入中心,随着市场发展,或许 Zappar 将会搅动 VR 盒子以另一种方式重新回归。
除此之外,也有不少开发者已经开始了初步探索,通过三方应用实现跨平台播放空间视频。正如,前段时间被广泛关注的博主 Naituw 就在网络上分享了这份成就。通过自己写的工具“Spatialify”将手机拍摄的空间视频转换成 Side By Side(SBS)3D 视频格式,从而实现在其他主流设备上播放。
VR陀螺前段时间也曾做过空间视频播放的测评,感兴趣可点击详阅:《iPhone 15 Pro+三方软件,开拓“空间视频”平民时代》。
而除了 Naituw 之外,海外也有不少博主分享 Meta Quest 3 查看空间视频的方式。当空间视频的制作与观看方式都降到了普通消费者都可以接近的门槛时,3D 视频有望加速成为未来全新的主流播放形式。
空间视频或将改变行业游戏规则
在 iPhone 15 Pro 就可以实现拍摄空间视频的背后,还映射了当下商业与科技新一轮周期的变化,从苹果将这个功能添加到手机上开始,大概就预设了这样的场景,只有真正激发广泛大众,才能彻底加速一个行业的变革。
从 Vision Pro 的上市时间来看,2024 年或能成为行业发展的关键节点。短期内 3D 内容创作相关的企业大多都会保持敏锐的观望心态,蓄力待发。而对于徘徊在是否入局的企业来说,或许 2024 年能成为其紧急补课的一年。
但 Vision Pro 上市后能带来多大的市场效果,大家都无法给予肯定的结论。不过,一旦市场表现超出预期,站在新增长的风口,寻找新机会的企业会增多,而在硬件技术相对已经成熟的环境下,3D 内容将会成为大多企业选择入局的切口之一。随着入局企业变化,新的玩法也会增多。
从空间视频正引发的变化来看,3D 创作领域已经悄然的发生了两个深度的演变:一方面是数字化,另一方面是普遍化。
数字化从根本上改变了 3D 创作生态的驱动模式,数字技术与内容的融合是构建新发展商业格局的关键;而普遍化改变了过去 3D 创作的专业属性,重新定义了创作者与内容的关系,商业与创作者之间的关系。
随着 3D 视频的创作进入大众视野,新的规则将会带来新的增量市场。而如何能提供承载广大消费者的平台,或是企业之间提升竞争力的一个关键战略。
具体到行业发展来看,最快受到影响或是游戏行业,游戏行业本质上就是创新产业。对于任何游戏来说,玩法都是核心竞争力。而如何不断变化游戏的玩法,技术也起着关键作用。
正如苹果高级副总裁 Greg Joswiak 表示,新的空间视频功能将改变游戏行业的规则,更加沉浸式的视觉将会给玩家带来非常独特的体验,而对于游戏创作者来说也将会打开很多新颖的素材。
其次,还有更大的娱乐市场。可想而知,互联网以及移动设备的使用推动世界范围内对动画、视觉特效以及视频游戏的需求扩增。如今,视觉技术进一步扩展,对于更加沉浸式的 3D 内容的需求亦将会呈现指数级增长。
参考资料:
[1]https://hackvision.pro/post/apple-vision-pro-spatial-computing-tech-stacks
[2]https://www.techradar.com/computing/virtual-reality-augmented-reality/dont-wait-for-apple-vision-pro-you-can-watch-iphone-15-pro-spatial-videos-on-meta-quest-3-right-now
[3]https://mp.weixin.qq.com/s/p2NNBMvN56Nx8_P95F3G_A
原文标题 : 空间视频将会如何改变「行业游戏规则」?