沉浸式视频
搜索文档
Apple Vision Pro 可以看自己拍的沉浸式视频了,它离成为下一个 iPhone 还有多远?
36氪· 2025-10-09 13:49
visionOS 26系统更新与沉浸式视频支持 - Apple在9月正式为Apple Vision Pro推出visionOS 26系统更新,新增对Insta360、GoPro和佳能设备拍摄的180度、360度和宽视场内容的原生播放支持[1] visionOS支持的视频类型 - 系统支持2D视频,可通过扩展式播放占满整个窗口,并可使用Reality Composer Pro或AVKit工具实现悬停状态,模拟虚拟影院的光线反射效果[4] - 3D视频采用多视图编码格式,在同一轨道存储多个独立视图层,保证左右眼帧画面具有相同分辨率并共享时间轴,实现影院级3D观影体验[6] - 空间视频是Apple提出的新概念,内容按真实尺寸呈现,窗口边缘淡出以与环境自然过渡,并采用MV-HEVC编码格式,含有拍摄距离等元数据[8][10] 沉浸式视频技术特点 - visionOS 26将180度、360度和宽视场视频统称为沉浸式视频,采用非直线投影方式渲染,考虑镜头曲率或弯曲变换[11] - 180度视频采用半等距柱状投影,填满观看者前方的半球区域视野;360度视频采用等距柱状投影,使用宽高比2:1的矩形画面将观看者完全包围[13] - 宽视场视频是新增支持的类型,采用参数化投影方式,通过APMP格式文件存储镜头参数,由播放器矫正弯曲曲线并消除畸变和鱼眼效果[17] - 这三种非直线投影的3D视频均采用MV-HEVC编码技术,将左右眼画面像素分别编写到不同缓冲区,仅编码不一致部分以降低文件体积并提高效率[20] APMP元数据规范 - visionOS 26引入APMP元数据规范,包含Projection Box、Lens Collection Box和View Packing Box,分别记录投影类型、镜头参数和视图排列方式[23] - APMP通过vexu扩展存储元数据信号指明视频投影方式,为非直线投影视频提供统一描述和兼容层,使其向下兼容已有内容并支持新一代视频[23] - 用户可通过工具为现有的180度/360度视频注入APMP元数据,从而在visionOS 26中获得原生播放体验[23][27] 第三方设备拍摄与播放实践 - Insta360 X5配备双1/1.28英寸像素传感器,支持8K 30 fps、5.7K 30 fps、5.7K 60 fps以及4K 60 fps的高规格视频拍摄[28] - 拍摄的专有格式文件需通过Insta360 Studio软件导出,选择全景视频并勾选APMP选项,以APMP投影媒体规范封装才能在Apple Vision Pro中原生播放[31] - 实际播放体验中,即使使用8K规格拍摄,在Apple Vision Pro中观看沉浸式视频时清晰度明显不足,有效分辨率密度大幅降低[32][34] - 清晰度问题源于Apple Vision Pro的视场角限制,水平视场角约为100度、垂直视场角约为90度,观看者仅能看到整个球面约1/7的区域[35] - 自行拍摄的视频内容因缺乏专业策划和器材辅助,存在画面抖动问题,容易导致观看者产生头晕症状[36] 行业合作与未来展望 - Apple与Insta360、GoPro等消费级设备品牌联动,是让回忆在虚拟现实中重现的令人期待的开始[37] - 行业期待日后通过AI技术还原或更强大的硬件设备,实现在Apple Vision Pro等设备中完全真实地还原彼时彼刻的场景[37]