当前位置:首页 > 软件资讯 > 新iPhone的空间视频拍摄能力,或将助推XR行业

新iPhone的空间视频拍摄能力,或将助推XR行业

分区:软件资讯 更新:2023-09-27 17:16:27

随着苹果iPhone 15系列正式发布,该系列新机的细节陆续曝光,两款Pro机型首次带来的太空视频拍摄能力吸引了外界不少关注。据悉,该功能将与此前亮相的Vision Pro结合,为用户带来太空视频体验。目前苹果还没有深入介绍该功能的相关细节。它只声称太空视频拍摄能力是通过将iPhone 15 Pro和iPhone 15 Pro Max的主摄像头与超广角摄像头相结合来实现的,该功能将在今年晚些时候开放。

虽然很多朋友觉得太空视频和之前出现过的3D视频似乎没有太大区别,但是两者还是有一些区别的。尤其是在目前苹果不断完善Vision Pro生态系统的情况下,新iPhone 15系列提供的这一功能尤为引人注目。

曾经流行的3D视频和照片,通常使用两个摄像头或两个镜头模拟人眼,分别拍摄左眼和右眼的画面,而摄像头或镜头之间的距离往往与人眼的瞳距一致,并且要保证光圈、焦距和亮度一致,不仅实现方法相对复杂,后期的各种处理也极其繁琐。此外,拍摄3D视频或照片还需要借助物体捕捉技术来识别物体的XYZ三轴信息,这也是一个繁琐的过程。

根据苹果公布的信息,用户只能在固定的角度拍摄太空视频。

但根据苹果现阶段公布的相关信息,摄影师可以从固定视角完成拍摄,因此大概率是在拍摄过程中通过摄像头和激光雷达采集数据,然后通过算法得到XYZ轴数据,最终生成3D模型。这种方法虽然简化了三轴位置信息的采集过程,但也对计算力、优化算法和测距精度提出了更高的要求。

苹果将空间视频定义为“空间视频”,并在其开发者文档中称之为“立体视频”。更有趣的是,根据这份文件的定义,太空视频的观看原理类似于观看3D电影,是左右两幅不同的图像,然后通过“脑补”得到一个三维画面。但需要注意的是,完整的空间视频概念还应该包括空间音频,否则“空间”的概念自然无法自圆其说。

虽然苹果的生态一直以封闭著称,但这一次,出乎意料的是,他们对太空视频非常开放,采用了MV-HEVC(Multiview High Efficiency Video Coding,多视角高效视频编码)视频编码,早在2015年就被ISO/IECMPEG和ITU-T VCEG确立为标准编码。

不过目前官方还没有透露太空视频每分钟产生的数据量,以及iPhone 15系列的Pro版一次能拍多久。但也有人认为,因为空间上会有更多的信息,所以这类视频的尺寸不会太小。

这个操作其实说明了苹果吸引更多开发者和相关厂商的心理。毕竟只有XR的生态越完善,才能保证即将发布的Vision Pro吸引更多的消费者,才有可能推出一系列的衍生产品。

此外,需要注意的是,苹果在太空视频领域的布局可能远比现在所展示的更加雄心勃勃。此次太空视频拍摄的3D模型采用USDZ格式,早在2018年WWDC就发布了该格式。

就在今年8月,皮克斯、Adobe、苹果、Autodesk和NVIDIA成立了OpenUSD联盟,宣布将共同推动USDZ开放标准的发展。从这五家厂商的身份不难发现,在标准制定、工业设计、内容生产制作、硬件设计与支持、人工智能等方面都有所涵盖。

iPhone 15 Pro和iPhone 15 Pro Max的超广角与主摄像头的距离显然达不到人眼的瞳距。

从目前已经公布的相关信息来看,iPhone 15系列的两款Pro拍摄太空视频的方式将会是使用超广角和主摄像头来完成左右眼的拍摄。在采用这种方法之前,需要保证两个摄像头之间的距离接近或相当于人眼之间的距离,但这两种模式显然无法满足这一要求,因此苹果必须通过其他方式来实现,比如使用激光雷达来辅助调整。

而使用激光雷达测量空间信息,必然会对计算能力提出更高的要求。所以有人认为这可能也是iPhone 15 Pro和iPhone 15 Pro Max这次跳过A17,搭载了之前从未在iPhone上出现过的Pro版A系列芯片A17 Pro的原因。

不过,在一切还未揭晓之前,有业内人士指出,苹果发布的iPhone 15 Pro和Vision Pro的演示内容似乎是具有景深的3D视频,但它可能不需要3D重建技术或3D模型,而是一种立体显示技术,其优势在于用户可以看到具有物理景深的3D图像。如果这个推测是真的,自然对计算能力和算法优化的要求就没那么高了。

此外,可能还有另一种观看太空视频的方式,即以自由视角观看,但这必然需要整合目标捕捉技术,不仅操作更繁琐,而且要记录的数据量也更大。虽然这与苹果目前公开的信息不符,但未来很有可能成真。

但毫无疑问,iPhone 15系列Pro版带来的太空视频拍摄功能,必然会将之前的3D视频拍摄相关技术推向更高的层次,也将成为丰富Vision Pro生态的重要举措。由于苹果采用了目前业界通用的编码、文件格式和3D模型,不仅为自己提供了更多的内容来源,也将对整个XR行业起到重要的推动作用。

[本文图片来自网络]

  • 最新资讯
  • 最新软件