众力资讯网

Apple在WWDC26大会上推出了iOS 27相机重磅功能——空间重构图(Sp

Apple在WWDC26大会上推出了iOS 27相机重磅功能——空间重构图(Spatial Reframing),这也是iPhone相机最受关注的新特性之一。

本周四,Apple又公开一份全新专利申请文件,披露一套未来相机影像处理方案:利用两枚不同视场角镜头生成立体图像与视频。这套技术路线,与Apple全面布局空间摄影、空间视频、沉浸式播放的整体战略高度契合。

这份专利文件围绕iPhone这类电子设备展开,设备搭载双镜头拍摄同一场景的两组画面。Apple举例说明,一组为广角镜头,另一组为超广角镜头。两枚镜头的取景画面存在天然差异,因此系统不能简单将两张画面左右拼接,还需要完成图像处理、画面对齐、防抖、图像形变、编码输出一系列流程,最终生成可供观看的立体图像或视频。

这是该专利的核心思路:一套影像系统可将两套参数不匹配的镜头画面,整合为完整连贯的3D拍摄素材,适配所有支持深度显示的设备,包含头戴式空间设备。

专利从Apple现有成熟镜头硬件布局切入。当前Apple设备后置多摄普遍包含广角、超广角、长焦镜头,每颗镜头视场角、焦距各不相同,常规拍照表现优秀,但用于立体拍摄时会产生大量适配难题。

立体内容的拍摄原理,需要同一画面两个存在细微偏差的视角。但广角与超广角镜头在视场、分辨率、焦距、光学中心、畸变程度上均存在明显差异,原生画面无法直接组成合格立体对,必须通过算法修正。

Apple这套方案依靠图像信号处理器、后端处理电路、运动传感数据、设备校准参数、单应矩阵运算与视频压缩技术解决上述问题:系统对两路镜头画面裁剪缩放、校正画面视角,使画面特征点精准匹配,完成画面防抖后输出标准立体素材。

这份专利重点阐述了整套立体影像处理流水线:两路镜头画面分别送入独立图像信号处理器,完成常规影像处理流程,包含曝光调节、色彩校正、白平衡、色调映射、伽马校正、阴影校正、降噪、去马赛克、图像锐化、高动态范围优化。

基础图像处理完成后,专用处理单元执行立体校正与画面防抖:立体校正会对齐两组画面,让画面中对应景物点落在同一水平扫描线上。该步骤至关重要,能让左右两路画面形成标准立体配对,而非两张毫无关联的独立照片。

即便两路原始镜头画面视场参数完全不同,经过这套流程后,系统也能输出分辨率、取景范围完全统一的校正防抖画面。最终画面送入压缩模块,通过多视点视频编码生成立体视频流。

专利着重强调立体拍摄下的防抖逻辑。普通单镜头视频仅需对单路画面做防抖;立体拍摄中,左右两路画面防抖效果必须保持同步,否则观看3D画面时会出现眩晕、画面扭曲失真。

Apple方案会提取其中一枚图像传感器的姿态、防抖参数,同步套用至另一路画面输出,实现双视角协同防抖。同时系统调用运动传感器、视觉惯性里程计、陀螺仪、加速度计等多组运动数据,实时追踪设备姿态与空间位置。

该设计细节极具实用价值:空间视频的观看体验高度依赖画面稳定与视觉舒适度,两路画面错位会大幅削弱景深效果、引发视觉疲劳。Apple将画面校正与防抖绑定为联动运算,而非分开独立处理,从底层降低观看不适风险。

专利深入讲解图像形变的数学运算逻辑:系统结合设备姿态数据、旋转参数、镜头固有光学参数、目标输出画面参数,为两枚镜头分别计算单应矩阵,以此生成形变网格,输出校正、防抖后的统一画面。

通俗来讲,算法会重塑两路镜头原始画面,使之匹配同一套标准输出规格。广角与超广角组合拍摄时尤为关键:广角画面需要经过裁剪、缩放、形变适配,才能和超广角画面组合成观感自然的立体素材。

这也是该专利区别于通用空间视频方案的核心创新:苹果不只是提出双摄拍摄3D内容,而是完整给出两套参数完全不同的镜头,如何通过算法修正、输出统一立体画面的完整技术方案。

专利覆盖立体视频、立体静态照片两大场景:视频端采用多视点编码,包含类多视点高效视频编码(HEVC)码流;照片端配套专用处理电路,基于静态图像格式生成立体成对图片,可选搭配降噪、超分辨率等图像增强算法。

这种场景灵活性意义重大:空间拍摄不局限于视频。Apple全生态可依托立体照片实现沉浸式相册浏览、空间记忆存档、头戴设备播放、3D预览等未来相机体验;同时支持视频流与立体照片输出,大幅拓宽这套技术的应用场景。

专利同时提及头戴设备播放场景,立体素材输出至头显后可呈现真实景深与三维观感。尽管文件核心聚焦拍摄与后端处理,但天然承接Apple空间计算整体布局。

专利另一项值得关注的设计为用户拍摄指引弹窗:系统实时检测设备握持姿态是否适合立体拍摄。文件示例中推荐横向握持拍摄,此时后置广角、超广角镜头呈水平排布,更贴合人眼左右立体分离的成像逻辑。

若设备竖向握持,系统会弹窗提示用户切换至正确拍摄方向;同时检测镜头遮挡、环境光线不足、前景物体过近、画面剧烈抖动等异常情况并及时提醒。

该设计极具Apple产品风格:不只依靠后期算法修复瑕疵,在拍摄实时阶段引导用户规范操作,从源头提升立体素材质量,减轻后端处理压力。

这项专利技术与WWDC26发布的空间重构图功能形成互补:空间重构图用于调整、优化已拍摄完成的空间素材构图,而本专利提供全套底层技术支撑——画面裁剪缩放、立体校正、协同防抖、图像形变、统一视场输出、拍摄姿态引导,全部是空间重构图功能运行的前置基础。

二者虽不直接等同,但存在深度依存关系:空间素材想要完成二次构图、防抖优化、适配播放,设备必须先通过双摄生成干净、对齐、稳定的立体原始素材,这正是这份专利的核心内容。

两者定位清晰、分工不同:空间重构图属于后期编辑功能,用于调整已有空间素材的取景构图;这份专利聚焦拍摄端完整流水线,实现用不同视场镜头原生生成立体素材。

二者可协同工作:专利方案产出对齐、防抖合格的立体原始素材,空间重构图再基于该素材二次调整画面构图、裁剪、优化画面观感。专利强调的统一分辨率、统一取景、同步防抖,能为所有后续空间编辑功能提供稳定可靠的原始素材。

核心创新:依靠算法将两枚参数不匹配的镜头组合,产出标准立体素材。当前iPhone标配广角+超广角,二者视场、分辨率差异极大,立体处理难度高,这套方案完美适配现有硬件。

硬件兼容性:无需搭载两颗规格完全一致的专用立体镜头,仅靠算法统一画面输出,现有及未来iPhone多摄模组均可直接实现空间拍摄,无需新增专属硬件。

拍摄智能提示:不只解决后端算法问题,通过姿态、光线、遮挡、抖动检测实时引导用户拍摄,从源头提升成片效果。

这份专利完美承接Apple完整空间计算发展路线图:Vision Pro及后续头戴设备需要海量优质空间内容,iPhone是普通用户最核心的拍摄终端。iPhone空间照片、视频拍摄能力越强,Apple空间生态的整体价值越高。

该方案让现有智能手机多摄硬件直接变身立体拍摄工具,无需专用硬件设备,通过多路镜头画面处理、视角对齐、协同防抖、编码输出,生成可沉浸式播放的3D素材。

放眼整体布局,这并非一份单纯的相机专利,而是连接iPhone摄影与Apple空间计算生态的技术桥梁,解释了Apple如何依托现有iPhone镜头硬件持续迭代空间拍摄能力。

核心总结:这份专利完整阐述高质量立体拍摄的底层技术框架,并不等同于空间重构图这项成品功能,但二者技术链路紧密衔接。专利解决如何生成优质空间原始素材;而Apple发布的空间重构图属于上层体验功能,负责对素材二次调整、优化展示效果。