众力资讯网

Apple正在研发一套全新显示系统。未来AirPods内置的运动传感器可判断用户

Apple正在研发一套全新显示系统。未来AirPods内置的运动传感器可判断用户头部相对外置屏幕的朝向,并据此实时调整三维画面内容。

这套方案和传统虚拟现实设备存在明显区别。传统VR设备需要穿戴在头部,而本发明的画面输出载体是独立外置屏幕,例如电视、电脑显示器、平板或是其他电子显示屏,无需头戴设备绑定头部。

左右两只AirPods均可独立输出传感器采集的加速度数据。由于耳机分别位于头部两侧,系统可将二者视作同一刚性物体上的两个定位参考点。依靠两组运动数据,系统能测算头部俯仰、侧倾、偏转三类旋转角度,判断用户视线相对屏幕的朝向。

系统测算出头部朝向数据后,会用来控制三维场景的渲染效果。当用户转头、低头、抬头或歪头时,系统会同步调整场景内虚拟镜头的位置与角度。

举个例子,头部向左转动,虚拟视角便同步向左偏移,呈现画面另一侧面的景观;抬头向上看,视角同步抬升;头部倾斜,画面也会对应产生侧滚视觉效果。

系统还有另一种实现路径:不改动虚拟镜头,直接移动、旋转画面内的各类虚拟模型。这份专利同时覆盖两种技术方案,头部动作既可以改变观看者在虚拟场景里的观测点位,也能直接调整屏幕中展示的物体。

这套技术能让普通平面屏幕拥有近似通往三维空间窗口的观感。即便用户没有佩戴任何头戴设备,屏幕画面也会跟随头部动作实时变化。

整套系统启动时需要完成一次校准流程,用户直视屏幕中心即可。该操作会建立左右AirPods、用户头部与屏幕三者之间的初始位置基准关系。

完成校准后,系统会持续根据耳机的加速度信号,更新两只AirPods的实时位置与移动速度,依靠二者相对位置变化计算头部实时偏转角度。陀螺仪、磁力计采集的数据可与加速度传感器数据互补,进一步提升追踪精准度。

Apple也考虑到屏幕本身发生移动的场景。以手持iPhone、iPad为例,设备自身会同步输出运动数据,系统以此区分屏幕在动和用户头部在动两种运动来源。

显示屏自带的摄像头、深度传感器可额外捕捉用户头部位置信息。搭配AirPods输出的头部旋转数据,系统还能识别头部前后凑近、左右平移、上下升降等平移类动作,追踪维度更加完整。

这项专利还有一项极具实用价值的用途:开发者无需佩戴头戴设备,就能调试适配头戴设备的软件。

头戴设备可保持软件运行并持续生成画面内容,画面同步传输至外接显示器;开发者佩戴的AirPods会输出原本由头戴设备内置传感器采集的头部运动信号。

开发者转动头部时,显示器上的虚拟视角会同步响应。开发者不用反复穿戴、摘掉头戴设备,就能便捷预览、排查、反复调试各类沉浸式软件。

专利文件中明确写明可控制未佩戴状态下的头戴设备画面渲染,足以证明开发者调试场景并非简单举例,而是专利重点保护的核心应用场景之一。

该发明的突破性在于,将头部追踪空间计算技术从专用头戴设备拓展到更多终端。AirPods这类穿戴设备自带的传感器,未来可作为电视交互、游戏、三维建模、影音娱乐、软件开发的输入媒介。

这套系统无法实现近眼显示设备的完整沉浸效果,画面始终局限在独立外置屏幕中。但无需额外加装头部追踪硬件,就能营造自然真实的画面透视变化。

从更宏观的布局来看,这份专利体现了Apple将各类穿戴设备视作分布式传感器协同工作的思路。未来AirPods不再只是音频播放工具,还能采集头部运动数据,输出空间交互信号,改变整个Apple生态其他设备的画面呈现逻辑。

一方面,普通Apple屏幕能借助耳机获得跟随头部动作的立体视觉效果;另一方面,也搭建起一套高效测试链路,打通Mac开发工具、AirPods与未来各类空间计算设备。