XR行业动态-20200803-20200816

1. 苹果新 ToF 专利披露更多技术细节，可提高人脸识别及 AR 体验 日前，美国专利商标局公布了一份与基于飞行时间传感器的深度传感设想系统相关的苹果专 利申请，而这项技术或会用于即将发布的 iPhone 12。全新的 ToF 摄像头可以提高人脸识别 率，以及 AR 体验等等。 ➢ 此次披露的专利细节或对大范围运动的应用场合有重大意义。

2. 苹果最新 AR、VR 专利可以让自动驾驶更安全、舒适 增强现实显示系统：在诸如挡风玻璃的一个或多个透明表面创建 AR 显示器。通过整合外部 传感器数据，内部传感器数据，和/或通过通信网络获取的输入信息，具体而言，这种 AR 显 示器能够向驾驶员和乘客显示重要的信息，如车辆行驶速度、道路危险、用不同语言描述来 显示路标、导航。 虚拟现实系统：减少或消除自动驾驶车辆对车窗的需求，从而令车辆的车窗更少和/或更小， 或者根本没有车窗。VR 系统提供的 VR 体验可以向乘客呈现一种乘坐车辆似乎比实际尺寸更 大的幻觉，从而在乘客搭乘小型自动驾驶车辆时获得更为愉悦和更为安全的感觉体验。

3. 苹果新专利：一款可用于 AR/VR 头显的 骨传导音频系统 专利指出了一种骨传导音频系统。据悉这并不是一项音质媲美 AirPods 的技术，但它的特点 是可用作 AR/VR 头显的一部分。苹果在专利中对 AR/VR 头显的描述，是可能需要用智能手机 来控制。此前就有消息称苹果的 AR/VR 头显将采用分体式设计，接入 iPhone 等设备。此外， 苹果的 AR/VR 头显或可支持视频显示、增强视觉等功能。而关于音频系统，苹果表示：AR/VR 头显可同时搭载骨传导和气传导音频模块。 ➢ 苹果寻求头显音频解决新方案。

4. 苹果 VR 触控手套专利更新，新增运动传感器 该专利描述了一种通过手套、薄的贴片或类似的织物构成的输入设备，其在手指指尖、手掌 跟部设立大面积触觉反馈模块。应用场景方面，可以模拟游戏，比如抓握棒球棍，操控汽车 方向盘、进行游戏内虚拟的手掌或触控界面、以及基于全息悬浮显示的界面等等。 ➢ 苹果 ARVR 交互一定会与目前产品的交互拉开距离

5. 苹果 3D 绘画应用程序专利，或用于 AR/MR 眼镜 USPTO 近期公布了苹果一项关于 3D 绘画应用软件的专利，具体指通过 Apple Pencil 在 iPad 4 上可进行 3D 创作，类似微软 Windows 中的《3D Paint》，而该技术可能还会用于 AR/MR 头显 中。未来的 Apple Pencil 将支持 3D 书写功能，即未来不仅仅是在屏幕上进行二维移动，还 支持在空中三维定位追踪，这样就可以充分的创作出三维内容，还有可能用于游戏交互场景。

6. 苹果 MR 眼镜专利，AR 透视模式以及注视点预测 近期 USPTO 公布的苹果 MR 头显专利，其具体 VR 透视（也可以看作是 Passthrough 的一部 分）和用户位置预测功能。描述的是将用户周围的真实环境进行扫描，并呈现在 VR 内部视 图。这个专利更多描述了一个 VR 头显的 AR 透视功能，为了进一步优化 AR 透视模式，苹果 还提出了一套注视点预测功能，它通过眼球追踪识别的数据进行分析，提前预测用户观看方 向，将从更快的画面切换到对应的位置。 ➢ 与 Oculus 不同，苹果 VR 产品或将主打 AR 透视能力方面

7. Facebook 展示 VR 面部重建技术 CodecAvatar 可灵活模拟用户表情 近日，多伦多大学向量研究所和 Facebook Reality Labs 的研究人员，在最近发表的《通过 模块化编解码器虚拟化身实现表达远程呈现》的研究论文中，提出了一种面部表情数据精确 采集的解决方案——Codec Avatar。该模块化编解码器化身系统按各个面部特征（如每只眼 睛和嘴巴）进行划分，从而使其能够最准确地融合面部几种不同姿势，以最佳匹配来构成表 情。

8. 为解决 HoloLens 2 手部追踪模型拟合，微软提出全新曲面模型——冯氏曲面 为了解决 HoloLens 2 手部追踪的模型拟合问题（计算预算大约比 iPhone 7 小 100 倍），微 软团队提出了一种全新的曲面模型：“Phong Surface（冯氏曲面）”。可同时处理双手， 并以 4Gaflops 的速度实时运行的全关节式追踪系统。不仅适用于手部追踪，同时适用于任 何需要高效曲面拟合的情况，尤其是低功率设备。

9. TikTok 与微软重达初步收购共识 北京时间 8 月 3 日清晨，微软公司发布声明表示：公司在与美国总统特朗普进行对话之后， 准备继续推动购买 TikTok 美国业务的谈判。

10. 华为 XR 内容开发工具 Reality Studio 正式上线 据悉，华为 Reality Studio 已于近期正式建立，上线华为开发者官网。它是一款 XR 内容 开发工具（多功能 3D 编辑器），提供了 3D 场景编辑、动画制作和事件交互等功能，帮助 开发者快速打造 3D 可交互场景。可广泛用于教育培训、电商购物、娱乐等诸多行业的 XR 内容开发。 华为官网介绍其优势为低门槛、高效率、易分享。用户不需要了解 3D 相关的知识就可以非 常简单地开发 3D 互动场景，未来具有极大的想象空间。 ➢ 2019 年华为发布 AR Engine，兼容 XR 的操作系统，终于又发布了开发者工具，进一步 5 构建 XR 生态。

11. 谷歌发布基于精确虹膜估计的全新机器学习模型 谷歌日前发布了用于精确虹膜估计的全新机器学习模型：MediaPipe Iris。无需专用硬件就 能够通过单个 RGB 摄像头实时追踪涉及虹膜，瞳孔和眼睛轮廓的界标。利用虹膜界标，模型 同时能够在不使用深度传感器的情况下，以相对误差小于 10％的精度确定对象和摄像头之 间的度量距离。

12. 谷歌利用众包照片为 AR/VR 提供地标 3D 建模 虚拟现实和增强现实设备的用户可以通过这个系统体验到建筑周边的信息，包括时间和天气 变化。当然，谷歌不是唯一一家研究将照片用作 3D 建模输入的公司。例如，英特尔的研究 人员正在使用多张照片和一个递归编解码器网络来插值未捕捉到的角度，从而生成现实世界 地点的合成版本。

13. 谷歌搜索开始增加化学学科的 AR 3D 模型支持 谷歌在 2019 年的 I/O 大会推出了 AR 动物模型，用户可以通过谷歌搜索获取所述对象，并直 接在家里可视化出来。在接下来的一年时间里，谷歌为这个 AR 内容库中增加了更多的 3D 模 型，包括人体解剖结构，侏罗纪恐龙，和行星及其他天体等等。现在，谷歌已经将触角伸向 化学领域。

14. 谷歌 AR 滤镜工具 Google Lens 开始提供数学作业解答了 谷歌一直在向学生及其父母提供有助于在家学习的有用工具。例如，这家公司在今年 5 月为 谷歌搜索推出了一项允许你可视化 3D 解剖结构和细胞结构的增强现实功能。 ➢ 搜索引擎这些方面的 AR 内容积累，未来完全可以应用在头显教育落地。