Android XR 是什么？解释它的功能、设备、开发工具等

什么是“Android XR”？

Android XR是最新配备AI的OS（操作系统），兼容耳机和眼镜（AR眼镜）。

沉浸式剧场

从视频列表中选择...

 

 您可以体验完全身临其境的视频观看体验。

 

无限工作空间

您的现实世界将成为您的工作空间。您可以使用电子表格、幻灯片等。

从客厅探索世界

在太空中打开 Google 地图并点击沉浸式视图...

移动到您点击的区域附近的天空。当您点击语音气泡时...

屏幕将切换到沉浸式街景，并且您点击的位置周围将出现一个气球。

 

 “Android XR”（耳机）的AI功能

 “Android XR”（耳机）的AI功能

安卓版双子座 XR

Gemini for Android XR 是一款人工智能助手，可以理解您所说的和您所看到的（物理或数字）并采取行动。体验可以进行自然对话并与您共享相同上下文的人工智能。

 

 

圈圈搜索

Android XR 中强大的搜索功能。如果你在现实或虚拟世界中围绕一个物体画一个圆圈，它就会搜索与该物体相关的信息并显示结果。

“Android XR”的AR眼镜功能

安卓 XR AR 导航

智能手机版谷歌地图中安装的AR导航将针对Android XR上的AR眼镜进行优化。路线会显示在玻璃上，同时会显示谷歌地图，为您显示路线。 ​​​​​​​​​​​​​​

Android XR 实时自动翻译

对话过程中，对方的声音被实时翻译并以文字形式显示在AR眼镜上。

安卓版双子座 XR

Gemini 是一个支持您日常生活的人工智能助手。它由时尚的 AR 眼镜提供支持，可以了解您周围的世界，并在您需要时通过自然对话提供有用的信息。不用拿出智能手机，就可以方便地使用我之前介绍的AR导航、翻译等。

*AR眼镜功能将在未来推出。

三星制造的 Android XR“Project Moohan”耳机

目前（2024年12月13日），三星已经宣布发布一款适用于Android XR的耳机。

Unlock the Infinite Possibilities of XR With Galaxy AI – Samsung Global Newsroom

使用 Android XR 耳机体验下一代现实主义

XR技术带来的创新正在拓展现实的边界并改变体验的价值。Android XR 耳机是支持未来现实生活体验的重要设备。

优先考虑用户体验

我们始终优先考虑用户体验，为了实现这一目标，我们利用Galaxy AI等尖端技术来提供Android XR 耳机提供的自然、直观的交互。该技术由Galaxy 生态系统提供支持，有能力改变您的日常生活。

通过开放协作开发Android XR平台

与谷歌和高通等行业领导者开放合作开发了新的Android XR平台。该平台通过与Galaxy 生态系统、Google 应用程序甚至第三方开发者的合作提供丰富的内容体验。

Android XR耳机“Project Moohan”的特点

Android XR 耳机可通过手势和控制器进行交互，以及语音和自然对话。它由Gemini技术提供支持，拥有对话式用户界面 (UI) 并能够了解周围环境。这为每个用户提供了个性化的体验。

Project Moohan是首款Android XR 耳机，提供了这些创新体验。这款耳机提供无限空间的沉浸感，具有最先进的显示屏、直通功能和自然的多模式输入。这使您可以使用 Google 地图探索世界、在 YouTube 上观看体育赛事并与 Gemini 一起计划您的旅行。

轻便舒适的设计

Project Moohan具有轻巧、符合人体工程学的设计，即使在长时间使用时也能提供舒适感。这使得用户可以随时舒适地享受XR体验。

 

关于Android XR开发环境

Android XR支持使用Android Jetpack XR、Unity、OpenXR和WebXR进行开发。通过充分利用这些框架，您可以顺利开发提供前沿XR体验的应用程序。

Android Jetpack XR

大多数Android 应用程序与Android XR开箱即用，无需任何额外的开发工作。 Android XR自动处理设备交互和生命周期管理，使开发人员能够专注于应用程序功能和创新。这种机制简化了支持 XR 的应用程序的开发，并实现了下一代技术的高效使用。您可以使用 Kotlin 和 Compose 等现代工具以及 Java 和 Views 等老一代工具构建沉浸式 XR 体验。

充分利用Unity的内容创建功能，轻松将应用程序从其他平台迁移到Android XR 。性能优化工具、庞大的资源库和强大的社区保证了开发的顺利进行。

XR交互工具包

与自然手势和手势的直观交互。

XR 手

可以添加自定义手势，例如竖起大拇指和指向。

高级图形功能

通过注视点渲染和 URP Spacewarp 实现高质量的视觉效果和流畅的操作。

带眼动追踪的注视点渲染

动态调整渲染焦点以优化 GPU 性能。

合成层

文本和边缘更清晰，渲染伪影更少。

URP 空间扭曲

减少渲染负载并实现高质量的图形和性能。

https://developer.android.com/develop/xr/unity

Unity Support for Android XR: Let’s Get Started! - Unity Engine - Unity Discussions

开放XR

Android XR支持 OpenXR 1.1 规范和选定的供应商扩展，以支持使用 OpenXR 创建的应用程序。OpenXR是一种开放标准，允许您在各种 XR 设备上使用一组通用 API 来创建身临其境的交互式体验。

可追踪功能

• 平面检测：识别和跟踪环境中的平面，并将虚拟对象放置在与现实世界相关的位置。
• 锚定：将虚拟参考点锚定到现实世界的对象或位置，以便虚拟内容在用户移动时保持精确的定位和方向。

射线投射

一种计算虚拟光线与场景中对象的交集的技术，允许选择和操作虚拟元素。

锚固持久性

跨多个会话保存和恢复锚点，以确保虚拟内容始终放置在您的环境中。

物体追踪

能够跟踪鼠标、键盘和其他现实世界的对象。

深度纹理

提供有关相机与场景中对象之间的距离的信息，从而实现逼真的遮挡和交互效果。

通过

它将现实世界的摄像机镜头与虚拟内容相结合，提供无缝融合物理世界和数字世界的混合现实体验。

人脸追踪

它跟踪用户的面部特征，并允许他们创建逼真且富有表现力的化身和虚拟角色。

眼球追踪

跟踪用户的眼睛位置和方向，使头像的眼睛姿势更加真实。

手部追踪

跟踪用户的手部位置和运动以获得更自然的交互。

光估计

调整照明模型以匹配用户的真实照明条件。

支持的输入设备

Android XR支持以下输入设备：

• 手部交互：识别特定的手势，例如捏合、滑动和指向，使您可以与虚拟对象进行交互。
• 眼睛注视交互：跟踪您的眼球运动并通过注视与虚拟对象进行交互。
• 6DoF 运动控制器：跟踪控制器位置和运动并触发按钮按下和悬停事件。
• 鼠标交互：使用鼠标与 3D 空间中的对象进行交互。

性能特点

Android XR支持以下与性能相关的功能：

• 具有眼动追踪的 Fovation：应用程序仅在眼睛的焦点处呈现高分辨率内容的能力。
• 空间扭曲：使用速度矢量和深度纹理信息生成插值帧以增加用户沉浸感。
• 性能指标：提供 XR 设备、合成器和 XR 应用程序的运行时性能指标（CPU 帧时间、GPU 帧时间、GPU 利用率等）。

https://developer.android.com/develop/xr/openxr

网络XR

Android XR 上 Chrome 中的 WebXR 支持

Chrome在Android XR上支持WebXR。WebXR是一项由 W3C 标准化的开放技术，为兼容浏览器提供高性能 XR API。如果您正在进行网络开发，则可以将 3D 模型添加到现有网站或构建新的沉浸式体验。

WebXR 支持功能（Android XR 上的 Chrome）

Android XR上的Chrome浏览器支持以下WebXR功能。

• 设备接口
• AR模块
• 游戏手柄模块
• 命中测试模块
• 手动输入
• 锚
• 深度感应
• 光估计

WebXR框架

• Three.js和Babylon.js：如果您想要完全控制 3D 场景并创建自定义的复杂交互，那么这是理想的选择。
• A-Frame和模型查看器：对于使用类似 HTML 的语法进行快速原型设计和定义 3D 场景非常有用。

https://developer.android.com/develop/xr/develop-with-webxr