0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

XR与AR和VR的区别 如何使用人工智能开发更小、更轻的扩展现实眼镜

科技绿洲 来源:网络整理 作者:网络整理 2024-07-05 18:23 次阅读

XR(Extended Reality,扩展现实)是一种将现实世界与虚拟世界相结合的技术,它包括了AR(Augmented Reality,增强现实)和VR(Virtual Reality,虚拟现实)等多种技术。

一、XR、AR和VR的概念

  1. XR(扩展现实)

XR是一种将现实世界与虚拟世界相结合的技术,它通过计算机生成的图像、声音、触觉等感官信息,增强用户对现实世界的感知。XR技术可以让用户在现实世界中看到虚拟物体,或者在虚拟环境中感受到现实世界的物体。XR技术包括了AR、VR、MR(Mixed Reality,混合现实)等多种技术。

  1. AR(增强现实)

AR是一种将虚拟信息叠加到现实世界中的技术,它通过计算机生成的图像、声音等感官信息,增强用户对现实世界的感知。AR技术可以让用户在现实世界中看到虚拟物体,但这些虚拟物体与现实世界的物体是相互独立的。AR技术的应用领域包括游戏、教育、医疗、零售等。

  1. VR(虚拟现实)

VR是一种通过计算机生成的虚拟环境,让用户完全沉浸在虚拟世界中的技术。VR技术可以让用户在虚拟环境中看到、听到、感受到虚拟物体,但这些虚拟物体与现实世界的物体是完全隔离的。VR技术的应用领域包括游戏、教育、医疗、军事等。

二、XR、AR和VR的区别

  1. 技术实现方式

XR技术是一种综合性的技术,它包括了AR、VR、MR等多种技术。XR技术通过计算机生成的图像、声音、触觉等感官信息,增强用户对现实世界的感知。而AR技术主要通过在现实世界中叠加虚拟信息,增强用户对现实世界的感知;VR技术则是通过计算机生成的虚拟环境,让用户完全沉浸在虚拟世界中。

  1. 用户体验

XR技术可以提供更加丰富的用户体验,它可以根据用户的需求,将AR、VR、MR等多种技术进行组合,实现不同的应用场景。而AR技术主要提供现实世界与虚拟世界的叠加体验,用户可以在现实世界中看到虚拟物体,但这些虚拟物体与现实世界的物体是相互独立的。VR技术则提供完全沉浸式的虚拟环境体验,用户在虚拟环境中可以完全感受到虚拟物体,但与现实世界的物体是完全隔离的。

  1. 应用领域

XR技术的应用领域非常广泛,包括游戏、教育、医疗、军事、零售、旅游等。由于XR技术可以提供更加丰富的用户体验,因此在很多领域都有广泛的应用前景。而AR技术主要应用于游戏、教育、医疗、零售等领域,通过在现实世界中叠加虚拟信息,增强用户对现实世界的感知。VR技术则主要应用于游戏、教育、医疗、军事等领域,通过提供完全沉浸式的虚拟环境体验,让用户在虚拟环境中进行学习和训练。

三、XR、AR和VR在不同领域的应用

  1. 游戏领域

在游戏领域,XR技术可以提供更加丰富的游戏体验,通过将AR、VR、MR等多种技术进行组合,实现不同的游戏场景。例如,通过AR技术,用户可以在现实世界中看到虚拟的游戏角色和道具;通过VR技术,用户可以完全沉浸在虚拟的游戏世界中,体验更加真实的游戏场景。

  1. 教育领域

在教育领域,XR技术可以提供更加生动的教学体验,通过将虚拟信息与现实世界相结合,帮助学生更好地理解和掌握知识。例如,通过AR技术,学生可以在现实世界中看到虚拟的科学实验和历史场景;通过VR技术,学生可以完全沉浸在虚拟的实验室和历史场景中,进行实践操作和探索。

  1. 医疗领域

在医疗领域,XR技术可以提供更加精确的诊断和治疗手段,通过将虚拟信息与现实世界相结合,帮助医生更好地进行手术和治疗。例如,通过AR技术,医生可以在现实世界中看到虚拟的人体结构和病变部位;通过VR技术,医生可以在虚拟环境中进行手术模拟和训练,提高手术技能。

  1. 军事领域

在军事领域,XR技术可以提供更加真实的训练环境,通过将虚拟信息与现实世界相结合,帮助士兵进行实战训练。例如,通过AR技术,士兵可以在现实世界中看到虚拟的敌人和战场环境;通过VR技术,士兵可以完全沉浸在虚拟的战场环境中,进行战术训练和模拟战斗。

  1. 零售领域

在零售领域,XR技术可以提供更加便捷的购物体验,通过将虚拟信息与现实世界相结合,帮助消费者进行商品选择和购买。例如,通过AR技术,消费者可以在现实世界中看到虚拟的商品信息和评价;通过VR技术,消费者可以完全沉浸在虚拟的购物环境中,进行商品浏览和购买。

  1. 旅游领域

在旅游领域,XR技术可以提供更加丰富的旅游体验,通过将虚拟信息与现实世界相结合,帮助游客更好地了解和体验旅游景点。

如何使用人工智能开发更小、更轻的扩展现实眼镜

如今的沉浸式扩展现实(XR)设备需要重型光学器件和显示器用头带固定,这增加了体积并形成了社会障碍。在设想的未来,头带将不再是必要的。在过去的几年里,NVIDIA Research 一直在与斯坦福大学计算成像小组合作,研究如何开发更小、更轻的 XR 眼镜,该小组由 Gordon Wetzstein 教授领导。

XR 眼镜光学设计中最重要的规则是显示器应该靠近用户的面部,以实现紧凑和轻便的设计,而图像应该看起来更远。随着显示器移动得离眼睛更远,重心也发生了变化。

然而,人眼无法正确感知离得太近的显示器,因此必须使用透镜等光学系统将图像中继到舒适的观看距离。为了使该系统有效,显示器需要位于透镜的焦距附近,这反讽地需要将显示器放置得更远。

一种解决方案是使用折叠光路的煎饼透镜,这种方法引入了新的问题,如像差和额外的重量。光波导也经常用于实现紧凑型 XR 眼镜,但它们也有自己的挑战,包括有限的视角和无限远的固定焦点。

XR 全息眼镜

全息近眼显示器作为一种能够克服这些限制的技术正在受到关注。新的显示元件,空间光调制器(SLM),不是操纵光的强度,而是操纵光的相位,从而能够在 SLM 之前或之后重建三维全息图。使用此功能,三维图像可以定位在镜头焦距附近,即使显示器非常靠近镜头。

利用这一原理,我们的团队推出了厚度仅为 2.5 毫米的虚拟现实全息眼镜(图 2),如虚拟现实全息玻璃所示。通过波导、全息近眼显示器和几何相位透镜,VR 眼镜可以在没有自由空间传播的情况下以最小的厚度制造,该团队实施了台式和可穿戴原型进行测试。

我们的双目可穿戴原型支持 3D 焦点提示,它提供了 22.8 度的对角视野,带有 2.3 毫米的静态眼盒和带光束转向的动态眼盒的额外功能,同时重量仅为 60 克,不包括驱动板。利用用户瞳孔作为自然傅立叶滤波器的思想,我们首次提出了一种真正的眼镜形状因子全息 VR。

杂志 《自然》最近刊登了这项研究,即全彩 3D 全息增强现实显示器,具有金属表面波导。本研究介绍了独特的全息增强现实(AR)眼镜,它结合了逆向设计的全色元表面光栅、紧凑的色散补偿波导几何结构和人工智能驱动的全息算法

采用与我们之前的工作类似的方法,这项研究从光路中消除了透镜,并战略性地使用全色超表面光栅作为内耦合器和外耦合器。如图 3所示,传统的 AR 眼镜使用振幅 SLM,如有机发光二极管或微型发光二极管,这些都需要基于投影仪的光引擎,该光引擎通常至少与投影透镜的焦距一样厚。

A diagram of conventional AR glasses. It is at least as thick as the focal length f of the projection lens, and it only provides a 2D image. A diagram of holographic AR glasses uses a phase-only SLM that can be mounted very close to the in-coupling grating, thereby minimizing the device form factor. Unlike conventional AR glasses, our holographic design can provide full 3D depth cues for virtual content. Compact 3D-printed prototype illustrating the components of our holographic AR glasses in a wearable form factor.基于波导的 AR 显示器的光学原理。我们的全息 AR 眼镜的设计使用了仅相位 SLM,可以安装在耦合光栅附近,从而最大限度地减小器件的形状因子

我们的全息 AR 眼镜的设计使用了仅相位 SLM,该 SLM 可以安装在非常靠近内耦合光栅的位置,从而最大限度地减小了器件的形状因子。与传统的 AR 眼镜不同,我们的全息设计可以为虚拟内容提供全 3D 深度提示。图4显示了通过我们的紧凑型全息显示器原型捕获的实验结果。这项创新工作是首次在完全透明的玻璃结构中成功实现全彩 3D 全息。

我们设计的另一个重要特征是使用了人工智能驱动的全息算法,这使得能够使用之前介绍的紧凑、轻便的全息 XR 眼镜。SLM 由相干光源(如激光)供电,其中波导系统中相干波前的精确操作对于全息显示器至关重要,但由于相干光的干扰性质,这一点非常具有挑战性。为了应对这一挑战,我们开发了一个数学模型,该模型结合物理精确建模技术和人工智能来描述波导中相干波的传播。

如图 5 所示,波导的物理方面(以绿色突出显示)与从相机反馈中学习的 AI 组件(以橙色突出显示)相结合。在我们的模型中,输入相位模式(左)将从 0 到 2π的每像素相位延迟应用于会聚照明,然后波前被所学习的耦合器内效率调制。本文中的效率是指表征元表面的物理量。

然后,该波阵面被发送到耦合器内平面处的 CNN,并使用其物理激励传递函数通过波导传播,然后使用额外的学习输出耦合器效率来确定输出耦合波阵面(中心)。后者被传播到距离用户不同距离的目标场景,在那里应用 CNN,将复值场转换为观察到的强度(右)。

This is an illustration of the mathematical model that describes the propagation of coherent waves in a waveguide using a combination of physically accurate modeling techniques and artificial intelligence.提出的波浪传播模型。当该模型在捕获的数据集上进行训练时,所学习的参数使其能够准确预测我们的全息 AR 眼镜的输出,并在运行时计算目标场景的相位模式

当在捕获的数据集上进行训练时,CNNs 的学习参数、耦合器效率和波导传播使该模型能够准确预测我们的全息 AR 眼镜的输出该模型是完全可微分的,使得简单的梯度下降计算机生成的全息算法能够在运行时计算目标场景的相位模式

该模型可以通过神经网络组件参数化,这些组件可以从相机反馈中自动学习。在实际的全息显示器中,即使是波长尺度的错位也会导致图像质量的显著下降,使得人工智能驱动的校准至关重要,尤其是在波导等复杂结构中。所提出的波传播模型准确地表示了物理光学,相比其他模型显著提高了图像质量(图 2图 4)。

总结

一度被认为不可能,但人工智能使实用的全息显示器变得可行,并使 3D XR 眼镜能够支持聚焦提示。这一研究领域为人工智能在显示器中开辟了新的可能性。虽然人工智能已经被用于内容创建和人机交互,但它也可以显著减少显示器本身的尺寸和重量,这是一个真正突破性的成就,超越了传统的期望。这些创新还为新的显示器外形因素带来了潜力,超越了自诞生以来一直占据主导地位的传统 2D 矩形显示器。

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • Ar
    Ar
    +关注

    关注

    24

    文章

    5096

    浏览量

    169503
  • 人工智能
    +关注

    关注

    1791

    文章

    47244

    浏览量

    238364
  • vr
    vr
    +关注

    关注

    34

    文章

    9638

    浏览量

    150245
  • 虚拟现实眼镜

    关注

    0

    文章

    9

    浏览量

    6248
  • XR
    XR
    +关注

    关注

    0

    文章

    391

    浏览量

    9166
收藏 人收藏

    评论

    相关推荐

    ARVR、MR(混合现实)、XR扩展现实)这些技术彼此交互与相互影响

    过去几年,我们见证了如何通过改变或影响物理现实的技术来增强我们的体验。这些技术通过不同的方式进行,并有着各种各样的名称,其中,VR(虚拟现实)和AR(增强
    的头像 发表于 10-26 10:59 4.3w次阅读
    <b class='flag-5'>AR</b>、<b class='flag-5'>VR</b>、MR(混合<b class='flag-5'>现实</b>)、<b class='flag-5'>XR</b>(<b class='flag-5'>扩展现实</b>)这些技术彼此交互与相互影响

    AR/VR增强现实 虚拟现实,嵌入式解决方案探讨

    AR/VR增强现实 虚拟现实,嵌入式解决方案探讨北京太速科技有限公司视频增强现实产品与视频矩阵拼接等产品
    发表于 03-14 17:09

    100%开源 MR(VR+AR)智能眼镜开发实战文档教程

    疯壳 100%开源 MR(VR+AR)智能眼镜开发实战文档教程
    发表于 02-12 16:35

    疯壳MR(VR&AR)智能眼镜开发实战全套文档教程

    疯壳MR(VR&AR)智能眼镜开发实战全套文档教程
    发表于 02-25 20:11

    AR眼镜应用设计有什么挑战?

    智能手机上的增强现实应用软件和工具有助于推动开发新一代的AR眼镜应用。现实世界是美好的,但增强
    发表于 08-08 08:05

    用人工智能啥时候能实现

    用人工智能啥时候能实现
    发表于 12-17 06:19

    VR/AR和MR的区别是什么?

    什么是虚拟现实? 什么是增强现实?什么是混合现实VRAR区别是什么?
    发表于 06-01 06:54

    【EASY EAI Nano人工智能开发套件试用体验】EASY EAI Nano人工智能开发套件开箱及硬件初体验

    今天收到了EASY EAI Nano人工智能开发套件,为大家做个开箱及硬件评测。 打开快递包装,引入眼帘的是一个设计精美蓝色的大盒子,在盒子里有EASY EAI Nano人工智能开发板、天线、喇叭
    发表于 05-31 19:18

    《通用人工智能:初心与未来》-试读报告

    作者给出的结论。整体读下来,可以给我们关于通用人工智能全面的了解。作者也反复强调了通用人工智能与专用智能区别。尤其是人们错误的认为一堆专用智能
    发表于 09-18 10:02

    如何看待未来的扩展现实XR

    未来,人类的交互方式将由2D交互向更具效率的3D交互转变。3D视觉交互系统融合了增强现实AR)、虚拟现实VR)和混合现实(MR),我们将
    发表于 08-02 10:08 1314次阅读

    影视娱乐制作商AED Display宣布开展XR(扩展现实)服务

    提供高品质虚拟生产服务。 扩展现实(XR)是虚拟现实(VR)、增强现实(AR)、混合
    的头像 发表于 09-01 11:10 3170次阅读

    扩展现实技术的定义、发展历程及未来趋势

    扩展现实(XR)是虚拟现实(VR)、增强现实(AR)和混合
    的头像 发表于 06-13 11:46 3185次阅读

    vr ar mr xr区别你都知道吗?

    VR(Virtual Reality,虚拟现实)、AR(Augmented Reality,增强现实)、MR(Mixed Reality,混合现实
    发表于 06-19 17:17 4155次阅读

    增强现实扩展现实区别

    现实扩展现实区别。 增强现实(Augmented Reality,简称AR)是指将虚拟数字信息“叠加”到真实世界中,使得用户在
    的头像 发表于 08-12 15:23 2280次阅读

    XRARVR区别是什么

    )等多种技术。本文将详细介绍XRARVR区别,以及它们在不同领域的应用。 一、XRAR
    的头像 发表于 07-08 09:43 5621次阅读