AR

AR(Augmented Reality)即增强现实,是指将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息、声音、味道、触觉等…
管理

详细内容

何为AR

数字AR模拟技术

AR(Augmented Reality)即增强现实,是指将真实世界信息和虚拟世界信息“无缝”集成的新技术,是把原本在现实世界的一定时间空间范围内很难体验到的实体信息(视觉信息、声音、味道、触觉等),通过电脑等科学技术,模拟仿真后再叠加,将虚拟的信息应用到真实世界,被人类感官所感知,从而达到超越现实的感官体验。真实的环境和虚拟的物体实时地叠加到了同一个画面或空间同时存在。

AR游历于虚拟现实和真实之间,用过特殊的处理方式或者利用特殊道具实现真实与虚拟相结合,那才是完美的和谐统一,最终会证实其用途的广泛性。

增强现实技术包含了多媒体、三维建模、实时视频显示及控制、多传感器融合、实时跟踪及注册、场景融合等新技术与新手段。增强现实提供了在一般情况下,不同于人类可以感知的信息。

增强现实在信息领域,尤其利用国际互联网和全球卫星定位等技术,这些技术的结合,发展空间是无限的。

而随着输入和输出设备价格的不断下降、视频显示质量的提高以及功能很强大但易于使用的软件的实用化,AR的应用必将日益增长。

AR技术在人工智能、CAD、图形仿真、虚拟通讯、遥感、娱乐、模拟训练等许多领域带来了革命性的变化。

这项技术有数百种可能的应用,其中游戏和娱乐是最显而易见的应用领域。可以给人们提供即时信息的不需要人们参与任何研究的任何系统,在相当多的领域对所有人都是有价值的。增强现实系统可以立即识别出人们看到的事物,并且检索和显示与该景象相关的数据。

维修和建设——增强现实可以将标记器连接到人们正在施工的特定物体上,然后增强现实系统可以在它上面描绘出图像。

军事——军队数十年来一直在设计使用增强现实,美国海军研究所已经资助了一些增强现实研究项目。国防先进技术研究计划署(DARPA)已经投资了HMD项目来开发可以配有便携式信息系统的显示器。其理念在于,增强现实系统可以为军队提供关于周边环境的重要信息,例如显示建筑物另一侧的入口,这有点像X射线视觉。增强现实显示器还能突出显示军队的移动,让士兵可以转移到敌人看不到的地方。

即时信息——旅行者和学生可以使用这些系统了解有关特定历史事件的更多信息。想像行走在美国内战的战场上,并且在头戴式增强现实显示器上看到重现的历史事件。它将使您沉浸在历史事件中,有身临其境之感,而且视角将是全景的。

游戏——增强现实,可以将游戏映射到周围的真实世界中,并可以真正成为其中的一个角色。澳大利亚的一位研究人员创作了一个将流行的视频游戏Quake和增强现实结合起来的原型游戏,他将一个大学校园的模型放进了游戏软件中。

AR实际应用领域

发展历程

1966年:第一台AR设备

计算机图形学之父和增强现实之父萨瑟兰(Ivan Sutherland)开发出了第一套增强现实系统,是人类实现的第一个AR设备,被命名为达摩克利斯之剑(Sword of Damocles),同时也是第一套虚拟现实系统。这套系统使用一个光学透视头戴式显示器,同时配有两个6度追踪仪,一个是机械式,另一个是超声波式,头戴式显示器由其中之一进行追踪。受制于当时计算机的处理能力,这套系统将显示设备放置在用户头顶的天花板,并通过连接杆和头戴设备相连,能够将简单线框图转换为3D效果的图像。

当时技术并不发达,做出来的头戴显示器显得非常的笨重,如果直接佩戴会因为重量导致使用者断颈身亡,所以从头顶悬挂下来可以承受一定的重量。从某种程度上讲,萨瑟兰发明的这个AR头盔和现在的一些AR产品有着惊人的相似之处。当时的AR头盔除了无法实现娱乐功能以外,其他技术原理和现在的增强现实头盔没有什么本质区别。

虽然这款产品被业界认为是虚拟现实和增强现实发展历程中里程碑式的作品,不过在当时除了得到大量科幻迷的热捧外,并没有引起很大轰动。笨重的外表和粗糙的图像系统都大大限制了产品在普通消费者群体里的发展。

1992年:AR名称正式诞生

增强现实(augmented reality)这一术语正式诞生。波音公司的研究人员汤姆(Tom Caudell)和他的同事都在开发头戴式显示系统,以使工程师能够使用叠加在电路板上的数字化增强现实图解来组装这个电路板上的复杂电线束。由于他们虚拟化了布线图,因此这极大地简化了之前使用大量不灵便的印刷电路板的系统。

Tom Caudell 和 David Mizell在论文《Augmented reality: an application of heads-up display technology to manual manufacturing processes》中首次使用了增强现实(Augmented Reality )这个词,用来描述将计算机呈现的元素覆盖在真实世界上这一技术。Caudell 和 Mizell 讨论了增强现实相对于虚拟现实(VR)的优点,例如因为需要计算机呈现的元素相对较少,因此对处理能力的要求也较低。同时他们也知道为了使得虚拟世界和真实世界更好地结合,对于增强现实的定位(registration)技术的要求在不断增强。

同年,两个早期的增强现实原型系统:VirtualFixtures虚拟帮助系统和KARMA机械师修理帮助系统,由美国空军的路易斯罗森伯格(Louis Rosenberg)和哥伦比亚大学的S.Feiner等人分别提出。

路易斯罗森伯格在美国空军的阿姆斯特朗实验室中,开发出了VirtualFixtures。这个设备的功能可以实现对机器的远程操作。而随后罗森博格将研究方向转向了AR增强现实技术,包括如何将虚拟图像叠加至用户的真实世界画面中等各项研究,这也是当代增强现实现实技术讨论的热点。从这时开始,增强现实和虚拟现实的发展道路便分离开了。

KARMA 的全称是基于知识的增强现实维修助手(Knowledge-based Augmented Reality for Maintenance Assistance),是哥伦比亚大学计算机图形和交互实验室研发的一个 AR 协助维修设备的系统。他们使用 HMD 来辅助维修一台激光打印机。

AR无处不在

1994年:AR技术的首次表演

这一年,AR技术首次在艺术上得到发挥。艺术家Julie Martin设计了一出叫 赛博空间之舞(Dancing in Cyberspace)的表演。舞者作为现实存在,舞者会与投影到舞台上的虚拟内容进行交互,在虚拟的环境和物体之间婆娑,这是AR概念非常到位的诠释。这是世界上第一个增强现实戏剧作品。

1997年:AR定义确定

Ronald Azuma发布了第一个关于增强现实的报告。在其报告中,他提出了一个已被广泛接受的增强现实定义,这个定义包含三个特征:将虚拟和现实结合;实时互动;基于三维的配准(又称注册、匹配或对准) 。近二十年过去了,AR已经有了长足的发展,系统实现的重心和难点也随之变化,但是这三个要素基本上还是AR系统中不可或缺的。

哥伦比亚大学的Steve Feiner等人发布游览机器(Touring Machine),这是第一个室外移动增强现实系统。这套系统包括一个带有完整方向追踪器的透视头戴式显示器;一个捆绑了电脑、DGPS和用于无线网络访问的数字无线电的背包;和一台配有光笔和触控界面的手持式电脑。

1998年:AR第一次用于直播

当时体育转播图文包装和运动数据追踪领域的领先公司Sportvision开发了1st & Ten系统。在实况橄榄球直播中,其首次实现了“第一次进攻”黄色线在电视屏幕上的可视化。这项技术是针对冰球运动开发的,其中的蓝色光晕被用以标记冰球处于的位置,但这个应用并没有被普通观众所接受。

这个对于很少玩橄榄球的国人也许可能很难理解,其实现在我们每次看游泳比赛时,每个泳道会显示出选手的名字、国旗以及排名,这就是AR技术。

1999年:带来App革命的第一个增强现实SDK

奈良先端科学技术学院(Nara Institute of Science and Technology)的加藤弘一(Hirokazu Kato )教授和 Mark Billinghurst 共同开发了第一个 AR 开源框架:ARToolKit。ARToolkit基于GPL开原协议发布,是一个6度姿势追踪库,使用直角基准(square fiducials)和基于模板的方法来进行识别。ARToolKit 的出现使得 AR 技术不仅仅局限在专业的研究机构之中,许多普通程序员也都可以利用 ARToolKit 开发自己的 AR 应用。早期的 ARToolKit 可以识别和追踪一个黑白的 Marker,并在黑白的 Marker 上显示 3D 图像。直到今天,ARToolKit 依然是最流行的 AR 开源框架,支持几乎所有主流平台,并且已经实现自然特征追踪(Nature Feature Traking,简称 NFT)等更高级的功能。下图展示了在一个方形的 Marker 上叠加一个 3D 模型的效果。

在2005年,ARToolKit与软件开发工具包(SDK)相结合,可以为早期的塞班智能手机提供服务。开发者通过SDK启用ARToolKit的视频跟踪功能,可以实时计算出手机摄像头与真实环境中特定标志之间的相对方位。这种技术被看作是增强现实技术的一场革命,目前在Andriod以及iOS设备中,ARToolKit仍有应用。

德国联邦教育和研究部1999 启动了一项投资2100 万欧元的工业AR项目,名为 ARVIKA((Augmented Reality for Development, Production, and Servicing)。来自工业和学术界的20多个研究小组致力于开发用于工业应用的AR系统。 该计划提高了全球在专业领域中对 AR 的认识,也催生了许多类似的计划。这是AR首次大规模服务于工业生产。

NASA(美国航空航天局)在X-38 航天飞机上使用AR技术来投射地图数据,增强试驾的视觉感受。

美国海军开始使用战场增强现实系统(Battlefield AugmentedReality System, BARS)。以后当美国大兵遇上ISIS恐怖分子,恐怖分子看见的是一个钢铁侠,美国大兵看见的是一条血槽。

2000年:第一款AR游戏

Bruce Thomas等人发布AR-Quake,是流行电脑游戏Quake(雷神之锤)的扩展。ARQuake是一个基于6DOF追踪系统的第一人称应用,这个追踪系统使用了GPS,数字罗盘和基于标记(fiducial makers)的视觉追踪系统。使用者背着一个可穿戴式电脑的背包,一台HMD和一个只有两个按钮的输入器。这款游戏在室内或室外都能进行,一般游戏中的鼠标和键盘操作由使用者在实际环境中的活动和简单输入界面代替。

2001年:可扫万物的AR浏览器

Kooper和MacIntyre开发出第一个AR浏览器RWWW,一个作为互联网入口界面的移动AR程序。这套系统起初受制于当时笨重的AR硬件,需要一个头戴式显示器和一套复杂的追踪设备。到了2008年Wikitude在手机上实现了类似的设想。

2009年:平面媒体杂志首次应用AR技术

当把这一期的《Esquire》杂志的封面对准笔记本的摄像头时,封面上的罗伯特唐尼就跳出来,和你聊天,并开始推广自己即将上映的电影《大侦探福尔摩斯》。这是平面媒体第一次尝试AR技术,期望通过AR技术,能够让更多人重新开始购买纸媒。

2012年:谷歌AR眼镜来了!

2012年4月,谷歌宣布该公司开发Project Glass增强现实现实眼镜项目。这种增强现实的头戴式现实设备将智能手机的信息投射到用户眼前,通过该设备也可直接进行通信。当然,谷歌眼镜远没有成为增强现实技术的变革,但其重燃了公众对增强现实的兴趣。

2014年4月15日, Google Glass 正式开放网上订购。

从谷歌眼镜在2012年横空出世之后,增强现实突然又来到的大众的面前。不过价格依然还是太高。不仅如此,谷歌眼镜那怪异的造型以及不太舒服的佩戴感受,甚至让用户发明出了“Glassholes”这样的贬义词。

2015年1月份,谷歌停止销售第一版谷歌眼镜,并将谷歌眼镜项目从Google X研究实验室拆分至一个独立部门。2015年3月23日,谷歌执行董事长埃里克·施密特表示,谷歌会继续开发谷歌眼镜,因为这项技术太重要了,以至于无法放弃。

2013年:专注AR解决方案的幻实科技成立

深圳市幻实科技有限公司是一家为企业和消费者提供增强现实AR解决方案的高科技公司,主要致力于AR技术的研究和应用,公司的增强现实AR产品和项目涉及玩具、教育、影视娱乐、广告传媒、婚纱摄影、服装、金融、旅游、展览等行业。

幻实科技的主要服务产品有“扫动APP”、《魔法百科》AR学习卡、AR棒棒涂色、AR魔方、AR地球仪、“幻实影像”、AR游戏幻实英雄、AR软件定制等。幻实科技在2015年和腾讯《洛克王国4》合作推出AR广告宣传活动。

2014年:首个获得成功的AR儿童教育玩具

Osmo 是前Google 员工 Pramod Sharma 和 Jerome Scholler创立的一家生产AR儿童益智玩具的公司。它由一个 iPad 配件和一个 App 组成。Osmo包含一个可以让 iPad 垂直放置的白色底座和一个覆盖前置摄像头的红色小夹子,夹子内置的小镜子可以把摄像头的视角转向 iPad 前方区域,并用该区域玩识字、七巧板、绘画等游戏。

2014年5月,Osmo 开始在官网众筹,当时预售价格为49美元,共计筹款200万美元。截至2016年底,Osmo 已经被全球超过22000所学校使用,累计融资金额达到3600万美元。

2015年:现象级 AR 手游《Pokémon GO》

《Pokémon GO》是由任天堂公司、Pokémon 公司授权,Niantic 负责开发和运营的一款 AR 手游。在这款 AR 类的宠物养成对战游戏中,玩家捕捉现实世界中出现的宠物小精灵,进行培养、交换以及战斗。

市场研究公司 App Annie 发布的数据显示,增强现实游戏《Pokémon GO》只用了63天,通过 iOS 和 Google Play 应用商店在全球就赚了5亿美元,成为史上赚钱速度最快的手游。《Pokémon GO》日前也在苹果发布会上宣布,《Pokémon GO》下载量已超过5亿次,手环 Pokémon Go Plus 也将推出,届时用户不需掏出手机就能捕捉精灵。

同年,微软 发布了 AR 头戴显示器 Hololens,被誉为目前已发布的体验最好的 AR 设备。但是它并不便宜,目前分为两个版本,开发版需要3000美元,商业版需要5000美元。

2016年:神秘AR公司Magic Leap获得巨额融资

Magic Leap 是 AR 领域最著名的创业公司,在2016年获得一轮7.935亿美元的C轮融资。

本轮融资由阿里巴巴领投,其他新投资者还包括华纳兄弟、Fidelity Management & Research Co、摩根大通和摩根士丹利投资管理公司。此外,当前股东Google和Qualcomm Ventures也参与了本轮融资。

Magic Leap 与 Hololens 最大的不同是显示部分的区别。Magic Leap 是用光纤向视网膜直接投射整个数字光场(Digital Lightfield),以此产生了所谓的电影级现实(Cinematic Reality)。

最让人不可思议的是,如今估值高达45亿美元的Magic Leap甚至还没有推出一款商用产品,所以在外界看来是一家非常神秘的AR技术公司。据悉,Magic Leap的最终的产品很可能是一款“头盔式”设备,可将电脑生成的图像投射到人眼上,最终在现实图像上叠加一个虚拟图像,就像把《黑客帝国》和《哈利·波特》结合在一起一样。

2017年:科技巨头苹果打造最大AR开发平台

2017年6月6日WWDC17大会上,苹果宣布在iOS 11中带来了全新的增强现实组件ARKit,该应用适用于iPhone和iPad平台,使得iPhone一跃成为全球最大的AR平台。从功能上来看,苹果ARKit所展示的功能与谷歌早前推出的Tango很相似。

ARKit 的“World Tracking”使用的技术名为“visual-inertial odometry”(视觉惯性测程法)。使用 iPhone 和 iPad 的相机和动作传感器,ARKit能够在环境中寻找几个点,然后当你移动手机的时候也能够进行保持追踪,构造出的虚拟物体会被钉在原处,即便你把手机移开,但当你再次对准原区域,虚拟物体仍然会在那里。此外 ARKit 还能够寻找环境中的平面,这能够使虚拟物体放在桌上的场景更加逼真。经过实测,iPhone 6s Plus能够保持60fps 的稳定刷新率,偶尔出现掉帧。

AR模拟

技术难点

虽然经过了十几年的研究,开发了许多种工具包,但是几乎所有AR系统仍然处于实验室内使用,研究者已经开始考虑AR在实用中面临的一些基本问题,主要有以下几个方面:

(1) 景物的生成与显示

几乎所有的S-HMD设备在明亮的环境下,其显示的效果都比较暗,另外,由于头戴式显示器上的摄像机的摄像角度与眼睛的位置存在偏差,因此虚拟物体的定位在真实视场中的定位和显示角度也会存在偏差且很难调整。

(2) 定位错误

定位错误不可避免,民用GPS一般精度在3m到12m左右,在较差的天气中,最大误差可达100m。电子罗盘也会因为附近的磁场干扰产生误差。由于现有许多户外的系统中的校正算法需要大量的输入和繁琐的校正步骤,因此不适合商业化应用。

(3) 通讯设备

多数系统都假设在带宽满足的情况下进行操作,但实际情况并非如此,在绝大多数分布式AR应用中,系统能力都要受制于数据传送的速度。因此在大型协作AR系统中,还有赖于通过动态兴趣度管理算法和动作预测算法来降低所需传输的数据量。

(4) 计算能力

在户外AR系统中,必须尽量减少客户端配置,数据处理常由便携式计算机,甚至是依靠掌上电脑来处理,因此,如何达到实时性和提高渲染效果是必须面对的一个问题。这也是目前AR研究中的热点之一。[1]

AR系统具有三个突出的特点:

①真实世界和虚拟世界的信息集成;

②具有实时交互性;

③是在三维尺度空间中增添定位虚拟物体。

AR眼镜

构成形式

一个完整的增强现实系统是由一组紧密联结、实时工作的硬件部件与相关的软件系统协同实现的,常用的有如下三种组成形式。

Monitor-Based

在基于计算机显示器的AR实现方案中,摄像机摄取的真实世界图像输入到计算机中,与计算机图形系统产生的虚拟景象合成,并输出到屏幕显示器。用户从屏幕上看到最终的增强场景图片。它虽然简单,但不能带给用户多少沉浸感。

光学透视式

头盔式显示器(Head-mounted displays,简称HMD)被广泛应用于虚拟现实系统中,用以增强用户的视觉沉浸感。增强现实技术的研究者们也采用了类似的显示技术,这就是在AR中广泛应用的穿透式HMD。根据具体实现原理又划分为两大类,分别是基于光学原理的穿透式HMD(Optical See-through HMD)和基于视频合成技术的穿透式HMD(Video See-through HMD)。

光学透视式增强现实系统具有简单、分辨率高、没有视觉偏差等优点,但它同时也存在着定位精度要求高、延迟匹配难、视野相对较窄和价格高等不足。

视频透视式

视频透视式增强现实系统采用的基于视频合成技术的穿透式HMD(Video See-through HMD)。[2]

AR游戏应用

应用领域

AR技术不仅在与VR技术相类似的应用领域,诸如尖端武器、飞行器的研制与开发、数据模型

的可视化、虚拟训练、娱乐与艺术等领域具有广泛的应用,而且由于其具有能够对真实环境进行增强显示输出的特性,在医疗研究与解剖训练、精密仪器制造和维修、军用飞机导航、工程设计和远程机器人控制等领域,具有比VR技术更加明显的优势。

医疗领域

医生可以利用增强现实技术,轻易地进行手术部位的精确定位。

军事领域

部队可以利用增强生活中的AR现实技术,进行方位的识别,获得实时所在地点的地理数据等重要军事数据。

古迹复原和数字化文化遗产保护:文化古迹的信息以增强现实的方式提供给参观者,用户不仅可以通过HMD看到古迹的文字解说,还能看到遗址上残缺部分的虚拟重构。

工业维修领域

通过头盔式显示器将多种辅助信息显示给用户,包括虚拟仪表的面板、被维修设备的内部结构、被维修设备零件图等。

网络视频通讯领域

该系统使用增强现实和人脸跟踪技术,在通话的同时在通话者的面部实时叠加一些如帽子、眼镜等虚拟物体,在很大程度上提高了视频对话的趣味性。

电视转播领域

通过增强现实技术可以在转播体育比赛的时候实时的将辅助信息叠加到画面中,使得观众可以得到更多的信息。

娱乐、游戏领域

增强现实游戏可以让位于全球不同地点的玩家,共同进入一个真实的自然场景,以虚拟替身的形式,进行网络对战。

旅游、展览领域

人们在浏览、参观的同时,通过增强现实技术将接收到途经建筑的相关资料,观看展品的相关数据资料。

市政建设规划

采用增强现实技术将规划效果叠加真实场景中以直接获得规划的效果。

水利水电勘察设计

在水利水电勘察设计领域,三维协同设计稳步发展,可能会在不远的将来取代传统的二维设计,AR技术在设计领域的应用为水利水电三维模型的应用提供了更好的展示手段,使得三维模型与二维的设计、施工图纸能更加紧密地结合起来。AR技术在勘察设计领域中可以有效地应用于实时方案比较、设计元素编辑、三维空间综合信息整合、辅助决策和设计方案多方参与等方面。

参考资料

1.朱淼良,姚远,蒋云良. 增强现实综述[J]. 中国图象图形学报,2004,(07):3-10.

2. 雷建平,阿里投Magic Leap引发AR热:游戏领域或最早爆发,腾讯科技,2016年02月04日

3. 一文看懂AR增强现实50年发展历史_虚拟现实-未来频道-中文科技资讯,2017年06月09日

4.《智能计算机与应用》2017年,第6期 28-31页

5.王静,褚逸凡,何程,代宇扬.《信息周刊》2018年,第01期

6.徐硕,孟坤,李淑琴,丁濛,邬丽君.《智能计算机与应用》,2017年,第6期

百科摘录
3
翻译必备 | AI时代,17个你需要知道的人工智能术语下的内容摘录
增强现实是指由计算机系统实时计算形成的虚拟元素与现实的叠加(如声音、二维和三维视频图像等)。这种技术应用于视频游戏和电影,观众可通过传感器与虚拟物体进行互动,同时也应用于地理定位和遗产方面。例如,法国的克吕尼修道院采用增强现实屏幕,为游客展示 15 世纪古镇风貌。
知乎小知 摘录于 2020-04-24
Ⅰ:06|市场营销的新现实下的内容摘录
增强现实是在虚拟现实(virtual reality,VR)的基础上发展起来的新兴技术,是一种通过传感器、显示设备,以数字化的图片、声音、数据来增强现实体验的技术。AR技术是为了使原来屏幕上显示的虚拟世界与现实世界结合后进行互动,使真实世界与虚拟数字世界的边界变得模糊,增强用户在现实世界的体验,因此增强现实可以被理解为现实世界的外部数字接口。
知乎小知 摘录于 2020-04-24
设计师必看的5G发展趋势下的内容摘录
增强现实(AR)是人工智能和人机交互的交叉的学科,是一种实时地计算摄影机影像的位置及角度并加上相应图像、视频、3D 模型的技术,也是一种把真实世界和虚拟世界信息有机集成的技术。AR 把原本在现实世界一定时空范围内很难体验到的实体信息(主要包括视觉和听觉信息)通过计算机模拟仿真后叠加,将虚拟的信息应用到真实世界并被人类感官所感知,从而达到超越现实的感官体验。
知乎小知 摘录于 2020-04-24
讨论量
8.4 万
 
帮助中心
知乎隐私保护指引 联系我们
 
举报中心
涉未成年举报 网络谣言举报 涉企侵权举报
 
关于知乎
下载知乎 知乎招聘 知乎指南 知乎协议
京 ICP 证 110745 号 · 京 ICP 备 13052560 号 - 1 · 京公网安备 11010802020088 号 · 京网文[2022]2674-081 号 · 药品医疗器械网络信息服务备案(京)网药械信息备字(2022)第00334号 · 广播电视节目制作经营许可证:(京)字第06591号 · 服务热线:400-919-0001 · Investor Relations · © 2024 知乎 北京智者天下科技有限公司版权所有 · 违法和不良信息举报:010-82716601 · 举报邮箱:jubao@zhihu.com
本站提供适老化无障碍服务