AR Engine光照估计能力,让虚拟物体在现实世界更具真实感

ar,engine,光照,估计,能力,虚拟,物体,现实,世界,更具,真实感 · 浏览次数 : 359

小编点评

**AR光照估计** AR光照估计是在AR应用场景中对光照情况的跟踪和计算,以确保虚拟物体和现实世界的光照一致性。通过光照估计,可跟踪设备周围的光线信息,计算出摄像头图像的平均光照强度,并将以上估算出的光照信息实时反馈到虚拟物体,为虚拟物体的渲染提供依据。 **光照估计的关键特性:** * 光源方向跟踪:当虚拟物体的位置和摄像头视点固定不动时,主光源照射的方向不同,会导致虚拟物体的明暗、阴影和高光效果呈现显著差异。 * 环境光着色渲染:当虚拟物体颜色和材质固定不变,而环境光有明暗变化时,虚拟物体也会随着环境光的明暗变化而产生不同的亮度变化。 * 环境图纹理映射:当虚拟物体的表面呈镜面效果时,在不同的环境中,就会通过光照估计模拟出镜面成像,将不同环境的纹理映射于虚拟物体表面,从而与真实环境产生更加紧密贴切的联系。

正文

AR是一项现实增强技术,即在视觉层面上实现虚拟物体和现实世界的深度融合,打造沉浸式AR交互体验。而想要增强虚拟物体与现实世界的融合效果,光照估计则是关键能力之一。

人们所看到的世界外观,都是由光和物质相互作用而决定的,当光源照射到物体上时,光线通过被吸收、反射和透射等方式,传递给人们物体的颜色、亮度和阴影等信息,成为人们视觉层面上构建物体外观的主要因素。因此,AR应用若要将3D虚拟物体融于现实世界并具备真实感,前提就是要拥有和现实世界一致的光照条件。

特性介绍

光照估计是指在AR应用场景中的光照情况,华为HMS Core AR Engine光照估计能力提供了真实的光照条件。通过光照估计,可跟踪设备周围的光线信息,计算出摄像头图像的平均光照强度,并将以上估算出的光照信息实时反馈到虚拟物体,为虚拟物体的渲染提供依据,保证虚拟物体和现实世界的光照一致性,从而使虚拟物体的颜色随着当前环境光照的变化而变化,看起来更为逼真。

能力解析

真实环境中,不同材质的物体在不同光照条件下的呈现效果是不同的,为呈现逼近真实的虚拟物体渲染效果,AR Engine的光照估计能力也需同时满足以下光照场景中的真实展示效果。

主光源方向跟踪

在真实光照环境中,当虚拟物体的位置和摄像头视点固定不动时,主光源照射的方向不同,就会使虚拟物体的明暗、阴影和高光效果呈现显著差异。

环境光着色渲染

在真实光照环境中,当虚拟物体的颜色和材质固定不变,而环境光有明暗变化时,虚拟物体也会随着环境光的明暗变化而产生不同的亮度变化。

同样,当环境光的颜色不停变化时,虚拟物体也会通过光照估计能力反射出不同颜色实时变化的光照渲染效果。

环境图纹理映射

在真实的光照环境中,如果虚拟物体的表面呈镜面效果,那么在不同的环境中,就会通过光照估计模拟出镜面成像,将不同环境的纹理映射于虚拟物体表面,从而与真实环境产生更加紧密贴切的联系。

为增强虚拟物体在现实环境中的真实效果,不仅需要保证3D模型的逼真,更要模拟出和真实环境下趋于统一的渲染效果。HMS Core AR Engine光照估计能力为构建沉浸式的AR使用场景,实现以假乱真的视觉效果,将提供精准的光照跟踪和实时的信息反馈,让渲染后的虚拟物体更具可信度,在与现实场景实时交互过程中更具真实感。

了解更多详情>>

访问华为开发者联盟官网
获取开发指导文档
华为移动服务开源仓库地址:GitHubGitee

关注我们,第一时间了解 HMS Core 最新技术资讯~

与AR Engine光照估计能力,让虚拟物体在现实世界更具真实感相似的内容:

AR Engine光照估计能力,让虚拟物体在现实世界更具真实感

AR是一项现实增强技术,即在视觉层面上实现虚拟物体和现实世界的深度融合,打造沉浸式AR交互体验。而想要增强虚拟物体与现实世界的融合效果,光照估计则是关键能力之一。 人们所看到的世界外观,都是由光和物质相互作用而决定的,当光源照射到物体上时,光线通过被吸收、反射和透射等方式,传递给人们物体的颜色、亮度

AR Engine毫秒级平面检测,带来更准确的呈现效果

近年来,AR版块成为时下大热,这是一种将现实环境中不存在的虚拟物体融合到真实环境里的技术,用户借助显示设备可以拥有真实的感官体验。AR的应用场景十分广泛,涉及娱乐、社交、广告、购物、教育等领域:AR可以让游戏更具互动性;商品通过AR展示更真实;使用AR进行教育教学让抽象事物更形象等,可以说AR技术已

如何让虚拟角色自然融入现实?

随着AR的发展,虚拟角色被广泛应用在游戏、直播、社交等App中。例如在直播App里,商家可以自由打造虚拟主播的形象,通过AR算法可以让虚拟形象在介绍时做到不遮挡实物商品,提升直播真实性和趣味性。那么,如何让虚拟角色自然融入现实,实现与用户的真实交互呢? 华为HMS Core AR Engine提供单

AR人体姿态识别,实现无边界的人机交互

近年来,AR不断发展,作为一种增强现实技术,给用户带来了虚拟和现实世界的融合体验。但用户已经不满足于单纯地将某件虚拟物品放在现实场景中来感受AR技术,更想用身体姿势来触发某个指令,达到更具真实感的人机交互功能。 比如在AR体感游戏中,用户不必点击按键进行频繁操作,通过某个姿势即可触发;在拍摄短视频时

AR空间音频能力,打造沉浸式声音体验

随着元宇宙的兴起,3D虚拟现实广泛引用,让数字化信息和现实世界融合,目前大家的目光主要聚焦于视觉交互层面,为了在虚拟环境中更好的再现真实世界的三维空间体验,引入听觉层面必不可少,空间音频孕育而生。 空间音频是一种音频体验,会让用户更容易体验到声音的立体感和深度,将环绕声更准确地定位在合适的方位,让用

AR手势识别交互,让应用更加“得心应手”

现如今, AR技术不断发展,人们不再满足于运用键盘、鼠标等简单器械来实现传统的人机交互模式。随着用户接触机器的多样化,繁琐的操作不但对一些用户有门槛,而且还增加其学习成本;如果能用自然且符合日常生活习惯的人机交互模式,不仅更好上手,也能让开发者们在应用内开发更多玩法。比如在视频直播或者拍照过程中,一

ARKit的理解与使用

AR概述 AR的意义:让虚拟世界套与现实世界建立联系,并可以进行互动。 AR的技术实现:通过实时地计算摄影机输出影像的位置及角度,并在内部通过算法识别将场景中的事物,然后在内部模拟的三维坐标系中给识别到的事物建立坐标,然后在特定的坐标上添加相应的图像、视频、3D模型,最终通过手机屏幕合成一个AR效果

如何在现实场景中随心放置AR虚拟对象?

随着AR的发展和电子设备的普及,人们在生活中使用AR技术的门槛降低,比如对于不方便测量的物体使用AR测量,方便又准确;遇到陌生的路段使用AR导航,清楚又便捷;网购时拿不准的物品使用AR购物,体验更逼真。 想要让虚拟物体和现实世界相融合,重要的一步就是将虚拟对象准确放置在现实场景中,当用户触摸电子屏幕

[转帖]50年来Intel CPU变化有多大?频率从0.75MHz提升到5.2GHz

https://m.baidu.com/bh/m/detail/ar_9297450181050583423?data_from=lemon 今天(11月15日)是Intel推出4004处理器50周年的日子,当初为日本计算器客户开发的芯片成为全球首个微处理器,并且改变了Intel的发展,从当初的内存

【OpenVINO™】使用OpenVINO™ C# API 部署 YOLO-World实现实时开放词汇对象检测

YOLO-World是一个融合了实时目标检测与增强现实(AR)技术的创新平台,旨在将现实世界与数字世界无缝对接。该平台以YOLO(You Only Look Once)算法为核心,实现了对视频中物体的快速准确识别,并通过AR技术将虚拟元素与真实场景相结合,为用户带来沉浸式的交互体验。在本文中,我们将...