智慧校园_手机
智慧照明_手机
增强现实的虚实融合的过程
发布时间:2023-03-15 15:46:07 TAGS:
作者:中联科创特约嘉宾尹智
增强现实的虚实融合的过程,本质上是机器理解现实世界,并让数字世界和物理世界按物理规律互动的过程 ——  从最初只能识别一些二维码,图片等(这些被称为Marker);到能识别出一些带形状的物体;到能看出现实中的横竖平面(地面,桌面,墙面 等稀疏点云);到掌握画面里的光照信息;到识别物体的具体细节形态和深度等空间关系(稠密几何重建),以及现实物体与周边环境的关系(机器视觉的语义分割);到对画面中的特定事物类别(人脸,人体,手势,等)的精确识别 ——  增强现实/机器视觉算法沿着对现实环境越来越完整准确的感知和认知的道路不断演进,从而,更能知道如何把数字事物/内容与镜头前的物理世界来做融合。

比如最早的基于Marker的增强现实,只能把数字内容按marker的位置附加上,没有标示物,AR就不知道如何加载数字内容;到后来有了稀疏点云的SLAM,可以识别出平面,这样不用标示,就可以把数字物体(通常还带阴影)加载到现实平面中;到后来我们可以用复杂的SLAM算法对周边环境做三维重建,所以AR算法可以让数字物体象物理物体一样出现(比如被现实物体遮挡,和现实物体发生物理接触,碰撞,等等);随着对镜头里物理事物理解的进一步深入,比如对脸部,手部,脚部立体形态的实时识别,AR算法可以把虚拟物体直接"穿戴"到实体上(把数字物体按空间关系来加载上),这就是目前大火的AR衣服,包,鞋子的"虚拟试穿"应用的形态。

按这个趋势,未来的AR将有更多的对人,空间和物体的识别算法,能更动态地把物理环境转换到数字环境,比如,目前的AR还只能将数字物体融合到相对静态的物理环境和事物中;未来,一个数字物体,可以在AR镜头里和一个真实运动的车,动物等实时发生互动 ,AR能根据真实物体的运动特征和物理性质(比如硬度,光滑度等)相应动态地表现数字物体,仿佛,数字物体真的存在于现实世界一样。 —— 仅代表尹智个人观点 Ken's personal view only
阅读( 443)