广告

iPhone 12 Pro 激光雷达LiDAR真实评测:快速3D扫描建模、AR虚实遮挡、人物识别

2020-11-10 14:22:58 综合报道 阅读:
iPhone 12 Pro自发布以来,其搭载的激光雷达LiDAR的作用已经进行了一波科普,不过却一直缺乏实际的应用体验,现在到手的用户多了,各个社区开始通过实际使用来体验LiDAR的应用。那么,这种应用有什么用呢,仅仅是出于消费者的娱乐还是将会对某些领域/产业带来深刻的影响和变革,又或者可能对未来有什么展望呢?本文通过实际应用图片与视频的体验来给我们打开一扇激光雷达在消费领域的应用之窗,透过这扇窗户也可能看到未来的下一代智慧终端的身影......

iPhone 12 Pro自发布以来,其搭载的激光雷达LiDAR的作用已经进行了一波科普,不过却一直缺乏实际的应用体验,现在到手的用户多了,各个社区开始通过实际使用来体验LiDAR的应用。那么,这种应用有什么用呢,仅仅是出于消费者的娱乐还是将会对某些领域/产业带来深刻的影响和变革,又或者可能对未来有什么展望呢?本文通过实际应用图片与视频的体验来给我们打开一扇激光雷达在消费领域的应用之窗,透过这扇窗户也可能看到未来的下一代智慧终端的身影......2WBednc

2WBednc

LiDAR是Light Detection and Ranging的缩写,亦即激光探测与测距。这是一种飞行时间深度传感器,它主要是发射激光,接收从目标反射而回的信号,然后计算激光脉冲的传播或飞行时间来测量距离。通过精确的计时,相关信息可用来判断每个点的深度。丰富的深度信息将能用于环境3D映射,导航和AR效果等各种不同的用例。2WBednc

扫描光斑

2WBednc

这种光斑扫描看似无聊,实际上是体现了iPhone 12 Pro上的激光雷达在一定底噪下的扫描能力。2WBednc

3D扫描

激光雷达可以用来对3D对象进行实时快速建模,然后可以直接使用模型自由移动和使用在其他场景,或在上叠加内容。这可能是图像建模领域的下一波应用,比如作用于家庭装修,甚至是社交媒体和新闻业领域。2WBednc

下面是知乎网友@HapPiness568的视频截图2WBednc

2WBednc

2WBednc

2WBednc

显示了建模的全过程,非常快速。2WBednc

2WBednc

这是汽车的建模2WBednc

建模以后就可以自由移动使用了。2WBednc

 2WBednc

这种捕捉3D数据并公开分享的能力可以让搭载LiDAR的智能手机和平板电脑成为3D内容捕捉工具。LiDAR同时可以在不使用摄像头元件的情况下来获取对象和空间的测量值。2WBednc

2WBednc

 2WBednc

从这个意义上说,iPhone12 Pro和iPad Pro就像是没有头戴部分的AR头显……它们将为苹果自己生产的AR眼镜铺平道路,这也可能是下一代智慧终端的雏形。2WBednc

AR虚实遮挡

对于搭载了激光雷达扫描仪LiDAR的iPhone 12 Pro和iPhone 12 Pro Max等设备,苹果表示这意味着手机能够支持“即时AR”。因为所述组件能够以相当于“拍摄一张照片”的方式捕捉深度信息,无需任何手机移动,无需跨时间对比图像。2WBednc

这款组件内置的高级场景理解功能允许Depth API利用关于周遭环境的每像素深度信息。当与场景几何体生成的三维网格数据相结合时,通过启用虚拟对象的即时放置并将与物理环境无缝混合,深度信息可以令虚拟对象遮挡更为逼真。这可以支持应用程序部署全新的功能,比如更精确的测量和将效果应用到用户环境中。2WBednc

2WBednc

上面这个是利用iPhone 12 Pro的激光雷达自制AR小姐姐在键盘桌面上跳舞,手办她动起来了!2WBednc

下面这个视频来自Sketchfab首席执行官阿尔班·德诺耶尔(Alban Denoyel)。我们可以看到,德诺耶尔用手上下左右地围绕这个虚拟瓜果移动,并且偶尔会变速,而虚拟瓜果可以相当逼真地藏在手的后面或者挡在手的前面。虚实切换非常无缝和流畅。2WBednc

2WBednc

又如下面这个来自Patched Reality首席执行官帕特里克·奥肖内西(Patrick O’Shaughnessey)的演示视频,一个虚拟球体正沿着旋转滑梯滑下。令人感到惊讶的是,虚拟球体就如同真实球体一样,能够恰如其分地顺应遮挡而在视图中消失和出现。2WBednc

2WBednc

 2WBednc

人物识别

基于LiDAR的原理,iPhone 12 Pro等设备同样可以用于进行人/物识别,并以多种不同的方式向用户提供反馈。2WBednc

首先,设备可以告诉用户周遭环境是否存在人与物。如果存在,它能够以英尺或米表示距离,并在用户或对象接近或原理时定期更新。2WBednc

其次,它允许用户设置与特定距离相对应的音调。例如,如果用户将距离设置为1米,当彼此距离超过阈值时,用户就会听到一个音调。2WBednc

2WBednc

显然,这样的功能将会对视障用户带来重要帮助,尤其是盲人。2WBednc

另外,这对于未来的AR眼镜同样非常有用,例如AR导航。AR眼镜可以利用LiDAR获取关于周遭环境对象的精确距离信息,并以合适的数字影像和声音来提高感知判断能力。2WBednc

结语

三星,海力士,英飞凌、意法半导体等厂商早就进入了飞行图像传感器领域,在苹果技术潮流的引领下,随着技术的不断成熟和成本的下降,同时在与AI不断深入结合的技术带领下,它将会越来越普及和深入,并大大提升增强现实在我们日常生活中的效果与应用。2WBednc

激光雷达在消费领域的应用可能由此打开了一扇窗,下一代智能终端也可能从这扇窗户飞跃而出。2WBednc

  • 3d scanner app
  • 说了这么多没说要下那个APP
  • 不错
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • “中国复眼”在技术上和用途上与“中国天眼”相比有何 在已经有全球最大的“中国天眼”的背景下,我国为什么还要打造“中国复眼”?二者在技术原理和用途上又有什么不同呢?
  • 手动拆解十万元的比亚迪“元”,附详细拆解图 大家是不是对手机、电脑等小型消费电子的拆解已经习以为常了?这次有个券商搞了个大动作,动手拆了一辆市场价值十万元的比亚迪“元”,还撰写了一份详细的拆解报告,刷屏了券商、汽车等行业,网友们也大呼“硬核”。
  • 采用加速度计的地震探测器 该设备无意取代地质研究所所使用的专业模型,也无法提供对地震事件的精确测量。它有助于在不提供距离或震级的情况下被动地确定地震事件。
  • 利用IIoT进行智能水资源管理 我们需要有效的水资源管理,通过减少浪费和更有效地回收废水来节约用水。通过防洪减灾来保护脆弱的城市和基础设施也是如此。那么我们可以做些什么来解决这些问题呢?工业物联网(IIoT)可能会提供一些潜在的解决方案。
  • 智能楼宇不只是能源管理 新冠疫情的到来,引发了我们在如何在办公室、工厂和商店等室内环境更智能、安全地进行社交和协作方面更多的思考与讨论。
  • 具有扩展范围的电容数字转换器 电容传感器广泛用于各种工业应用,例如液位监测、压力测量、位置检测、流量计、湿度检测等。ΣΔ (Sigma-Delta)电容数字转换器(CDC)用方波激励未知电容,并将产生的电荷转换成单位数字输出流。然后,由数字滤波器处理位流,输出精确的低噪声电容测量值。
  • 苹果AR/VR头戴设备或于年底亮相:M1同等级芯片,两万块起 苹果高管上周向董事会成员展示了即将推出的AR/VR(虚拟现实和增强现实)头戴设备,苹果为这款AR设备配置了15个光学模块、两颗与 M 系列芯片相当的主处理器……
  • 基于 MXene 和Borophene(硼墨烯)的第5代智能传感器如何 随着基于 MXene 和 Borophene (硼墨烯)的高级二维材料 (A2M) 的推出,使用 A2M 构建的传感器在各个方面都优于传统传感器。 使用基于 2D MXenes 和 Borophene 的第 5 代智能传感器彻底改变物联网传感器市场。
  • 新型FMCW LiDAR号称可实现“真4D”机器视觉 机器视觉解决方案需要先进的传感器,以取得实时性的行为数据,并在韧体或硬件层级进行处理,提供高阶信息给决策制定的算法(最终是以AI为基础)。适合车用与机器人机器视觉应用的传感器技术案例,包括雷达和LiDAR。SiLC开发的新型LiDAR技术,是仰赖同调传感器为车辆、机器人和工业应用实现4D视觉。
  • 采用LM35(无MCU)的冷却风扇控制器 本文所提出的自动风扇控制器电路板简单、紧凑,并且可嵌入到商业设备中。LM35温度传感器可以使用一些硅胶固定在散热器上。用户可使用电位器轻松设置温度阈值。该电路板可使用5V或12V电源供电,因此可以使用各种5V或12V的微型PC风扇。
  • 利用热能和振动能为IoT设备供电 热量作为来自发动机、机器和其他来源的浪费副产物通常很容易获得。热梯度采集是捕获环境热量并将其投入使用的过程。在利用环境现象获取能量的众多方法中,利用压电器件将振动转化为电能的方法似乎特别有效,根据尺寸和结构,它能够产生数百微瓦的电能。
  • 麻省理工用更简单的方法教机器人学习新技能 随着电商的蓬勃发展,自动化仓库机器人市场也迎来了爆发,也进一步提高了机器人在拣选速度方面的要求。麻省理工学院研究人员开发的一项新技术只需要少数人类演示即可重新编程机器人。这种机器学习方法使机器人能够拾取和放置从未遇到过的随机姿势的从未见过的物体。在 10 到 15 分钟内,机器人将准备好执行新的拾取和放置任务。
广告
热门推荐
广告
广告
EE直播间
在线研讨会
广告
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了