广告

iPhone 12 Pro 激光雷达LiDAR真实评测:快速3D扫描建模、AR虚实遮挡、人物识别

2020-11-10 综合报道 阅读:
iPhone 12 Pro自发布以来,其搭载的激光雷达LiDAR的作用已经进行了一波科普,不过却一直缺乏实际的应用体验,现在到手的用户多了,各个社区开始通过实际使用来体验LiDAR的应用。那么,这种应用有什么用呢,仅仅是出于消费者的娱乐还是将会对某些领域/产业带来深刻的影响和变革,又或者可能对未来有什么展望呢?本文通过实际应用图片与视频的体验来给我们打开一扇激光雷达在消费领域的应用之窗,透过这扇窗户也可能看到未来的下一代智慧终端的身影......

iPhone 12 Pro自发布以来,其搭载的激光雷达LiDAR的作用已经进行了一波科普,不过却一直缺乏实际的应用体验,现在到手的用户多了,各个社区开始通过实际使用来体验LiDAR的应用。那么,这种应用有什么用呢,仅仅是出于消费者的娱乐还是将会对某些领域/产业带来深刻的影响和变革,又或者可能对未来有什么展望呢?本文通过实际应用图片与视频的体验来给我们打开一扇激光雷达在消费领域的应用之窗,透过这扇窗户也可能看到未来的下一代智慧终端的身影......jDyednc

jDyednc

LiDAR是Light Detection and Ranging的缩写,亦即激光探测与测距。这是一种飞行时间深度传感器,它主要是发射激光,接收从目标反射而回的信号,然后计算激光脉冲的传播或飞行时间来测量距离。通过精确的计时,相关信息可用来判断每个点的深度。丰富的深度信息将能用于环境3D映射,导航和AR效果等各种不同的用例。jDyednc

扫描光斑

jDyednc

这种光斑扫描看似无聊,实际上是体现了iPhone 12 Pro上的激光雷达在一定底噪下的扫描能力。jDyednc

3D扫描

激光雷达可以用来对3D对象进行实时快速建模,然后可以直接使用模型自由移动和使用在其他场景,或在上叠加内容。这可能是图像建模领域的下一波应用,比如作用于家庭装修,甚至是社交媒体和新闻业领域。jDyednc

下面是知乎网友@HapPiness568的视频截图jDyednc

jDyednc

jDyednc

jDyednc

显示了建模的全过程,非常快速。jDyednc

jDyednc

这是汽车的建模jDyednc

建模以后就可以自由移动使用了。jDyednc

 jDyednc

这种捕捉3D数据并公开分享的能力可以让搭载LiDAR的智能手机和平板电脑成为3D内容捕捉工具。LiDAR同时可以在不使用摄像头元件的情况下来获取对象和空间的测量值。jDyednc

jDyednc

 jDyednc

从这个意义上说,iPhone12 Pro和iPad Pro就像是没有头戴部分的AR头显……它们将为苹果自己生产的AR眼镜铺平道路,这也可能是下一代智慧终端的雏形。jDyednc

AR虚实遮挡

对于搭载了激光雷达扫描仪LiDAR的iPhone 12 Pro和iPhone 12 Pro Max等设备,苹果表示这意味着手机能够支持“即时AR”。因为所述组件能够以相当于“拍摄一张照片”的方式捕捉深度信息,无需任何手机移动,无需跨时间对比图像。jDyednc

这款组件内置的高级场景理解功能允许Depth API利用关于周遭环境的每像素深度信息。当与场景几何体生成的三维网格数据相结合时,通过启用虚拟对象的即时放置并将与物理环境无缝混合,深度信息可以令虚拟对象遮挡更为逼真。这可以支持应用程序部署全新的功能,比如更精确的测量和将效果应用到用户环境中。jDyednc

jDyednc

上面这个是利用iPhone 12 Pro的激光雷达自制AR小姐姐在键盘桌面上跳舞,手办她动起来了!jDyednc

下面这个视频来自Sketchfab首席执行官阿尔班·德诺耶尔(Alban Denoyel)。我们可以看到,德诺耶尔用手上下左右地围绕这个虚拟瓜果移动,并且偶尔会变速,而虚拟瓜果可以相当逼真地藏在手的后面或者挡在手的前面。虚实切换非常无缝和流畅。jDyednc

jDyednc

又如下面这个来自Patched Reality首席执行官帕特里克·奥肖内西(Patrick O’Shaughnessey)的演示视频,一个虚拟球体正沿着旋转滑梯滑下。令人感到惊讶的是,虚拟球体就如同真实球体一样,能够恰如其分地顺应遮挡而在视图中消失和出现。jDyednc

jDyednc

 jDyednc

人物识别

基于LiDAR的原理,iPhone 12 Pro等设备同样可以用于进行人/物识别,并以多种不同的方式向用户提供反馈。jDyednc

首先,设备可以告诉用户周遭环境是否存在人与物。如果存在,它能够以英尺或米表示距离,并在用户或对象接近或原理时定期更新。jDyednc

其次,它允许用户设置与特定距离相对应的音调。例如,如果用户将距离设置为1米,当彼此距离超过阈值时,用户就会听到一个音调。jDyednc

jDyednc

显然,这样的功能将会对视障用户带来重要帮助,尤其是盲人。jDyednc

另外,这对于未来的AR眼镜同样非常有用,例如AR导航。AR眼镜可以利用LiDAR获取关于周遭环境对象的精确距离信息,并以合适的数字影像和声音来提高感知判断能力。jDyednc

结语

三星,海力士,英飞凌、意法半导体等厂商早就进入了飞行图像传感器领域,在苹果技术潮流的引领下,随着技术的不断成熟和成本的下降,同时在与AI不断深入结合的技术带领下,它将会越来越普及和深入,并大大提升增强现实在我们日常生活中的效果与应用。jDyednc

激光雷达在消费领域的应用可能由此打开了一扇窗,下一代智能终端也可能从这扇窗户飞跃而出。jDyednc

本文为EDN电子技术设计 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • 寻找半导体产业未来10年的驱动力 展望未来10年,智能的数字辅助系统将会成为新的驱动力,恩智浦(NXP)执行副总裁兼首席技术官Lars Reger将这样的新世界称之为“预知变化、自动化的世界”。
  • 工信部提出突破电子元器件关键技术,让一批企业营收先破 工业和信息化部日前正式印发《基础电子元器件产业发展行动计划(2021—2023年)》,将面向智能终端、5G、工业互联网、数据中心、新能源汽车等重点市场,推动基础电子元器件产业实现突破。在技术创新上,《行动计划》提出突破一批电子元器件关键技术,行业总体创新投入进一步提升,到2023年,我国电子元器件销售总额达到2.1万亿元,力争15家企业营收规模……
  • 整合众多特点和性能以解决数据采集兼容性问题 现代数据采集和信号发生系统既复杂又精细。几十年的 IC 和应用开发以及一代又一代设计已经优化了性能和众多优点,同时使性能不断提高、优点不断增多。新的设计必须凭借精心挑选的性能、尺寸、电源范围、稳定性以及更多优点,实现与之前设计的差异化。同时,DAC、ADC、电压基准等高性能集成电路的性能已经被推进到了极限。关于电压基准,常常必须在精确度和众多优点之间做出设计选择。当需要最高性能时,就有可能缺乏灵活性和兼容性。
  • 工业市场是缺乏创新还是大有作为? 意法半导体(ST)2020年举办的工业峰会让我们大有改观——这个活动让我们了解到,很多的创新,比如家庭机器人、平衡车,以及宽禁带技术等,都是先出现在工业领域,然后再往消费类市场渗透。
  • 传感器融合是实现自动驾驶的前提 自动驾驶汽车需要摄像头、雷达和激光雷达(LiDAR)等传感器来了解车辆周围的环境,同时还需要算力和人工智能来分析多维或多源数据流,实时为车辆提供完整且一致的环境视图。传感器融合为车辆的完全自主指明了方向,但仍然存在许多技术挑战。
  • 使用霍尔效应传感器进行设计的三个常见设计缺陷以及解 设计电路时,电路的性能并不一定完全符合预期。本文将帮助解决在工业和汽车应用中与霍尔效应传感器相关的三个常见挑战:旋转编码、稳健的信号传递和平面磁感应。
广告
热门推荐
广告
广告
EE直播间
在线研讨会
广告
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了