广告

iPhone 12 Pro 激光雷达LiDAR真实评测:快速3D扫描建模、AR虚实遮挡、人物识别

2020-11-10 14:22:58 综合报道 阅读:
iPhone 12 Pro自发布以来,其搭载的激光雷达LiDAR的作用已经进行了一波科普,不过却一直缺乏实际的应用体验,现在到手的用户多了,各个社区开始通过实际使用来体验LiDAR的应用。那么,这种应用有什么用呢,仅仅是出于消费者的娱乐还是将会对某些领域/产业带来深刻的影响和变革,又或者可能对未来有什么展望呢?本文通过实际应用图片与视频的体验来给我们打开一扇激光雷达在消费领域的应用之窗,透过这扇窗户也可能看到未来的下一代智慧终端的身影......

iPhone 12 Pro自发布以来,其搭载的激光雷达LiDAR的作用已经进行了一波科普,不过却一直缺乏实际的应用体验,现在到手的用户多了,各个社区开始通过实际使用来体验LiDAR的应用。那么,这种应用有什么用呢,仅仅是出于消费者的娱乐还是将会对某些领域/产业带来深刻的影响和变革,又或者可能对未来有什么展望呢?本文通过实际应用图片与视频的体验来给我们打开一扇激光雷达在消费领域的应用之窗,透过这扇窗户也可能看到未来的下一代智慧终端的身影......wl8ednc

wl8ednc

LiDAR是Light Detection and Ranging的缩写,亦即激光探测与测距。这是一种飞行时间深度传感器,它主要是发射激光,接收从目标反射而回的信号,然后计算激光脉冲的传播或飞行时间来测量距离。通过精确的计时,相关信息可用来判断每个点的深度。丰富的深度信息将能用于环境3D映射,导航和AR效果等各种不同的用例。wl8ednc

扫描光斑

wl8ednc

这种光斑扫描看似无聊,实际上是体现了iPhone 12 Pro上的激光雷达在一定底噪下的扫描能力。wl8ednc

3D扫描

激光雷达可以用来对3D对象进行实时快速建模,然后可以直接使用模型自由移动和使用在其他场景,或在上叠加内容。这可能是图像建模领域的下一波应用,比如作用于家庭装修,甚至是社交媒体和新闻业领域。wl8ednc

下面是知乎网友@HapPiness568的视频截图wl8ednc

wl8ednc

wl8ednc

wl8ednc

显示了建模的全过程,非常快速。wl8ednc

wl8ednc

这是汽车的建模wl8ednc

建模以后就可以自由移动使用了。wl8ednc

 wl8ednc

这种捕捉3D数据并公开分享的能力可以让搭载LiDAR的智能手机和平板电脑成为3D内容捕捉工具。LiDAR同时可以在不使用摄像头元件的情况下来获取对象和空间的测量值。wl8ednc

wl8ednc

 wl8ednc

从这个意义上说,iPhone12 Pro和iPad Pro就像是没有头戴部分的AR头显……它们将为苹果自己生产的AR眼镜铺平道路,这也可能是下一代智慧终端的雏形。wl8ednc

AR虚实遮挡

对于搭载了激光雷达扫描仪LiDAR的iPhone 12 Pro和iPhone 12 Pro Max等设备,苹果表示这意味着手机能够支持“即时AR”。因为所述组件能够以相当于“拍摄一张照片”的方式捕捉深度信息,无需任何手机移动,无需跨时间对比图像。wl8ednc

这款组件内置的高级场景理解功能允许Depth API利用关于周遭环境的每像素深度信息。当与场景几何体生成的三维网格数据相结合时,通过启用虚拟对象的即时放置并将与物理环境无缝混合,深度信息可以令虚拟对象遮挡更为逼真。这可以支持应用程序部署全新的功能,比如更精确的测量和将效果应用到用户环境中。wl8ednc

wl8ednc

上面这个是利用iPhone 12 Pro的激光雷达自制AR小姐姐在键盘桌面上跳舞,手办她动起来了!wl8ednc

下面这个视频来自Sketchfab首席执行官阿尔班·德诺耶尔(Alban Denoyel)。我们可以看到,德诺耶尔用手上下左右地围绕这个虚拟瓜果移动,并且偶尔会变速,而虚拟瓜果可以相当逼真地藏在手的后面或者挡在手的前面。虚实切换非常无缝和流畅。wl8ednc

wl8ednc

又如下面这个来自Patched Reality首席执行官帕特里克·奥肖内西(Patrick O’Shaughnessey)的演示视频,一个虚拟球体正沿着旋转滑梯滑下。令人感到惊讶的是,虚拟球体就如同真实球体一样,能够恰如其分地顺应遮挡而在视图中消失和出现。wl8ednc

wl8ednc

 wl8ednc

人物识别

基于LiDAR的原理,iPhone 12 Pro等设备同样可以用于进行人/物识别,并以多种不同的方式向用户提供反馈。wl8ednc

首先,设备可以告诉用户周遭环境是否存在人与物。如果存在,它能够以英尺或米表示距离,并在用户或对象接近或原理时定期更新。wl8ednc

其次,它允许用户设置与特定距离相对应的音调。例如,如果用户将距离设置为1米,当彼此距离超过阈值时,用户就会听到一个音调。wl8ednc

wl8ednc

显然,这样的功能将会对视障用户带来重要帮助,尤其是盲人。wl8ednc

另外,这对于未来的AR眼镜同样非常有用,例如AR导航。AR眼镜可以利用LiDAR获取关于周遭环境对象的精确距离信息,并以合适的数字影像和声音来提高感知判断能力。wl8ednc

结语

三星,海力士,英飞凌、意法半导体等厂商早就进入了飞行图像传感器领域,在苹果技术潮流的引领下,随着技术的不断成熟和成本的下降,同时在与AI不断深入结合的技术带领下,它将会越来越普及和深入,并大大提升增强现实在我们日常生活中的效果与应用。wl8ednc

激光雷达在消费领域的应用可能由此打开了一扇窗,下一代智能终端也可能从这扇窗户飞跃而出。wl8ednc

  • 3d scanner app
  • 说了这么多没说要下那个APP
  • 不错
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • 基于全新测量原理的二氧化碳传感器,清洁空气的好时机 除了代表水的H2O之外,代表二氧化碳的CO2可说是最闻名的化学组分。CO2传感器测量空气中的二氧化碳浓度,以便在超过浓度时作出应对。最新的型款相比先前的产品更小巧且更便宜。
  • 面向3D物体检测和碰撞预测的自动驾驶汽车仿真测试 汽车OEM及其关键技术合作伙伴已经在开发和测试真正的自动驾驶汽车——5级自动驾驶汽车——这种汽车可以在没有人类驾驶员的情况下沿着开阔的道路行驶。这在一定程度上是通过由机器学习算法驱动的传感器融合技术实现的。
  • 驾驶员监控系统怎样利用仿真优化 随着驾驶员越来越容易分心、困倦和损伤,驾驶员监控系统(DMS)被认为是预防事故的关键。但是我们是否过度设计了这些系统核心的传感器?
  • 深入探访意法半导体(ST)第三代MEMS传感器 行业人士表示,MEMS产业未来智能化、微型化、集成化的趋势越来越明显。意法半导体(以下简称ST)从2006年率先在200毫米晶圆上量产MEMS传感器至今,其MEMS经过不断的发展,现在已经进化到了第三代。在2022年11月中旬的慕尼黑华南展现场,笔者对意法半导体亚太区模拟、MEMS和传感器产品部技术市场经理董恺进行了专访,同时深入地了解了ST的产品和技术。
  • 传感器和处理器如何打造更智能、更自主的机器人? 自主机器人是智能机器,无需人工控制或干预即可理解其环境并从中导航。尽管自主机器人技术相对较新,但已在工厂、仓库、城市和家庭等领域中广泛应用。例如,自主机器人可用于在仓库周围运输货物,或执行最后一英里配送,而其他类型的机器人可用于家庭吸尘清洁或修剪草坪。
  • 新能源汽车前景及其低碳化和数字化发展 英飞凌安全互联系统事业部汽车级Wi-Fi/BT及安全产品应用市场管理经理杨大稳分享了英飞凌对新能源汽车前景的预期,还针对未来的安全出行、汽车电子电气架构和数字化演变等话题做了分析和讨论。
  • 自热式达林顿晶体管对可构成新的气流传感器 在可用于气流检测的众多方法中,自热式热流量传感器简单、便宜、坚固而又灵敏。它们依赖于被加热传感器的空速和热阻抗之间的关系。本设计实例利用通常被认为是经典达林顿拓扑缺点的优势,将此数学关系转换成了实际电路。
  • 2022世界杯梅西和他的阿根廷大爆冷,VAR技术对足球比赛 阿根廷1:2不敌赛前被认为小组最弱的沙特阿拉伯队,成了卡塔尔世界杯开赛以来最大的冷门。上半场阿根廷队的3次进球统统被取消,此外,阿根廷还被吹了7次越位,创造世界杯纪录,阿根廷球迷在社交媒体上表示,如果不是VAR(视频助理裁判)过多的介入,上半场沙特就被阿根廷打花了,就不会出现下半场逆转的情况。VAR (视频辅助裁判)技术对足球比赛是否利大于弊?
  • 被波士顿动力起诉抄袭机器狗,幽灵机器人公司回应 近日,机器人领域赫赫有名的波士顿动力的一份专利诉讼案备受行业内外关注。据EDN电子技术设计了解,2022年11月11日,波士顿动力公司向特拉华州联邦法院提交了申请,对Ghost Robotics幽灵机器人公司的Vision60和Sprint40四足动物提出了异议,称幽灵机器人侵犯了其Spot四足机器人的七项专利。
  • 有助于低压测量的精密同步检波放大器设计 本设计实例提出了一种实用电路,借此就可实现同步检测,进而以高线性度和出色的抗噪性对小直流电压进行放大。在涉及电流分流器、称重传感器和热电偶等的测量中需要使用这种电路。
  • 机器人航位推算:深入研究里程计测试与分析 我保证会深入研究这个话题,但首先得从如何进行算法测试开始。我们之前在基于国际规范的模拟居家环境中收集了数据。但是,为了记录更多与航位推算精度直接相关的测试数据,我们在一个更简单、更小环境中对更多的方向变化进行了测试。
  • 如何用MEMS仿真模型设计地震仪 由于地震传感器网络分布较少(或有限),地震事件的表征和监测之间可能会发生延迟。解决这一问题的其中一种方法是使用基于MEMS的地震传感器作为传统传感网络的补充。MEMS传感器体积小,价格实惠,适用于局部监测,也可以提高地震监测能力。
广告
热门推荐
广告
广告
EE直播间
在线研讨会
广告
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了