广告

机器视觉设计全景,微软、英特尔、Occipital和康耐视(Cognex)的3D摄影镜头成像技术

2021-04-14 11:19:41 Steve Taranovich 阅读:
首先,本文要从嵌入式视觉联盟(Embedded Vision Alliance)谈起,它将嵌入式视觉定义为将计算机视觉(CV)应用在机器上,而使其能够透过视觉手段来了解周围环境。 接下来,来看看机器人视觉感测架构的工业应用。机器视觉最佳和最复杂的一个方面就是3D成像,摄影镜头与其他支持设备相结合,可执行许多任务,包括影像讯号处理(ISP)、视讯传输、格式转换、压缩和分析等。 随后介绍一些来自微软(Microsoft)、英特尔(Intel)和Occipital的3D摄影镜头成像技术。

 作者 : Steve Taranovich,EDN资深技术编辑8Rmednc

智能机器人性能的一个关键组成部分就是机器视觉(MV)技术,这是计算机与高速摄影镜头的完美结合。透过结合这两种技术,就可以执行复杂的检查任务及数字影像采集和分析,这些资料可以用来控制机器人手臂、对物体进行分类、对图案进行辨识,以及很多我们尚未想到的事情。8Rmednc

进入21世纪的这18年中,发生了一系列令人振奋的电子创新,其中包括专为工业(特别是智慧工厂)应用而开发的”智能”机器人。8Rmednc

5G通信的出现将使工厂能够从生产车间获取数据,从而改善质量并提高自动化程度。5G低延迟、加快的边缘运算,以及快速采样能力等,都将提高制造速度,并实现制造零部件的死循环在线检测。8Rmednc

据慧与科技(Hewlett Packard Enterprise,HPE)称,“边缘运算是一种分布、开放的IT架构,具有分布式处理能力,可支持行动运算和物联网(IoT)技术。在边缘运算中,设备本身可以处理数据,或透过本地计算机或服务器来处理数据,而不必传输到数据中心。”(图1)。 8Rmednc

图1 加速的数据处理进展到在边缘设备上完成。(图片来源:《Trends in 3D Inspection: Edge Computing, Acceleration, and 3D Smart Sensors for IIoT》)8Rmednc

机器视觉

智能机器人性能的一个关键组成部分就是机器视觉(machine vision,MV)技术,这是计算机与高速摄影镜头的完美结合。透过结合这两种技术,就可以执行复杂的检查任务及数字影像采集和分析,这些资料可以用来控制机器人手臂、对物体进行分类、对图案进行辨识,以及很多我们尚未想到的事情。8Rmednc

联盟8Rmednc

首先,本文要从嵌入式视觉联盟(Embedded Vision Alliance)谈起,它将嵌入式视觉定义为将计算机视觉(CV)应用在机器上,而使其能够透过视觉手段来了解周围环境。8Rmednc

接下来,来看看机器人视觉感测架构的工业应用。机器视觉最佳和最复杂的一个方面就是3D成像,摄影镜头与其他支持设备相结合,可执行许多任务,包括影像讯号处理(ISP)、视讯传输、格式转换、压缩和分析等。8Rmednc

随后介绍一些来自微软(Microsoft)、英特尔(Intel)和Occipital的3D摄影镜头成像技术。8Rmednc

微软

微软Azure透过云端运算提供了一个简洁的计算机视觉产品,利用这一平台为机器人带来了智慧优势。该公司官网上有一个示例可以说明他们是如何分析影像,其计算机视觉API非常引人注目。Jabil Circuit是他们的一个客户,已经将其工厂车间连接到云端,从《From the factory floor to the cloud: integrating predictive analytics with real-time manufacturing》一文中可以了解到他们如何将预测性分析与实时制造相结合。Jabil在其制造中采用了传感器、无线通信、精密机器、光学、自动化和机电一体化等技术。8Rmednc

在2018年末,微软宣布与Open Robotics和ROS工业联盟(ROS-I)合作,将机器人操作系统(ROS)导入Windows 10。8Rmednc

英特尔

英特尔采用硬件方法来加速智能视觉的开发。即透过基于FPGA的加速器解决方案技术(归功于其2015年收购Altera),结合英特尔CPU,开发下一代视觉系统。8Rmednc

摄影镜头传感器技术正在不断改进,因此有一种趋势是用智慧因特网通信协议(IP)摄影镜头来取代模拟摄影镜头。此外,在与IP摄影镜头的新组合中,还有基于人工智能(AI)深度学习的视讯分析。FPGA特别适用于基于视觉的系统,因为它具有高性能功耗比、低延迟和灵活性等优点(图2)。8Rmednc

图2 FPGA具有支持不同传感器和机器视觉接口的灵活性。(图片来源:英特尔)8Rmednc

由于FPGA可以使用不同的影像传感器和机器视觉专用接口实现机器视觉摄影镜头设计,因此机器视觉技术可透过使用其来得到增强。FPGA还可用作边缘运算平台中的视觉处理加速器,借助人工智能深度学习功能来分析机器视觉数据输出。8Rmednc

可在机器人视觉摄影镜头中使用FPGA来增强和实现的其他领域包括:多个千兆以太网络(GigE)摄影镜头的使用,其中FPGA可以整合影像撷取、摄影镜头接口、通信和预处理等;在机器视觉摄影镜头和执行算法的主机之间建立讯框抓取器链路;利用德州仪器(TI)的Channel Link接口实现Camera Link的使用、USB 3视觉、CoaxPress,以及Thunderbolt等。8Rmednc

Occipital

Occipital这家公司针对机器视觉的Occipital Tracking技术,具有6自由度(6DoF)位置追踪、绘图和障碍物感知等功能。该公司还有Structure传感器和Structure Core等产品可用于机器人系统。8Rmednc

Occipital利用Structure Core设计了一个袖珍型计算机视觉设备,具有板载广角摄影镜头、立体红外线功能、板载DSP,以及彩色模块。图3显示了三颗摄影镜头:一个160度视场角的广角摄影镜头和两个红外线摄影镜头。它还有一个板载惯性测量单元(IMU),以及一个用于运算深度并也具有可程序设计DSP的NU3000处理器。8Rmednc

图3 Occipital Structure Core是一种高阶深度传感器。(图片来源:Occipita)8Rmednc

高阶机器视觉和3D位移检测8Rmednc

康耐视(Cognex)

康耐视提供3D雷射轮廓仪解决方案,例如3D位移传感器可用于产品的3D检测(图4)。8Rmednc

图4 康耐视DS1000和DS925B 3D雷射位移传感器。(图片来源:康耐视)8Rmednc

康耐视还拥有基于VISIONPRO VIDI深度学习的软件,可用于工厂自动化应用中的工业影像分析。该软件结合了人工智能、VisionPro和Cognex Designer软件,可以处理缺陷检测、纹理和材料分类、装配验证、变形零件定位,以及字符读取,包括失真打印。8Rmednc

进一步,我们还从从设计人员角度考察一些半导体公司,了解它们可以为定制和/或专有硬软件设计提供哪种解决方案,请点击。8Rmednc

(参考原文: Robotic vision electronics design for industry and space,by Steve Taranovich)8Rmednc

 8Rmednc

Steve Taranovich
EDN资深技术编辑。Steve Taranovich是EE Time姊妹网站Planet Analog的主编,也是EDN的高级技术编辑。 Steve在电子行业拥有40年的从业经验。 他在纽约布鲁克林理工大学获得电子工程硕士学位,在纽约布朗克斯纽约大学获得BEEE学位。 他还是IEEE长岛教育活动委员会主席。 他在Burr-Brown和德州仪器公司工作多年,在模拟设计方面有丰富的经验,并有着嵌入式处理的教育背景。 Steve做了16年的电路设计工程师,随后他成为Burr-Brown Corp的首批现场应用工程师之一,并成为他们首批前往欧洲、印度和中国的全球客户经理之一。
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • 华盛顿大学首创用人体热能为可穿戴电子设备供电 从健康和健身追踪器到虚拟现实设备,可穿戴电子产品已成为我们日常生活的一部分,但找到持续为这些设备供电的方法是一项挑战。华盛顿大学的研究人员开发了一种创新的解决方案:首创的柔性、可穿戴热电设备,可将体热转化为电能。
  • iFixit 拆解M2 MacBook Ai:没有散热器,但有用途不明的加 日前,iFixit发表了M2 MacBook Air的拆解视频,表示在M2 MacBook Air 中发现了新增的端口,以及加速度计。
  • 小米12S Ultra游戏性能超越iPhone 13 Pro Max?高通骁龙 高通将骁龙8 Plus Gen 1的量产交给台积电之后,其生产技术带来了许多改进,其中之一是提高了游戏性能。众所周知,Apple 的 A15 Bionic 是目前公认的最快的移动 SoC,但这一认知却被小米 12S Ultra 搭配高通骁龙8 Plus Gen 1所颠覆。
  • 给廉价蒸蛋器DIY出智能温控,烧了多个仿真器和USB HUB后 笔者手上有一台型号为ZDQ-514Q1的小熊蒸蛋器,弹跳式自锁开关。由于这台蒸蛋器水烧干了,温度上升,温度开关断开停止加热;待温度降低之后,温度开关重新闭合,重新加热。 不仅不节能,也不安全。因此笔者考虑,能不能给这台“低配”电器DIY出“智能”模式……
  • 无需电池即可运行的健康监测可穿戴设备 由加州大学欧文分校的研究人员发明的一种新型自供电手表式健康监测器可以跟踪佩戴者的脉搏,并与附近的智能手机或平板电脑进行无线通信——无需外部电源或电池。
  • “中国复眼”在技术上和用途上与“中国天眼”相比有何 在已经有全球最大的“中国天眼”的背景下,我国为什么还要打造“中国复眼”?二者在技术原理和用途上又有什么不同呢?
  • 苹果新款Apple Watch Series 8新增内置传感器,可监测体 据最新报道称,由于新的内置传感器,即将推出的Apple Watch Series 8将能够告诉佩戴者是否体温高于正常水平。
  • 小米12s系列发布:首款徕卡品牌、1 英寸摄像头传感器、 继一加牵手哈苏(HASSELBLAD)以及 Vivo 牵手蔡司之后,小米和徕卡在今年早些时候也宣布建立合作伙伴关系。小米在六月底宣布,小米 12S 系列将成为该交易的第一批手机,就在昨日,小米举办了小米12S系列新品发布会,包括小米12S、小米12S Pro、小米12S Ultra三款手机,这三款手机均提供徕卡 Summicron 镜头以减少眩光并提高透光率,同时还提供徕卡成像配置文件。
  • 手动拆解十万元的比亚迪“元”,附详细拆解图 大家是不是对手机、电脑等小型消费电子的拆解已经习以为常了?这次有个券商搞了个大动作,动手拆了一辆市场价值十万元的比亚迪“元”,还撰写了一份详细的拆解报告,刷屏了券商、汽车等行业,网友们也大呼“硬核”。
  • 如何评估3D音频解决方案 沉浸式3D/空间音频,与XR/360视频相结合,给您带来宛若置身于茂密深林的视听体验——飘落的细枝在脚下嘎吱作响,一头鹿向东原跑去,当您的目光追着一只红衣凤头鸟而远去时,您能听见它扇动翅膀的声音。精准的头部跟踪有助于提供逼真的用户体验(UX),了解评估解决方案的关键因素,可以帮助您在不断发展的行业中找到方向。
  • 芯海:信号链MCU新标杆——SmartAnalog系列 6月17日,在AspenCore举办的“全球MCU生态发展大会”上,芯海科技高级产品经理王伟发表了“信号链MCU新标杆:SmartAnalog系列”主题演讲。
  • 波兰网友拆德国产无线烟感,烟雾探测原来是这样实现! 本文将展示具有433MHz RF通信的CC-80型烟雾探测器的内部,我将指出它的各个部件都有什么作用,还将解释它如何检测烟雾。
广告
热门推荐
广告
广告
EE直播间
在线研讨会
广告
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了