广告

华为AI算法工程师把自行车做成了自动驾驶 ,一个人完成一个团队的项目

2021-06-09 EDN China 阅读:
近日,EDN小编关注的一位B站up主在鸽了好几个月之后,终于更新了,而这次更新的确实一个硬核项目:把自行车做成自动驾驶!并且一个人完成了一个团队的项目……

近日,EDN小编关注的一位B站up主在鸽了好几个月之后,终于更新了,而这次更新的确实一个硬核项目:把自行车做成自动驾驶!SzRednc

SzRednc

截止至EDN发文前,该视频播放量高达158.5万。up主表示这个项目应该他最近做的最硬核的一个了,研发过程断断续续花了四个月(虽然基本只有周末有空),期间遇到非常多的坑,视频时长原因有些内容并没有放到视频里,看了下素材已经拍了将近200G了...SzRednc

流量够用的朋友,可以直接点开视频看细节:SzRednc

SzRednc

骑车摔伤后的突发奇想

稚晖君表示,他前阵子骑车由于下雨水太深,不小心摔倒受伤了。作为一个掌握了技术密码并且永远头铁的野生钢铁侠,是时候着手设计一个自行车增稳装置了。SzRednc

SzRednc

 SzRednc

此外,正值自动驾驶爆发时期,而稚晖君正好本职工作又是做AI的,所以一个很有意思的想法就出来了:不如就做一辆自动驾驶自行车吧!SzRednc

毕竟如果自己不能跑,那凭什么叫它自行车呢?SzRednc

把自行车做成自动驾驶有多硬核?

在视频中,稚晖君向我们介绍了他将自行车改装成自动驾驶的大体思路。SzRednc

首先,得让自行车跑起来,与四个轮子的汽车不同,自行车是个欠驱动系统,不进行控制的话,连站稳都难。为了让自行车平稳地跑起来,他设计了一套复杂的自动控制系统;SzRednc

其次,为了去掉车上的工具人,他给车装了一套传感器组成的感知网络以及算力足够强大的芯片作为大脑;SzRednc

最后,他还在这些硬件基础上开发,实现一套感知和控制算法,俗称“注入灵魂”。SzRednc

SzRednc

他将用之前买的一部“死飞”进行改造。SzRednc

SzRednc

要实现这套装置,首先需要设计。SzRednc

在这一阶段,稚晖君使用 CAD 进行建模,得到了一辆虚拟的“死飞”自行车,之后再慢慢往上添加细节。SzRednc

SzRednc

最终的改造方案如下:SzRednc

SzRednc

驱动结构方面,车子安装了两个巨大的无刷电机以及一个控制龙头的舵机,用于驱动车子运动并保持静止和运动时的平衡;SzRednc

传感器方面,车子搭载了一个 RGBD 的深度相机、加速度计和陀螺仪以及一个激光雷达,用于探测周围环境和车的状况;SzRednc

动力方面,电池使用的是 6S 的航模动力锂电池,续航 2~3 小时;SzRednc

控制方面,座椅的后方搭载了主控计算模块。SzRednc

SzRednc

图纸设计完成,接下来就是软硬件的实现了。SzRednc

为了获取硬件部分所需的零件,稚晖君选择了 3D 打印和机床加工相结合的方式(有个家里有厂的朋友),前者适合打印强度要求不高的塑料零件,后者用来加工固定电机的金属零件。SzRednc

SzRednc

接下来到了第二个部分,车子的机器大脑——计算单元。SzRednc

车子的计算单元被分为低算力、低时延、运行实时系统的“小脑”和高算力、高时延、运行非实时系统的“大脑”。SzRednc

SzRednc

前者用于控制车身,用 ESP32 来实现;后者用于感知、思考和决策,用到了昇腾的边缘计算芯片昇腾 310。SzRednc

为了将两部分整合到一起,稚晖君设计了一个四层的载板。PCB 打样之后,他手工将其焊了出来。“大脑”和“小脑”是通过总线相连的。此外,他还在软件上实现了一套 RPC 框架,让它们可以方便地进行通信。SzRednc

SzRednc

“小脑”的框架是基于 FreeRTOS,主要是实现传感器的数据处理以及电机的控制算法,还有一个小屏幕实时显示一些参数:SzRednc

“大脑”的软件框架则要复杂很多,除了基于昇腾的整个 AI 栈之外,稚晖君还在系统中使用了 ROS 框架(机器人领域常用框架,集成了大量的工具、库、协议,提供类似 OS 所提供的功能,简化对机器人的控制),后面的消息分发、业务串流、SLAM 等的实现都是基于 ROS 开发的。SzRednc

“脑子”有了,电路还缺一个“心脏”,也就是驱动器。SzRednc

稚晖君曾经在去年 9 月份展示过他设计的一个超迷你 FOC 矢量控制驱动器,那个项目就是为今天的自动驾驶自行车所准备的。虽然个头还没有巴掌大,但这个驱动器可以实现两路共 100A 的无刷电机 FOC 控制,同时还驱动了前面的 60KG 舵机以及一个散热风扇。SzRednc

SzRednc

把以上结构零件和电路全部整合起来,一辆自动驾驶自行车就诞生了。SzRednc

不过,这个自行车目前还没有“灵魂”,需要通过运动学、动力学建模等步骤来注入灵魂。SzRednc

稚晖君表示,这个车子的控制代码中有 50 多个重要参数,比如控制周期、反馈矩阵、PID 增益等。SzRednc

这些数字全部都要得到合理设置,才能使系统进入稳定且快速收敛的状态。电机功率、飞轮质量等物理参数的设置则需要有准确的数学模型来指导。SzRednc

在得到模型之后,为了进一步验证模型的准确性,稚晖君使用了游戏引擎 Unity 构建一个真实的物理环境进行仿真,给小车赋予真实的质量及重力,然后将控制算法的计算结果可视化显示出来。SzRednc

SzRednc

然后把仿真的结果迁移到现实环境。SzRednc

稚晖君在姿态系统中使用的是LQR控制器,方向控制使用了经典地PID,传感器则是对加速度计和陀螺仪数据使用了二阶的巴特沃斯滤波器之后,再通过卡尔曼滤波进行数据融合。SzRednc

SzRednc

经过漫长的参数调整之后,控制算法终于收敛到了完美的效果。SzRednc

至此,“能动”的目标就完成了,接下来就要引入AI实现自动驾驶了。SzRednc

前面提到,这个自行车搭载了深度相机,再结合一些 AI 算法,车子就可以实现自动避障、自动跟随等功能。SzRednc

SzRednc

此外,车子搭载的激光雷达还可以用来完成路径规划,激光雷达通过测量激光发射到反射回来所消耗的时间,乘以光速,就可以获得目标的距离位置,由此360度成像就能获得比摄像头更可靠的深度信息,将这些数据用于SLAM图与路径规划,最后就可以实现让车子自主探索环境。SzRednc

SzRednc

就这样,稚晖君一个人完成了一个团队的项目。SzRednc

不过,稚晖君表示由于开发时间有限,这次项目的改造只是实现了非常基础的自动驾驶功能。SzRednc

稚晖君表示还有很多可以改进的地方,如龙头的传统结构设计得不够合理,如果换成谐波减速伺服电机驱动,那么行驶的稳定性可以大幅提升;又比如受限于整车的功率,这套系统还不能载人,但如果换成电动车就不一样了。SzRednc

SzRednc

稚晖君表示,设计这个项目的想法很早就有了,起因是看到清华大学当时设计出一款自行车,还登上了《Nature》杂志的封面,因此想能不能复现一个类似的项目。SzRednc

SzRednc

因此稚晖君给这个项目起名为XUAN。SzRednc

SzRednc

对比,评论区有网友留言表示:作为清华那个自行车项目的参与者说明一下。。那篇 Nature 文章并不是因为这个自行车本身而上的 Nature ,而是因为自行车上的那款芯片。那个自行车实验更多只是作为一个展示的 Demo 用来证明该芯片可以跑各种适用于不同场景下的算法。选取自行车一是因为“智能自行车”本身就是一个比较适合搭载多种不同小算法来实现多种功能的项目,本身这个概念也比较吸引眼球,再就是当时自动化系之前就有一辆改装过的助力自行车,能省去不少前期工作。所以侧重点还是和 UP 有区别的。但也正因为亲历过推着这个车在操场上跑实验的经历才知道 up 的工程能力有多强,这真的是一个非常考验软硬件开发能力的事,佩服。SzRednc

SzRednc

最后,稚晖君表示,为了方便大家学习,稚晖君还开源了项目的硬件部分,有兴趣复现的同学可以去 GitHub 下载相关资料。SzRednc

项目地址:https://github.com/peng-zhihui/XUAN-BikeSzRednc

up主简介:稚晖君(AI算法工程师/野生钢铁侠/Arduino版主/脑洞载体)

他是华为天天才少年项目中的一员,他的个人称号为“野生钢铁侠”,希望跟钢铁侠一样在山洞中打造出钢铁战衣,由于在B站发布了一条自制硬币大小的AI电脑爆红网络,他给这台电脑也取名贾维斯。SzRednc

他叫彭志辉,2018 年研究生毕业于电子科技大学,曾就职于 OPPO 研究院 AI 实验室,后通过“天才少年计划”加入华为,职位是 AI 算法工程师,目前正致力于自研深度学习推理框架与移动计算平台的异构加速相关技术。SzRednc

在自行车项目之前,稚晖君还设计、制作过“B 站最强小电视”、“电子墨水屏 NFC 智能门禁卡”等大家耳熟能详的创意作品,有兴趣的同学可以进入稚晖君主页查看。SzRednc

稚晖君 B 站主页链接:https://space.bilibili.com/20259914/videoSzRednc

责编:DemiSzRednc

  • 加工中心做的,开啥模具?
  • 一个人?没有团队?
  • 华为说不造车,谁信啊?
  • 抢我自行车把
  • 膜拜
  • 配件哪买的?配件的模具花了好几万吧
本文为EDN电子技术设计 原创文章,禁止转载。请尊重知识产权,违者本司保留追究责任的权利。
EDN China
暂无简介...
  • 微信扫一扫
    一键转发
  • 最前沿的电子设计资讯
    请关注“电子技术设计微信公众号”
  • 酒店房间装有摄像头?防偷窥神器是怎样检测出的? EDN小编在某科技类微信群看到了一条关于“酒店马桶内装有摄像头,用防偷拍神器可以检测到”的短视频,群里的科技大拿们对此展开了热烈讨论。有人提问说,这到底是摄像头还是智能马桶的红外感应器?有人说,看来智慧家居给偷拍产业提供了隐藏。还有人认为,这很可能是女主播为了带货拍的广告视频……那么事情的真相是什么?
  • iPhone 14 Pro 将采用“药丸+圆孔”双孔设计 传闻称苹果计划在今年推出的iPhone 14系列的部分机型上,更改刘海屏设计,iPhone 14 Pro和 14 Pro Max 将采用药丸形切口设计,可容纳Face ID元素和自拍相机的第二个孔。
  • 台积电、联电校招万人,业内人士:行业薪资达十年来最高水 近日,台积电、联电开启了校招活动,其中,台积电预计招募超过8000名新员工、联电预计招募 2000 名人才,硕士毕业工程师平均年薪上看200万新台币,约合人民币45万元。晶圆厂们大手笔扩招源于晶圆厂们2021年的“疯狂”扩产。
  • 黑客“开源”英伟达后续:开源三星源代码,下一个是高通 此前英伟达遭到了黑客组织的网络攻击,导致超过1TB的数据泄露,由于与英伟达交涉不畅,黑客组织现在正试图将窃取的信息出售给第三方。与此同时,黑客又“帮”三星把代码给开源了,顺便还把高通也捎上了。
  • 被二十余家科技巨头“制裁”,俄罗斯反击:停供美国火箭发 随着俄罗斯与乌克兰冲突的持续升级,以美国为首的北约成员国和欧洲国家纷纷对俄罗斯宣布制裁,不少科技行业也加入了制裁俄罗斯的队伍。如英特尔、AMD断供,苹果在俄停售,美国社交平台“禁言”俄罗斯媒体、甲骨文、SAP等云巨头停服俄罗斯等,但值得一提的是,俄罗斯也进行了反击。不仅停止了向美国交付火箭发动机,终止两国在国际空间站的实验合作,还启用本国互联网 Runet。
  • PCIe 5.0连接器线缆详细信息曝光,最高支持600W 日前,Twitter 用户@momomo_us透露了进一步研究 PCIe Gen 5.0 连接器标准的图片和内容。根据泄漏者 @momom_us 发布的 PPT显示,即将推出的 PCIe Gen5 显卡标准官方名称为“12VHPWR”,负责定义 ATX 规格的英特尔数据显示,该接口将支持 4 种电源配置,分别为 150W、300W、450W、600W。
  • 英特尔、AMD、Arm等九大企业宣布UCIe开放标准,推动Chip 英特尔、AMD、Arm 和所有领先的代工厂商齐聚一堂,包括高通、三星、台积电、日月光,以及Google Cloud、Meta、微软,宣布他们正在为小芯片互连制定一个新的开放标准Universal Chiplet Interconnect Express (UCIe),希望以UCIe 1.0规范建立芯片互连、兼容运作,让更多业者能依照此标准打造新款处理器,并且能配合不同微芯片建构差异化设计。
  • 英伟达被黑客组织勒索,网友从泄露数据中挖出核心机密信 NVIDIA近日被南美黑客组织勒索攻击一事引起了网友的关注。不同于竞品中的AMD FSR采样技术和英特尔XeSS采样技术,英伟达之前从未公布过DLSS的源代码,很不愿意将这个大量挣钱的独有技术给开源了。部分获得了这些数据的人已经开始了对代码的分析、并试图弄懂DLSS的工作原理。
  • 联发科超越高通,成美国Android手机芯片首选 据EDN电子技术设计报道,联发科在其天玑 8000 系列简报中报告称,在美国销售的所有Android手机中,联发科芯片占比排名第一,并引用了IDC 2021 年第四季度的统计数据。
  • 从技术角度分析,GaN和SiC功率器件上量还欠什么? 氮化镓(GaN)和碳化硅(SiC)这两种新器件正在推动电力电子行业发生重大变化,它们在汽车、数据中心、可再生能源、航空航天和电机驱动等多个行业取得了长足的进步。在由AspenCore集团举办的PowerUP Expo大会上,演讲嘉宾们深入探讨了包括GaN和SiC在内的宽禁带(WBG)器件的技术优势以及发展趋势。
  • 研发转至FAE(现场应用工程师),是否远离技术了?有前途吗? 前几日,EDN小编在浏览知乎的时候,发现了一个有趣的话题《FAE有什么发展前景吗?》,被浏览次数接近九万次。小编总结了一下题主的提问:FAE是否远离技术了?未来是否有发展前景?
  • 小米发布“小感量+磁吸”无线充电预研技术,最高支持50W 据EDN电子技术设计报道,昨日,@小米手机 官微宣布,正式发布小感量+磁吸”无线充电预研技术,其磁吸无线充电功率最高可达50W,损耗降低50%。据悉,该技术与传统无线充电方案采用大感量线圈不同,小米的小感量无线快充技术方案采用小感知线圈去感应发送端能量。
广告
热门推荐
广告
广告
EE直播间
在线研讨会
广告
广告
面包芯语
广告
向右滑动:上一篇 向左滑动:下一篇 我知道了