「天才少年」稚晖君调戏机械臂！加上AI视觉，2小时学会抓螺母

↑ 点击 蓝字  关注极市平台

来源丨新智元

编辑丨极市平台

极市导读

 

还记得上次那个全栈自研给葡萄缝针的钢铁侠机械臂Dummy吗？这次，华为「天才少年」稚晖君用机械臂实现精准抓取螺母，从模型训练到部署只花了2个小时。>>加入极市CV技术交流群，走在计算机视觉的最前沿

还记得上次那个「全栈自研」的给葡萄缝针的钢铁侠机械臂Dummy吗？

 

 

国庆最后一天，知名「硬核」up主稚晖君展示了一款自己从零到一设计的小型高精度六轴机械臂Dummy。

 

视频一出，直接冲到B站排行榜前十，打开弹幕，满屏都是惊叹号。

 

 

「瑟瑟发抖」、「保存=会做」、「他竟然在试图教会我们」、「我看不懂，但大受震撼」，这些都代表了网友对这个机器人项目的震惊。

 

 

没想到，时隔一个半月，华为天才少年稚晖君的「机械臂Dummy」系列又更新了！

Dummy学会抓螺母

这次，稚晖君用Dummy做了个简单的AI视觉抓取demo，让机械臂Dummy学会了用机械臂抓取螺母。

 

 

机械臂好不容易将螺母放上去，又被稚晖君拿了下来。

 

 

怎么说呢，调试不等于调戏啊！

 

 

稚晖君介绍，目前用Dummy做了个简单的AI视觉抓取demo，从模型训练到部署只花了2个小时。

 

后面会把迁移学习功能加入上位机DummyStudio中，最终想实现的效果就是，可以用少量数据标注就自动生成端到端的模型来检测自定义物品。

 

同时用图形化的方式调用各种算法模块，配合后面的Dummy青春（低成本）版，应该可以用来做很多有趣的事。

 

有网友表示，「放一张螺母照片会怎样」？

 

 

真是应了那句话：「工程师最苦恼的就是你永远想不到客户会怎么使用你的产品」。

「钢铁侠」机械臂如何造

  

还是在一个月前，这台机械臂首次亮相。在给一颗葡萄完成包扎手术后，让许多网友惊呆！

 

 

其实，稚晖君想要打造的机械臂，是具备多种交互方式的。

 

这两只小爪子就叫做「力反馈夹爪」，不仅可以夹螺母，用来夹薯片也是不错的选择。

 

 

那么，这个机械臂是如何打造的？

 

首先是驱动方案设计，要知道电机，减速器，驱动器是制作机器人三大核心部件。

 

在电机的选择上，稚晖君主选步行电机，优点是精度比较高，缺点是高转速下力矩比较小。

 

 

为了解决这一问题，为电机配备一个减速器必不可少。有了减速器就可以降低速度转速，成倍增加输出力矩。

 

 

目前市面上常用的都是行星减速器，稚晖君在此项目中选择了工业机械臂里最常用的谐波减速。

 

电机和减速器确定后，稚晖君设计了一个步进电机的一体闭环驱动，以保证驱动的精度。并且体积也是最小的。

 

 

第二步便是结构设计，仅设计这张图就画了150个版本，最终的画风如下：

 

 

可以看到，这个机械臂一共使用了6个电机，6个谐波减速器。

 

机身主体采用的是铝CNC加工，装饰主件使用3D打印制作，还有所有电路都集成在主体上。

 

值得一提的是，机身的涂装特地采用的是鲜艳的红色，稚晖君说：「这是因为他希望自己的机器人一定要是中国红的颜色」。

 

 

接下来便是机械臂的电子系统。电路系统还是相当复杂，因为涉及到了电源模块、电机驱动，还有计算模块，通信系统等等。

 

稚晖君介绍这套机械臂用了12多个各种型号的MCU，并在机体上搭载了Wi-Fi、蓝牙等多种无线能力。

 

 

在电路方面，最主要的便是主控制器（采用冗余设计）和电机伺服驱动器（支持CAN总线&功率机联）。

 

控制器相当于机械臂的「小脑」，用来操控机械臂的动作、来实现各种功能。

 

最后就是空间定位装置了，也就是机械臂的「眼睛」，让机械臂能够看见、并操作需要完成的任务。

 

在这里便用到了双目视觉算法、AHRS系统和力传感系统，稚晖君通过双目识别算法让AI实现姿态估计类似操作。

 

经过一系列的组装，最后的效果就是这样，精度也十分令人满意！

 

 

而且，有了双目识别算法的加持，机械臂的动作就可以用手柄进行实时的操控，机器人也可以模仿人类的动作了。

 

 

它可以达到很多人手无法达到的效果，比如，软件去抖，运动范围的重映射，力矩增强。

 

更重要的是，这台Dummy是支持远程操控的，这下，可想象的空间就非常大了！

 

 

虽然现在看着缝的是葡萄皮，但Dummy配合上手术设备，这有可能就是未来远程手术室的雏形！

网友热评

有网友评论道：「太有感觉了，又想起了去年的英特尔杯，整个队伍折腾了好几个月，用的英特尔AI-Box和RGB-D深度相机，最后勉强实现了UR机械臂抓取大物品（而且经常抓不稳），摆放到指定位置，也能拿到国二。稚晖君机械臂自己做的，加上这精度，估计单单抓取这项功能就能稳国一了。」

 

 

「你懂的越多，才知道稚辉君有多强大。」

 

 

还有网友说：「光AI视觉这块就搞了大半年，更不要提造机器人了。」

 

 

稚晖君的Dummy机械臂未来还会添加哪些炫酷的功能，Dummy青春（低成本）版又是否能量产呢？

敬请期待稚晖君的下一条视频吧！

参考资料：

https://www.bilibili.com/video/BV1xY41147oh

如果觉得有用，就请分享到朋友圈吧！

△点击卡片关注极市平台，获取 最新CV干货

公众号后台回复“transformer”获取最新Transformer综述论文下载～

极市干货

课程/比赛： 珠港澳人工智能算法大赛 ｜保姆级零基础人工智能教程

算法trick ： 目标检测比赛中的tricks集锦 ｜ 从39个kaggle竞赛中总结出来的图像分割的Tips和Tricks

技术综述： 一文弄懂各种loss function ｜ 工业图像异常检测最新研究总结（2019-2020）

# CV技术社群邀请函 #

△长按添加极市小助手

添加极市小助手微信（ID : cvmart4）

备注：姓名-学校/公司-研究方向-城市（如：小极-北大-目标检测-深圳）

即可申请加入极市目标检测/图像分割/工业检测/人脸/医学影像/3D/SLAM/自动驾驶/超分辨率/姿态估计/ReID/GAN/图像增强/OCR/视频理解等技术交流群

每月大咖直播分享、真实项目需求对接、求职内推、算法竞赛、干货资讯汇总、与 10000+来自港科大、北大、清华、中科院、CMU、腾讯、百度等名校名企视觉开发者互动交流~

觉得有用麻烦给个在看啦~