用软件开发:机械臂设计保姆级教程

加入星计划,您可以享受以下权益:

产业图谱

很有可能,但前面的路可能还很长。

比如在一个设计的开发阶段,我们肯定需要一个有着很多接口和调试功能的开发板,这样就可以把母板上的IO接口做多一些、调试手段做丰富一些,方便我们的开发。当开发调试结束、需要实际应用和部署的时候,可能就不需要这些额外的调试接口和IO了,留着它们反而会成为方便别人入侵的安全隐患。在这种情况下,就可以在母板上保留必要功能,而FPGA的部分保持不变,这样能快速组成一个可以部署的产品化系统。

同理,当FPGA芯片更新换代的时候,我们其实也可以保持母板不变,只需要更换上面的FPGA核心板就可以了。特别是可以复用很多母板上的资源,项目文件很多也不需要大修和重写,非常方便。

不过我觉得,Kria系列的最大特点,除了这种模块化的板卡设计之外,更多的是它的开发方法。

去年我们玩KV260的时候用的是赛灵思的官方示例,在很短时间之内就完成了一个视觉加速器的开发。那么这次用KR260,我们挑战了一下更高难度,想尝试一下实际开发起来是一种怎样的体验,也想体验一下ROS系统的使用,以及这种开发方式带来的好处。

机械臂的控制,是机器人领域的主要应用之一。我们要实现的功能其实并不是特别复杂,就是通过摄像头定位不同颜色的小方块,然后通过机械臂对小方块进行抓取和分类放置。

我们用的都是现成的机械臂硬件,和稚晖君大佬自研一切肯定没法比。我们这次开发的主要目的,其实就是评估KR260和ROS系统的易用性,看看它是不是真的像赛灵思宣传里说的那么好用。

确定功能之后,就是梳理出具体的开发步骤,主要分以下这么几步:

第一步,配置KR260的Ubuntu环境。我们接下来所有的开发,都要基于Ubuntu操作系统,所以这一步是基础。具体做法可以参考赛灵思给出的一些步骤,链接我都整合在开发文档里,点击文末「阅读全文」就可以看到。不过需要注意的是,这里需要选择支持KR260的Ubuntu版本,不能随便下。这个要到赛灵思的官网,找到Ubuntu Desktop22.04 LTS的映像,确保它支持KR260,然后下载,并且烧录到SD卡里。

sudo snap install xlnx-config --classic --channel=2.x

第四步,搭建机械臂的硬件结构。这一步其实独立于FPGA开发,我们用的是现成的机械臂硬件,主要涉及一些组装和调试的工作。某宝上其实有很多机械臂开发件在卖,但是大家在买的时候一定要注意,问清楚控制接口到底是什么协议。这里我们踩了一个大坑,后面会介绍。

第五步,就是开发实际的功能了。功能主要包含两块,一块是对机械臂动作的控制,一块是通过摄像头进行物体和颜色的识别。对于机械臂动作的控制,是通过动作组来实现的,每个动作组包含初始化、复位、抓取、转移、放置,这五个基本的行为。

我们把每个动作都做成一个函数,然后通过不同函数的组合调用,又组成更高层的函数,来完成不同的行为。这样一级一级下来,呈现给最上层用户的,就是几个可以调用的函数接口。当然最后这些都会用ROS集成起来。

摄像头识别的部分,使用OpenCV来实现。主要的工作有两个部分,分别是颜色识别、以及物体中心坐标定位。每部分的具体操作在下图中所示:

别着急,还有第六步,也就是最后一步,就是把这些分立的功能通过ROS连接起来。相当于前一步我们做的都是一个个砖块,现在可以把砖砌成房子了。除了识别算法和控制算法,ROS还可以直接驱动摄像头,并且通过CV bridge把摄像头的图像传递给识别算法。识别出物体的轮廓和坐标之后,自动判断下一步要执行的动作,然后在ROS里发送给机械臂完成执行。

开发过程肯定不是一帆风顺的,一些搭环境装软件的小问题就不说了,我们在开发过程中遇到的最大问题,其实是KR260目前存在的一些限制。

然后很自然的就想试试其他操作系统,比如我们试过Petalinux,并且成功修改了设备树,实现和I2C的通信,但是问题又来了,Petalinux不支持ROS,也没办法下载大部分依赖的安装包和支持库。我们试用KR260就是为了体验ROS开发来的,所以这条路也走不通了。

所以最后的方案,就是选了另外一个支持USB串口驱动的机械臂,并且直接在Ubuntu+ROS的环境下完成了前面的开发。

事实上,这并不是什么bug,而是一些相关的功能和支持还没完全开放。比如说不定过一段时间赛灵思就更新了Ubuntu版本,添加了对FPGA PL端IO资源的访问支持。也就是说,可以直接从FPGA的可编程硬件部分访问各种外设,这样肯定就方便更多了。

除此之外,一些其他的踩坑总结以及解决方案,也以文档的形式列出来了,感兴趣的朋友可以查看我们的Github链接:

今天这篇文章,带大家一起看了一下赛灵思最新的Kria KR260机器人开发套件的开发全过程。在这个过程中,可以不接触到FPGA的底层硬件内容。如果你是个软件开发者,可以利用这个平台直接进行上层机器人相关软件和算法的开发和加速,这个就大大降低了使用FPGA的门槛。这个过程也很有趣,同时也能慢慢接触到软硬件协同开发的知识细节,并且锻炼这方面的技能。

关于Kria KR260的学习资料,还有这个基于KR260的机械臂控制项目的具体细节、步骤和代码,我们都总结成了详细的文档,获取方式在置顶评论里,想要学习和上手的朋友可以从这里开始。也欢迎点击文末「阅读原文」做一个小调查,有任何反馈也欢迎留言告诉我,祝玩的顺利!

(注:本文不代表老石工作单位之观点)

微信公众号“老石谈芯”主理人,博士毕业于伦敦帝国理工大学电子工程系,现任某知名半导体公司高级FPGA研发工程师,从事基于FPGA的数据中心网络加速、网络功能虚拟化、高速有线网络通信等领域的研发和创新工作。曾经针对FPGA、高性能与可重构计算等技术在学术界顶级会议和期刊上发表过多篇研究论文。

THE END
0.机器人制作开源方案桌面级机械臂本体说明+驱动及控制本文围绕桌面级机械臂展开,介绍了其本体情况,包括整体描述、结构、电路连接、软硬件环境配置及资料下载;还阐述了驱动及控制方法,如总线舵机模式设置、单关节控制、操作杆方案和无线遥控,为机械臂的使用和开发提供了详细指导。 一、本体说明 1. 机械臂整体描述 jvzquC41dnuh0lxfp0tfv8Wqdqzxc‚4ctvodnn4fgvgjn|43549:5B85
1.DummyRobot首页文档和下载迷你机械臂机器人软件简介 Dummy-Robot 是开源的机械臂机器人项目,可以用来做一些人手无法做到的操作,比如软件去抖、运动范围的重映射、力矩强增强等等。 仓库说明 已添加 3D 模型设计源文件。 已添加夹爪硬件设计文件和 LED 灯环 PCB 已添加无线空间定位控制器 PCB 文件 已添加无线示教器 Peak 软硬件工程(作为 submodule) 已添jvzquC41yy}/q|hjkpg/pny1r1jvov~/tqhpv
2.ABB双臂机器人最全入门介绍robotware和robotstudio的区别Robotware主要是用于实际机器人控制器上的软件,负责与硬件交互和执行实际任务。 RobotStudio是用于编程、仿真和调试的工具,帮助用户在虚拟环境中开发和优化机器人程序。 同时ABB还配备了FlexPendant,可以理解为是一个自带的小电脑,具有友好的人机交互界面,如下图所示: 二、ABB的基本构型参数 ABB的两个七jvzquC41dnuh0lxfp0tfv8gwnnkuu}ftv1gsvrhng1jfvjnnu1757>;84:;
3.机器人制作开源方案桌面级机械臂运动控制机器人制作开源方案 | 桌面级机械臂--运动控制 1. 调整总线舵机的模式 实现思路: 机械臂包括转台、大臂、小臂三部分,先设置好总线舵机每个ID的工作模式。下图是计划给舵机的各部分设置的ID号: 接下来为各部分设置相应的舵机模式(见下表),并在程序里进行编程设置。jvzquC41dnuh0lxfp0tfv8Wqdqzxc‚4ctvodnn4fgvgjn|4354;13B65
4.KEBA工业机器人示教编程·IOA在线帮助指导手册·看云注意:(首次运行或更换机械臂种类才需要下载,已经使用过该机器人则不需要重复下载) 6)开启虚拟示教器,双击桌面上已经安装完成的KeMotion3 03.12a图标选择“KeMotion TeachView T70Q TeachView_3.14a”图标,运行虚拟示教器。 7)运行虚拟示教器,运行之后会弹出一个命令行窗口,等待一段时间会运行虚拟示教器界面,在界面中jvzquC41yy}/mjsenq{e0ls1jcuyw‚fq1kubqu5314784A66
5.梅卡曼德机器人工业级3D视觉相机工业机器AI+3D视觉软件梅卡曼德致力于用 AI+3D 技术加速各行业智能化升级。经多年潜心研发,梅卡曼德现已形成包括 Mech-Eye 工业级 3D 相机、Mech Vision 机器视觉软件、Mech-DLK 深度学习软件、Mech-Viz 机器人编程软件在内的完整产品链。可应用于无序物体抓取、高精度定位、装配、工业检测 / 量测、自动生成轨迹等典型场景 jvzquC41yy}/{~s::0ipo8utqf{dv8:5574ivvq
6.基于microbit的自制机械臂|开源机器人——“搬呀”DF创客社区本次大会中旺仔爸爸制作的可编程开源机器人有幸在现场参与了展示 会议结束后,旺仔爸爸就制作了开源机器jvzquC41oe4eh{tdqv4dqv3ep1zitnff/571395/3/7/j}rn
7.机械臂的现状与未来行业动态现在一个解决办法(DoBot所采用的方案)是用“示教”的方法解决,第一步,操作者抓着机械臂的末端,放到期望位置上,并在控制台按下操作按钮记录下此时机械臂的位姿,按顺序记录的一系列位姿随后用作机器人编程的参考点,例如捡——放任务中的重复性动作。机械臂会记忆住关节的角度和位置,并自动编程,然后再重复实现。 jvzquC41yy}/oohcf0ipo8kzwt0fxsivco05?>;70nuou
8.NANO机械臂AI人工智能视觉识别ROS编程机器人机械手臂基于Jetson Nano开发的 AI视觉机械臂, 开发近40多个手把手教学项目 案例, 从简单的机械臂基本运动、正逆解方程来进行定点抓取、搬运及 码垛, 结合OpenCV 图像处理到机械臂进行颜色追踪、人脸追踪、颜色 识别抓取和AprilTag标记识别, 从人机互动、基于图像识别的手势识别 jvzquC41yy}/nxgqtqhpv7hqo1vsqmzevktgq8724:=7;7mvon
9.机器人教程网机器人教程网提供了PDPS、Robcad、Delmia、Roboguide、MotosimEG、IGRIP、Nachi、RobotStudio等仿真软件破解操作视频教程与图文教程;工业机器人品牌包括:FANUC发那科、NACHI那智、kuka库卡、ABB机器人、MOTOMAN安川、COMAU柯马、Kawasaki-川崎、PANASONIC-松下、OTC等机器jvzq<84yyy4sqktvle4dqv4
10.大象myCobot机械臂6轴机器人ROS视觉识别少儿编程myCobot 由大象机器人和M5stack联合出品,是世界最小最轻的六轴协作机器人,可根据用户的需求进行二次开发,实现用户个性化定制,是生产力工具也是想象力边界的拓展工具。 myCobot 自重850g,有效载荷250g,有效工作半径280mm;体积小巧但功能强大,既可搭配多种末端执行器jvzquC41jgkd0lfjg0kew7hp1eunrjs{1rxpf~hv16859<3jvor
11.工业机器人中最常用的机械臂有哪些?行业动态资讯什么是工业机器人手臂? 工业机械臂是一种采用机器人技术编程的工具,能够自动执行任务。它的结构灵活、适应性强,可以模仿人类的某些能力。这些机器也被称为机械臂,由电机驱动,可以长期重复执行已编程的任务。 除了灵活和自适应的关节外,机械臂通常还包括传感器、视觉系统、软件和运动控制器,使其具有更大的运动范围和自jvzquC41yy}/hxwmnkluujkgv{4dqv3ep1tfy|4fgvgjn872456:1:>630nuou