免费外链网站seo发布,十大电商平台,江宁区住房与城乡建设局网站,数字币网站开发推荐#xff1a;使用 NSDT场景编辑器 助你快速搭建可二次编辑器的3D应用场景 事实上#xff0c;整个比赛都致力于这个想法。RoboCup小型联盟#xff08;SSL#xff09;视觉停电技术挑战赛鼓励团队“探索本地传感和处理#xff0c;而不是非车载计算机和全球摄像机感知环境的… 推荐使用 NSDT场景编辑器 助你快速搭建可二次编辑器的3D应用场景 事实上整个比赛都致力于这个想法。RoboCup小型联盟SSL视觉停电技术挑战赛鼓励团队“探索本地传感和处理而不是非车载计算机和全球摄像机感知环境的典型方法。来自巴西累西腓伯南布哥联邦大学的学生 João Guilherme、他的导师 Edna Barros 和其他 SSL 队友建造了一个由 NVIDIA Jetson Nano 开发套件提供支持的全向机器人用于自主执行足球任务。
该团队用单目摄像头构建了他们的全向机器人可以自主执行以下任务
地方化足球检测和抓取坐标计算将球传给其他团队机器人空门得分
该团队使用AI软件管道构建了机器人平均处理速度为30 FPS硬件仅消耗约10.8 W的功率。
机器人的前部有一个踢腿装置是一个四轮全向机器人。图 1 显示了机器人的几何形状。 图1.由 NVIDIA Jetson 纳米开发套件提供支持的全向机器人的运动能力可自主执行足球任务
“我们通过三项足球任务评估我们的系统抢球、进球和传球分别实现了 80%、80% 和 46.7% 的成功率”该团队在迈向自主机器人杯小型联盟机器人中解释道。
在比赛期间球队将使用场外计算机执行大部分计算接收球的位置并收集场地几何信息和裁判命令。比赛在11个B级和180个A级机器人的团队之间进行机器人通过RF通信以最小的带宽接收导航命令。机器人的直径和高度限制在150毫米B分区和毫米A分区因此得名小尺寸联盟。
SSL RoboCup比赛包括四个阶段
在球场上的某个地方抓住一个静止的球空门带球得分将机器人移动到特定坐标打进一个间接进球需要两个机器人
此外这一挑战要求机器人检测野外物体估计其位置计算导航路径并记录过去的轨迹。
“SSL匹配是高度动态的环境具有极其资源受限的机器人需要解决方案考虑尺寸功耗准确性和处理速度权衡。这项工作提出了一种架构使这些机器人能够自主执行基本的足球任务也就是说无需接收任何外部信息“Guilherme和他的队友在迈向自主RoboCup小型联盟机器人中表示。
项目硬件
该团队在其项目中使用了以下硬件
Jetson 纳米开发套件用于执行嵌入式视觉和决策全向机器人罗技 C922 摄像头提供单目视觉惯性传感器用于实现测程估计STM32F767ZI微控制器单元MCU用于接收来自Nano的目标相对位置和导航标志并使用惯性里程计执行低级控制和轨迹估计 图2.足球机器人的AI检测流水线及运动规划
有关所用硬件的更多信息请参阅 RobôCIn 2020 团队描述文件。
技术挑战
在比赛的视觉停电挑战赛中获胜的机器人必须能够完成各种基于足球的技能包括抓住一个静止的球在空球上得分移动到特定的坐标以及得分一个间接进球传给另一个机器人。
机器人必须能够仅使用嵌入式传感和处理来执行这些技能。这项挑战没有高度限制因此该团队在他们的典型机器人顶部增加了一个机载摄像头Jetson Nano和一个电源板。 图3.该团队为视觉停电挑战赛改装的足球机器人左和他们原来的机器人右
此外这一挑战要求机器人检测野外物体估计其位置计算导航路径并记录过去的轨迹。SSL足球比赛利用外部摄像头和机外计算机来感知环境并向机器人发送命令。
根据研究人员的说法SSL Vision架构“存在诸如相机的视野颜色分割软件延迟和通信中断等限制迫使团队开发处理复杂条件的解决方案。例如比赛中的一个常见问题是球遮挡当机器人在相机图像上的投影与球重叠时就会发生这种情况。另一个问题是球和机器人的位置会闪烁偶尔不会检测到或错误地检测到它们。
在SSL竞赛中机器人和球分别达到3.7米/秒和6.5米/秒的速度导致快速移动的游戏需要高吞吐量的解决方案。此外尺寸限制加上使用电池作为电源要求解决方案具有低功耗。此外在比赛中进行精确的长距离踢球和传球需要准确的位置估计。
该团队还指出了精确电机控制的重要性因此机器人可以在足球场上移动并保持其测量位置准确。该团队需要一种方法来降低机器人对其位置的内部理解与其实际物理位置的分歧率。有关更多详细信息请参阅迈向自主机器人杯小型联盟机器人。 图4.足球机器人的摄像头有助于物体检测以及用于决策和路径规划的视野
项目软件和人工智能
该团队使用OpenCV2以及校准和姿势计算技术来提取单眼相机固定在机器人上的“内在和外在参数”。他们使用SSD MobileNet v2来检测相机帧上物体的2D边界框。他们还使用了一个程序将线性回归应用于SSD MobileNet创建的边界框坐标用于估计预先校准的相机参数。这将在场上分配对应于对象底部中心具有对象与相机的相对位置的点因此也分配给机器人。
结果
该团队对他们的机器人在今年的挑战中的表现感到满意。亮点包括
抓住一个静止的球 在 12 次尝试中的 15 次中机器人能够在球接触运球器时停止成功率为 80%。进球 12次跑动中有15次打进一球。通过机器人在 7 次尝试中的 15 次中传球成功率为 46.7%。
访问 机器人世界杯 2023 结果以查看完整的结果列表。该团队自 2019 年以来一直参加 RoboCup 小型联赛并在 2022 年赢得了他们的第一个世界冠军B 级。他们目前是三届拉丁美洲冠军。RobôCIn 2023 年 RoboCup 小型联赛扩展团队描述文件介绍了该团队在 2023 月下旬在法国波尔多举行的 RoboCup 中对小型联赛 SSL B 级冠军的项目所做的改进当时他们获得了第一名。 图5.机器人抓住静止球左并进球右
未来计划
Guilherme分享了他们的团队在比赛中遇到的挑战的一些见解以及未来赛事的改进机会。他指出大多数失败是由于来自场外物体的假阳性检测。“我们正在研究一种检测场边界并应用掩模丢弃这些物体的解决方案”他说。
团队需要更快的对象检测解决方案。“尽管到目前为止我们能够执行基本技能但对于SSL环境来说30 FPS的处理速度仍然很低。在主要比赛中相机通常以 70 FPS 的速度运行“他说。
机器人的技能仅使用检测到的物体的相对位置来实现也就是说没有机器人在现场的自我定位知识。“我们相信这些信息可能有助于优化我们在足球任务中的表现同时也使我们能够避免处罚”Guilherme指出。例如机器人不应进入守门员的区域。“我们正在研究一种基于蒙特卡罗定位MCL的自我定位算法并将在未来几个月内分享。
该团队计划在未来为机器人系统添加更多功能例如场线检测、定位算法和路径规划他们将努力优化系统的每个部分以满足这些需求。
此外该团队继续研究检测场边界和线以及估计机器人自我定位的解决方案。他们还计划用Jetson Orin Nano取代Jetson Nano这样他们就可以用机器人实现更快的处理速度。这种升级应该有助于球队在联赛中更有效地竞争。
要了解有关团队原始项目的更多信息请访问开发人员论坛和 GitHub。探索 Jetson 社区项目从机器人开发人员同行那里获得更多想法和灵感。
原文链接NVIDIA Jetson 项目机器人足球比赛 (mvrlink.com)
