2025创新大赛KV_1280×500_228kb

智慧之眼—基于视觉的机器人关节位置提取算法设计

背景 

 在人工智能飞速发展的今天,赋予机器人“理解”自身和周围环境的能力,成为了突破技术瓶颈的关键。具身智能(Embodied Intelligence)应运而生,它强调智能体通过身体与环境的动态交互实现自主学习和进化,而视觉则是感知环境的关键能力。 

传统的视觉技术往往依赖于昂贵的传感器和复杂的校准程序,本次ABB杯智能技术创新大赛希望参赛者突破传统思维,开发一种基于视觉的算法,能够从普通摄像头捕捉的机器人运动视频中,提取出机器人的运动姿态(各关节的位置)。由于机器人的运动状态呈现出复杂性和多样性,且不同的拍摄视角和设备对同一目标也可能产生不同的结果。因此,算法的准确性和稳定性就尤为重要,这将赋予机器人“看见”自身运动和周围动态环境的能力。 

ABB机器人在中国深耕30年,我们希望站在科技的前沿,引领智能制造的未来,借助ABB杯智能技术创新大赛这一平台,让参赛者充分发挥想象力和创造力,探索机器视觉与具身智能的无限可能,共同推动机器人技术的革新与进步。  


如组队参赛,请队长填写注册报名页。队长报名成功后,进入“成员信息”页面添加组员及导师。点击 我要报名或扫描下方二维码报名参赛

 

参赛对象

  •  中国大陆及中国香港、澳门、台湾地区的各高等院校全日制在校生及中职、高职学生(含海外高校留学生);

  •   参赛者可以个人或团队的方式参加比赛。每支队伍最多3名队员,同时须配备至少1名导师;

  •   组队参赛者每组须选出一名队长,负责团队报名和提交解决方案。

任务说明

  • ABB将为参赛者提供样例集和验证集。 

  • 样例集包含两段不同视角下的六轴机器人运动视频(30帧/秒)以及各关节对应的真实位置信息,其中既有简单的单轴运动,也有复杂的多轴联动。 

  • 初赛提供两个验证集,分别为两段六轴机器人运动视频(30帧/秒),验证集一是单轴运动,占初赛总分的70%;验证集二是多轴联动,占初赛总分的30%。 

  • 参赛者需提出一种基于视觉的算法模型,精准提取视频中机器人各关节的位置信息,并将数据储存在ABB提供的Excel模板中。 

  • ABB将会对参赛者基于初赛验证集得到的位置信息与机器人真实的位置信息进行比对,根据结果的准确性进行评分。  

  • 决赛与初赛使用同一型号机器人,生成不同的验证集,参赛者需要在现场使用算法提取视频中机器人各关节的位置信息。 

  • 赛题不限制开发工具和算法,参赛者可使用机器人仿真环境(如 ROS gazebo 等开源软件、ABB RobotStudio 等商用软件)或物理环境(拍摄机器人运动视频)扩充训练集及调整优化算法。 

  • 该设计为自主首次开发,尚未以其他方式公开发表,且不侵犯他人知识产权。 

RORD新的高清图片

作品提交内容及要求

  • 算法设计介绍PPT或文档 

  • 软件代码打包文件(含源代码及对应的设计文档和储存在Excel模板中的测试结果) 

  • 作品提交邮箱 

    • 发送到:abb-cup-robotics@qq.com  

    • 邮件主题:题目+队长姓名+学校+电话 (学生信息需与注册信息一致)

    • 所有文件请以附件形式整合至1封邮件统一提交,邮件需小于50M; 如超过50M,请用QQ超大附件方式发送

    • 请勿使用网盘链接形式发送作品文件 


评分标准

初赛 

  1. 结果准确性:验证集一 70% + 验证集二 30% 

决赛 

  1. 结果准确性:60% 

  2. 算法性能(决赛):30% 

  3. 作品PPT&答辩(决赛):10% 

相关资料

1. 赛题使用的机器人型号: CRB15000-5/0.95  https://new.abb.com/products/robotics/zh 

2. 赛题对应的样例集、验证集和数据储存模板 

    链接: https://pan.baidu.com/s/1I2wqdS9aeCYe8ZxedDqCSg 提取码: w483 

 

赛程安排

 

奖项及奖品

1. 比赛设一、二、三等奖及优秀奖 

2. 一、二、三等奖获奖学生将获得现金奖励,所有获奖学生及其导师均颁发ABB(中国)有限公司及中国自动化学会联合签发的获奖证书 

3. 获奖团队代表将有机会得到: 

    3.1 ABB机器人研发部实习机会或优先考虑录用ABB机器人校招岗位 

    3.2 ABB机器人上海超级工厂参观 

    3.3 9月下旬在上海举办的中国国际工业博览会现场颁奖并参观ABB展台 

日常答疑

  • 所有注册参赛选手请按照“姓名+学校名”的格式提交加入机器人视觉算法组分赛QQ群(QQ: 895535004 ) 

  • 赛事或赛题相关问题请发送至QQ群,主办方技术专家或工作人员将及时解答 
  • 线上培训链接等赛事信息将通过QQ群发布