机器人智能抓取系统:目前几种主流的解决方案
机器人学习中的经典问题之一便是分拣:在一堆无序摆放的物品堆中,取出目标物品。在快递分拣员看来,这几乎是一个不需要思考的过程,但对于机械臂而言,这意味着复杂的矩阵计算。
事实上,对于人类需要耗机器费大量时间的数理难题,用智能系统处理起来就显得十分容易,但在几乎不需要思考的情况下就能做出的分选动作,则是全世界机机器人研究专家关注的热点。
机械臂抓取需要确定每段机械臂的位姿
首先,机械臂需要视觉伺服系人智统,来确定物体的位置,根据末端执行器(手)和视觉传感器(眼)的相对位置,可分为Eye-to-Hand和Eye-in-Hand两种系统。
Eye-to-Hand的分离式分布,视野固定不变,如果相机的标定精度高的话能抓,那么视觉定位于抓取的精度也越高。
Eye-in-Hand则将机械臂与视觉传感器固定在一起,视野随机械臂的移动而改变,传感器越近时精度越高,但过于靠近时则可能使目标超出视野范围。
精密的视觉系统与灵活机械臂的配取系合,才能完成一次完美的抓取,而这正是当前机器人操作中的核心难题,归纳起来就是这么一件事:找到合适的抓取点(或吸附点),抓住它。之后的转运执行,则属于运动规划的分支。
目前几种主流的解决方案
Model-based统:(基于模型的方法)
这种方法很好理解,即知道要抓什么,事先采用实物扫描的方式,提前将模型的数据给到机器人系统,机器在实际抓取中就只需要进行较少的运算:
1. 离线计算:根据搭载的末端类型,对每一个物体模型计算局目前部抓取点;
2. 在线感知:通过RGB或点云图,计算出每个物体的三维位姿;
3. 计算抓取点:在真实世界的坐标系下,根据防碰撞等要求,选取每个物体的最佳抓取点。
RGB颜色空间由红绿蓝三种基本色组成,叠加成任意色彩,同几种样地,任意一种颜色也可以拆解为三种基本色的组合,机器人通过颜色坐标值来理解“颜色”。这种方式与人眼识别颜色的方向相似,在显示屏上广泛采用。
CGrasp 对精密轴承的无序抓取
Half-Model-based(半模主流型的方法)
在这种训练方式中,不需要完全预知抓取的物体,但是需要大量类似的物体来训练算法,让算法得以在物品堆中有效对图像进行“分割”,识别出物体的边缘。这种训练方式,需要这些流程:
1.离线训练图像分割算法的解,即把图片里的像素按物体区分出来,此类工作一般由专门的数据标注员来处理,按工程师的需求,标注出海量图片中的不同细节;
2.在线处理图像分割,在人工标注出的物体上,寻找合适的抓取点。
这是一种目前应用较为广泛的方式,决方也是机械臂抓取得以推进的主要推力。机械臂技术发展缓慢,但计算机视觉的图像分割则进展迅速,也从侧面撬动了机器人、无人驾驶等行业的发展。
Model-free(自由模型)
这种训练方式不涉及到“物体”的概念,机器直接从机器RGB图像或点云图上计算出合适的抓取点,基本思路就是在图像上找到Antipodal(对映点),即有可能“抓的起来”的点,逐步训练出抓取策略。这种训练方式往往让机器手大量尝试不同种类的物品,进行self-人智supervisedlearning,Google的Arm Farm,即为其中的代表之一。
Google Arm Farm
值得注意的是,对于机械手而言,不同形状的物品,抓取难度有天壤之别。即便是同样形状的物体,能抓由于表面反光度和环境光照的影响,在不同场景的抓取难度也大相径庭。从实验室到商业落地,其中有相当一段路要走。
高精密度的相机研发,是机器人“感知”物体的第一步。
实际商业场景中,最麻烦的物体总是“下一个物体”。工业机取系器人要真正融入实际生产体系,只有具备聪明的大脑,针对不同工况做出柔性的调整,才能拓宽工业机器人的使用场景。
-
Meta发布支持128种语言的新语音模型:指向元宇宙跨语种交流2022 年的边缘计算:两位数增长Altman押注GPT-6记忆革命 OpenAI战略转向代理系统开发标签: 众擎机器人 深圳众擎 赵同阳 工业机器人微软深化AI战略:Windows11核心集成 Copilot,支持语音控制、屏幕分析和本地自动化标签: 泡泡玛特 LABUBU SKULLPANDA THEMONSTERS标签: 快手 网信部门 色情低俗 直播监管Twitter Spaces社交语音聊天功能抢先Clubhouse登陆安卓平台标签: DeepSeek DeepSeek-V4 大模型 API定价标签: 月下龙吟 西安卓渊 红果免费短剧 短剧讨薪
- ·Elastic:只有一个 Elasticsearch,来自 Elastic
- ·阿里云域名价格调整 2月1日起net英文域名续费上调至89元
- ·Transformer跨界超越CNN,还解决了计算复杂度难题
- ·标签: 亿咖通 卓驭科技 天极计算平台 Flyme Auto
- ·什么是Azure函数
- ·标签: 澜起科技 DDR5芯片 杨崇和 内存接口芯片
- ·甲骨文第四财季营收112亿美元 云服务和授权支持业务营收占66%
- ·美国AI数据中心耗电量激增 全靠光伏发电爆发式增长续命
- ·99.7%成本差!AI模仿作家风格更受青睐,直指“合理使用”边界引爆版权诉讼
- ·模型花费几十万刀,指导无数项目,才发现负样本用的是null?
- ·扎克伯格:苹果调整iOS 14隐私政策或有利于Facebook
- ·与爱为舞亮相腾讯云AI产业应用大会,联合创始人王琳:打造下一代学习Agent
- ·多云策略是金融行业数字化转型的首选
- ·AI医疗助手赛道彻底爆发!这家初创公司4个月估值狂飙3倍达75亿
- ·标签: 中金公司 东兴证券 信达证券 换股合并
- ·送你一个Python 数据排序的好方法
- ·Facebook承诺未来3年将向新闻行业投资至少10亿美元
- ·阿里云张建锋:未来2年 阿里云20%新增算力将使用自研CPU
- ·云安全日报210708:思科网络安全解决方案发现特权提升漏洞,需要尽快升级
- ·如何引领数字创新的新“太空竞赛”
- ·云计算核心技术Docker教程:Docker创建集群
- ·震惊,AI已能写游戏代码了!程序员未来会失业么?
- ·欧盟接到成员国投诉 或对Facebook收购Kustomer展开调查
- ·老外大学生发明AI模型:可快速生成中国山水画 人眼难辨真假
- ·微软正加大投资训练自己的人工智能模型
- ·OpenAI 收购开发数据分析平台 Statsig, 每天可处理 1 万亿次事件
- ·标签: 千里科技 千里智驾1.0 千里浩瀚G-ASD ASC100
- ·云安全日报210421:Oracle WebLogic应用服务器发现反序列化漏洞,需要尽快升级
- ·本科生新算法打败NeRF,不用神经网络照片也能动起来,提速100倍
- ·全面开源的 LLaVA-OneVision-1.5,超越 Qwen2.5-VL 的多模态模型登场
- ·云计算开发:Python3-find()方法详解
- ·联想发布百应智能体2.0!国内首个L3级AI服务正式登陆,中小企业数字化转型迎来超级助手
- ·蒜头发芽了还能吃吗
- ·OpenAI 推出短视频应用 Sora,五天内下载量突破百万
- ·云安全日报210616:红帽云应用平台发现内存损坏和拒绝服务漏洞,需要尽快升级
- ·Facebook新AI模型SEER实现自监督学习,LeCun大赞最有前途
