机器人智能抓取系统:目前几种主流的解决方案
机器人学习中的经典问题之一便是分拣:在一堆无序摆放的物品堆中,取出目标物品。在快递分拣员看来,这几乎是一个不需要思考的过程,但对于机械臂而言,这意味着复杂的矩阵计算。
事实上,对于人类需要耗机器费大量时间的数理难题,用智能系统处理起来就显得十分容易,但在几乎不需要思考的情况下就能做出的分选动作,则是全世界机机器人研究专家关注的热点。
机械臂抓取需要确定每段机械臂的位姿
首先,机械臂需要视觉伺服系统,来人智确定物体的位置,根据末端执行器(手)和视觉传感器(眼)的相对位置,可分为Eye-to-Hand和Eye-in-Hand两种系统。
Eye-to-Hand的分离式分布,视野固定不变,如果相机的标定精度高的话能抓,那么视觉定位于抓取的精度也越高。
Eye-in-Hand则将机械臂与视觉传感器固定在一起,视野随机械臂的移动而改变,传感器越近时精度越高,但过于靠近时则可能使目标超出视野范围。
精密的视觉系统与灵活机械臂的配合,取系才能完成一次完美的抓取,而这正是当前机器人操作中的核心难题,归纳起来就是这么一件事:找到合适的抓取点(或吸附点),抓住它。之后的转运执行,则属于运动规划的分支。
目前几种主流的解决方案
Model-based(统:基于模型的方法)
这种方法很好理解,即知道要抓什么,事先采用实物扫描的方式,提前将模型的数据给到机器人系统,机器在实际抓取中就只需要进行较少的运算:
1. 离线计算:根据搭载的末端类型,对每一个物体模型计算局目前部抓取点;
2. 在线感知:通过RGB或点云图,计算出每个物体的三维位姿;
3. 计算抓取点:在真实世界的坐标系下,根据防碰撞等要求,选取每个物体的最佳抓取点。
RGB颜色空间由红绿蓝三种基本色组成,叠加成任意色几种彩,同样地,任意一种颜色也可以拆解为三种基本色的组合,机器人通过颜色坐标值来理解“颜色”。这种方式与人眼识别颜色的方向相似,在显示屏上广泛采用。
CGrasp 对精密轴承的无序抓取
Half-Model-bas主流ed(半模型的方法)
在这种训练方式中,不需要完全预知抓取的物体,但是需要大量类似的物体来训练算法,让算法得以在物品堆中有效对图像进行“分割”,识别出物体的边缘。这种训练方式,需要这些流程:
1.离线训练的解图像分割算法,即把图片里的像素按物体区分出来,此类工作一般由专门的数据标注员来处理,按工程师的需求,标注出海量图片中的不同细节;
2.在线处理图像分割,在人工标注出的物体上,寻找合适的抓取点。
这是一种目前应用较决方为广泛的方式,也是机械臂抓取得以推进的主要推力。机械臂技术发展缓慢,但计算机视觉的图像分割则进展迅速,也从侧面撬动了机器人、无人驾驶等行业的发展。
Model-free(自由模型)
这种训练方式不涉及到“物机器体”的概念,机器直接从RGB图像或点云图上计算出合适的抓取点,基本思路就是在图像上找到Antipodal(对映点),即有可能“抓的起来”的点,逐步训练出抓取策略。这种训练方式往往让机器手大量尝试不同种类人智的物品,进行self-supervisedlearning,Google的Arm Farm,即为其中的代表之一。
Google Arm Farm
值得注意的是,对于机械手而言,不同形状的物品,抓取难度有天壤之别。即便是同能抓样形状的物体,由于表面反光度和环境光照的影响,在不同场景的抓取难度也大相径庭。从实验室到商业落地,其中有相当一段路要走。
高精密度的相机研发,是机器人“感知”物体的第一步。
实际商业场景中,最麻烦的物体总是“下一个取系物体”。工业机器人要真正融入实际生产体系,只有具备聪明的大脑,针对不同工况做出柔性的调整,才能拓宽工业机器人的使用场景。
(责任编辑:彩妆香水)
-
撰文 | 许 芸 编辑 | 杨博丞 题图 | 图虫创意 在消费市场,9月、10月历来有“金九银十”之称,几乎是中国车市竞争最激烈的时候,直观呈现车企在市场里的竞争力。 为了抢占市场先机,车企之间的竞争...[详细]
-
前言:李子柒的螺蛳粉怎么那么难吃?因为每个人的口味各不相同螺狮粉为什么那么臭?就像鱼香肉丝里没有鱼,夫妻肺片里面没有肺片一样,螺蛳粉里面没有螺蛳。但,有螺蛳不屈不灭的灵魂。在一碗完整的螺蛳粉中,螺蛳是...[详细]
-
标签: Uber Blacklane UberElite 专车服务
云梦级3月31日云梦级消息,Uber 优步当地时间 30 日宣布将收购的全球专车服务公司 Blacklane。这笔交易尚需获得惯常的监管批准并满足其他惯常的交割条件,预计将于 2026 年底完成。 B...[详细]
-
标签: 微信ClawBot 苹果中国 中国AI大模型 百度DuMate
Hello,大家早上好,又是元气满满的一天,先来浏览新鲜的早报吧~ 【微信发布官方“龙虾”插件】 微信插件页面悄然新增“ClawBot”选项,其功能为连接微信与开源平台 OpenClaw。用户只需在...[详细]
-
云梦级4月1日云梦级消息,佑驾创新(2431.HK)31日发布2025年度业绩报告。财报显示,佑驾创新2025年营收为7.59亿元,较上年同期的6.54亿元增长16%。 佑驾创新2025年L4无人车及...[详细]
-
新浪科技讯 北京时间6月10日早间消息,据报道,Twitter周三任命万事达公私合作高级副总裁Mimi Alemayehou担任董事,接替对冲基金Elliott Management合伙人Jesse...[详细]
-
IDC:2021年中国数字政府IT安全硬件市场规模同比增长31.5%
17日讯,日前,市场研究机构IDC发布的《中国数字政府IT安全硬件市场份额,2021》报告显示,2021年中国数字政府IT安全硬件市场的规模达到64.9亿元人民币,同比增长31.5%,整体市场呈现快速...[详细]
-
Anthropic 宣布其 AI 编程助手 Claude Code 正式推出全新的 “插件(Plugins)” 系统,目前已进入公开测试阶段。这个创新的插件系统旨在为开发者提供更多自定义功能,让他们可...[详细]
-
Claude Code 2.0震撼升级:检查点+VS Code插件,编程效率飙升3倍
在AI辅助开发工具竞争日益白热化的当下,Anthropic于9月29日正式发布Claude Code的重大版本更新(v2.0),并同步推出Claude Sonnet4.5模型。 Claude Code...[详细]
-
标签: 小米机器人 雷军 Xiaomi-Robotics-0 智能制造
云梦级3月2日云梦级消息,据雷军透露,小米机器人已经开始在汽车工厂实习。 雷军表示,小米在通用VLA基座模型Xiaomi-Robotics-0的基础上,结合多模态感知能力和强化学习技术,小米人形机器人...[详细]
- https://www.swanagerailway.co.uk/search?q=谷歌蜘蛛池租用【tg:seogoogle987】,9Vp
- https://www.nissin.com/jp/search/?cat=105&q=谷歌蜘蛛池租用【tg:seogoogle987】,anL
- https://www.thedp.com/page/search?q=谷歌蜘蛛池租用【tg:seogoogle987】,Gx8
- https://www.msrenewal.com/search/谷歌蜘蛛池租用【tg:seogoogle987】,l2w
- https://www.remit.co.jp/zh/?s=谷歌蜘蛛池租用【tg:seogoogle987】,q89
- https://www.normani.de/search?q=谷歌蜘蛛池租用【tg:seogoogle987】,OG5
- https://www.lauben.com/en/?action=SEARCH&s=谷歌蜘蛛池租用【tg:seogoogle987】,Z5d
- https://www.youtube.com/results?search_query=谷歌蜘蛛池租用【tg:seogoogle987】,F3I
- https://www.tarleton.edu/?s=谷歌蜘蛛池租用【tg:seogoogle987】,QiO
- https://www.shacknews.com/editorial-search?q=谷歌蜘蛛池租用【tg:seogoogle987】,KQY

标签: 小米汽车 SU7 雷军 宇树科技
标签: Sea Expandary 刘强东 新能源游艇 智能化游艇
快手发布KAT系列Agentic Coding大模型 代码表现出色
标签: DeepSeek Engram 梁文锋 V4
标签: 闲鱼 武汉 循环商店 华中首店
