ARTICLE / DEEP READING

热点资讯

从比赛现场到数据趋势,深入阅读每一篇值得关注的体育内容。

开发者真机上手!具身智能,还得这群人补位文章配图
READ
IN DEPTH

FEATURED ARTICLE

开发者真机上手!具身智能,还得这群人补位

编辑|杜伟 一台 2000 块买来的双臂机器人,实验做到一半,两个舵机坏了,怎么办? 复旦大学 FDU_SONIC 战队的四名学生,干脆把几台机械臂拆开,拆下零件,再拿去修另一台。好不容易让设备重新运转起来,更现实的问题还在后面:就算模型在仿真环境里跑出高分,他们平时也很难摸到真机。一台科研双臂机器人动辄数万元,对多数高校团队来说,买了未必有经费,有经费未必排得上用。 这支最初只想来学习的队伍,最终从 1855 支报名队伍中杀进 15 强,并最终拿下三等奖。 类似的故事,在首届蚂蚁灵波具身大模型挑战赛中多次上演。比赛吸引了 3000 多名选手报名,覆盖 13 个国家、648 家高校、科研院所及企业,成为目前规模最大的同类赛事。 赛制的特别之处在于所有参赛队伍使用同一个基座模型:蚂蚁灵波开源的 LingBot-VLA 2.0。初赛阶段,选手们围绕 RoboTwin 2.0 仿真环境进行模型训练和调优。进入到决赛,考场从虚拟环境转向真实机器人平台。 11 月 14 日至 15 日,15 支决赛队伍进入 48 小时真机攻坚。他们在松灵 COBOT MAGIC 平台上部署模型,利用统一预采数据和现场采集的数据继续优化,通过真实任务检验模型的实际表现。经过两天激烈角逐,11 月 16 日,决赛名次正式揭晓! 决赛排名 一等奖由 TARS 战队摘得,队员分别来自福田实验室、西北工业大学、普渡机器人和天津大学。EVA 和 SST 战队获得二等奖,Vida、FDU-SONIC 和 ai-robot 战队获得三等奖。 一等奖 TARS 站队,将获得 80,000 元奖金,以及由 AMD 赞助的 Radeon RX 9070 XT OC 海外版 Ultra 16GB 显卡、奥比中光赞助的 Gemini 335L 深度相机、辉羲智能赞助的 Huixi Embodied 开发者套件和由魔搭社区赞助的 5,000 魔粒值及 500 小时 Notebook GPU 一个值得记下的细节是,由技术专家、投资机构和媒体组成的观察团,把特别奖投给了同样的三支队伍。技术分和产业判断,也在这里完美重合了。 同样的具身大模型,交到不同的开发者手中,究竟还能被改造成什么样?这场极限真机竞逐给出了不少具体答案。 真机实测 既考选手也考模型 决赛给 15 支队伍出了同一组真机考题:机械臂要从一堆果蔬中找出指定目标,准确放进对应颜色的盘子;还要把化妆品逐一收进透明收纳盒的指定层位;最后机械臂配合将桌面垃圾扫进簸箕,再倒入垃圾篓。 48 小时,同一个基座模型、同一份 647 条基础数据,15 支队伍给出了不同解法。LingBot-VLA 2.0 本身具备强大的视觉感知与动作执行能力,为进一步优化数据、视觉和控制策略提供了扎实的能力底座。 一等奖 TARS 战队采取了「分任务攻坚」的思路 。对于水果抓取和化妆品收纳,团队判断本质上是同一类,只要目标看得准,基座模型的抓取能力足够覆盖,「现有的官方数据完全能够满足需求」。于是他们基本没有为前两项任务额外采集数据,直接调用千问识别画面中的干扰物,通过边界框和 CPU 端背景涂抹弱化无关信息,让模型更容易锁定目标。 省下来的数据采集精力全部集中到了难度最高的垃圾清扫任务。官方约 210 条示范数据主要采用正面夹持簸箕把手的方式,接触面积和摩擦力都比较小,稍有偏差就容易翻转,后续清扫动作也很难完成。TARS 改为夹住簸箕后沿,并按照新方案重新采集任务数据。 如果说 TARS 解决的是机器人抓得更稳, 二等奖 EVA 战队则把重点放在了如何让模型从失败中学习 。他们发现使用官方数据训练,模型初期成功率只有约 10%。EVA 随后建立数据回流流程:先让机器人自主执行任务,再由大模型辅助评估和筛选轨迹;遇到失败或数据覆盖不足的情况,由人工接管,采集纠正后的轨迹(DAgger),重新加入训练。 这相当于给模型增加了一条持续学习的路径。48 小时内,EVA 完成约 7 轮数据回流,额外采集 700 多条数据,训练数据规模达到 1200 多条。团队还引入 Grounding DINO 和分割标注改善目标定位,并通过深度教师蒸馏补充空间感知监督。经过优化,模型真机成功率从约 10% 提升至约 70%。 另一支二等奖队伍 SST,盯上了模型的视觉定位能力 。他们希望给 VLA 增加一层更明确的视觉提示,为此引入 DeepSeek 识别指令中的目标物体,再用 SAM3 生成分割掩码,将背景亮度压低至原来的 10%,突出操作对象。 另外,针对 SAM3 无法稳定根据文字提示分割目标的问题,团队想出了一个颇有意思的办法:将机器人执行视频倒放,利用目标被抓起后的画面定位其像素位置,再交给 SAM3 沿视频追踪,完成整段视频标注,并用这些数据微调 SAM3。动作执

about image

SHARE THE IDEA

觉得有用?分享给朋友

让更多人看到这篇内容。

返回资讯列表

YOU MAY ALSO LIKE

推荐阅读

TRENDING STORIES

热点新闻

从0-1到2-1!国米绝境大逆转,补时阶段连入2球,球迷:太燃了

从0-1到2-1!国米绝境大逆转,补时阶段连入2球,球迷:太燃了

北京时间10月25日,意甲第8轮,国际米兰主场2-1逆转佛罗伦萨。第65分钟希门尼斯世界波破门,国米0-1落后;第90分钟图拉姆推射死角扳平;第90+8分钟泽林斯基点球命中,补时连入两球,绝境翻盘。球迷直呼:“太燃了!” 比赛前半段,国米围攻却屡屡碰壁。奥古斯托头球两次击中横梁,对方门将开挂,紫百合一次反击就打出世界波。有球迷形容:“如果没有补时,这完全是系统局——半场围攻,不是神扑就是门柱横梁,

2027年将会是中华人民共和国全党、全军、全国各族人民关键的一年

2027年将会是中华人民共和国全党、全军、全国各族人民关键的一年

平时刷各种社交内容,总能刷到不少人聊2027,一会说要在建军百年晒足硬家底,一会说十五五要交出实打实的中期答卷,还有不少人天天掐着点算台海的推进节奏。好多人以为这几件事刚好凑在同一年是巧合,其实根本不是凑数的偶然事件。这三件事拧成了一股劲,直接决定咱们接下来十几年走的路顺不顺。 好多人聊起建军百年,第一反应就是今年下了多少艘新战舰,列装了多少架新战机,觉得新装备越多这份答卷就越漂亮。这想法不能说完

惨案!亚冠-达万2球拉莫斯染红 国安4-7不敌泰港遭首败

惨案!亚冠-达万2球拉莫斯染红 国安4-7不敌泰港遭首败

编辑 北京时间11月3日消息,2026-2027赛季亚冠精英联赛小组赛东亚区第4轮比赛展开争夺,北京国安客场挑战泰超球队泰港队。上半场比赛阿科洛开场5分钟闪击,颂素·贝尔3分钟2球反超比分,博丁反击建功,杜齐亚克传中变线造乌龙,达万梅开二度,下半场比赛拉莫斯染红离场,博丁两轰世界波,颂素·贝尔头球破门被吹,提拉沙梅开二度,最终全场比赛结束,国安4-7不敌泰港,吃到小组赛首场败仗。 前3轮比赛,泰港

以色列国防部长:对伊朗任务尚未完成,将先发制人消除威胁,以军不会从占领的加沙地带、黎巴嫩和叙利亚部分地区撤军

以色列国防部长:对伊朗任务尚未完成,将先发制人消除威胁,以军不会从占领的加沙地带、黎巴嫩和叙利亚部分地区撤军

以色列国防部长卡茨8日称,以色列“对伊朗的任务尚未完成”,伊朗试图“重启获取核武器的进程”,以方将对威胁采取“先发制人”的行动。 卡茨当天在一场战争纪念仪式上说,伊朗正试图“重启获取核武器的进程”,同时还在进行“其他严重威胁以色列安全的活动”,以方不能接受,并将“采取必要行动”。卡茨并未提供任何证据证明上述威胁,也没有说明将采取哪些具体行动。 卡茨称,以色列将“先发制人”消除威胁。以色列军队不会从

莫兰特禁赛期可参加训练 还能随灰熊飞赴客场

莫兰特禁赛期可参加训练 还能随灰熊飞赴客场

北京时间10月3日,据相关媒体报道,孟菲斯灰熊队球员贾-莫兰特因违反联盟相关规定,新赛季将被禁赛25场。不过在解禁之前,莫兰特被球队允许参加一系列活动。 今天灰熊队媒体日现场,球队总经理扎克-克莱尔曼接受采访时,谈到了有关莫兰特的情况。 “莫兰特在被禁赛期间,他可以跟随球队参加训练,并且可以和球队一起去往客场。我觉得这对于莫兰特来讲是有利的,这对我们团队来讲也是非常棒的。”克莱尔曼说道。 此前莫兰