AGI Daily
广告
AGI Daily跟踪世界 AGI 进展AGI INTELLIGENCE · DAILY
全部算力算法数据人物日报主题
AGI Daily
全部算力算法数据人物日报主题
广告

S2:视觉-语言-动作模型泛化能力大幅提升——\"少看多描述\"策略使真实机器人成功率提高24.8个百分点

2026年6月4日 · 2026-06-04

roboticstomorrow.com

技术进展

S2:视觉-语言-动作模型泛化能力大幅提升——"少看多描述"策略使真实机器人成功率提高24.8个百分点

  • 日本Preferred Networks团队在arXiv发布S2(See Less, Specify More)框架,针对VLA(Vision-Language-Action)模型泛化瓶颈提出新解法:训练时对执行器施加显式视觉证据预算(Visual Evidence Budget)——强制策略仅依赖任务充分(而非冗余)的视觉信息做决策;同时将粗粒度任务指令细化为轨迹级与子任务级语言描述,消除"监督信号混叠"。
  • 关键结果:在TX-G2(AgiBot G2兼容变体)和HSR共8个真实机器人任务上,S2将平均子任务成功率从pi0.5的54.2%提升至79.0%(+24.8pp)。实验覆盖干扰物、外观变化、语义相似任务等泛化挑战场景。
  • 方法要点:与依赖原生注意力机制的传统VLA不同,S2将"指定更多"(Specify More)与"少看"(See Less)解耦——前者提供高质量局部引导但不替换高层目标,后者通过证据预算约束降低对无关视觉上下文的依赖。该接口可兼容现成VLM规划器做上下文学习。
  • 可复现性:论文发布于arXiv(2606.02735),代码未在摘要中披露具体开源地址。结果来自论文作者自身实验,暂无第三方独立复现。
  • 行业意义:VLA模型泛化是人形机器人从实验室走向真实部署的核心障碍。S2表明,改善执行器的训练接口设计(而非单纯扩大模型或数据)可显著提升泛化能力。在AgiBot硬件上的验证结果对正加速量产的中国机器人生态具有直接参考价值。

来源:arXiv(https://arxiv.org/abs/2606.02735)

机器人模仿学习的"假成功"问题:UC Berkeley量化本体感知 vs. 视觉在错误检测中的可恢复性

  • UC Berkeley团队在arXiv发表研究(2606.03134),系统分析了机器人模仿学习中的一个隐蔽但普遍的问题:假成功(False Success)——机器人自身判定任务成功,但实际结果错误。这类被污染的数据若进入训练集,将系统性降低策略质量。
  • 实验设计:在两个双臂ALOHA任务(方块转移、销钉插入)上,通过环境扰动(而非标签篡改)诱导失败,并用仿真器特权状态标注真实结果。然后对比仅依赖本体感知(proprioception)与加入视觉的检测器在纠正假成功标签上的能力。
  • 核心发现:(1)方块转移任务中,本体感知数据几乎可完全恢复假成功;(2)销钉插入任务中,本体感知只能恢复部分,视觉检测器填补了大部分差距;(3)本体感知的可分离性依赖于远低于真实传感器噪声底限的速度差异,因此无噪声仿真器会夸大本体感知的实际可用性。代码与评估管线已开源。
  • 行业意义:对Figure、Agibot、Tesla等正在规模化采集机器人操作数据的公司而言,该研究直接指向一个实操问题——若依赖机器人自带成功检测器(而非人工校验或更昂贵的外部视觉系统)来标注训练数据,不同任务类型的数据质量损失差异巨大。在精细操作场景中,仅靠本体感知的自动化标注可能系统性低估失败率。

来源:arXiv(https://arxiv.org/abs/2606.03134)

SeeTraceAct:跨形态单次演示VLA——从人类视频到Franka Panda机械臂的一次性技能迁移

  • Georgia Tech与NVIDIA联合团队发布SeeTraceAct——一种基于单次演示视频条件化的VLA框架。核心创新是可见性感知的末端执行器轨迹预测:通过预测未来末端轨迹来鼓励精确的空间定位,而非仅依赖端到端模仿。
  • 关键结果:在RoboCasa-DC(跨形态仿真基准,含人形视频)上四项设置全面领先基线;在真实世界中,Franka Panda机械臂以人类演示视频为条件,平均成功率提升12.5个百分点。
  • 可复现性:论文发布于arXiv(2606.02745),同步开源RoboCasa-DC数据集——这是首个含人形视频的跨形态演示条件化基准。
  • 行业意义:该工作直击VLA模型的最大痛点:每个新任务通常需要昂贵的遥操作数据。SeeTraceAct让机器人从单个(甚至是人类执行的)视频中学习新技能成为可能。如果该范式可规模化,将大幅降低人形机器人部署到新场景的数据采集成本。

来源:arXiv(https://arxiv.org/abs/2606.02745)

产品

SoftBank拟向Agile Robots追加超3亿美元投资:具身智能赛道持续升温

  • 据Bloomberg 6月2日报道,软银集团(SoftBank Group)正与德国工业机器人公司Agile Robots进行深入谈判,拟领投新一轮约8亿美元融资,其中软银自身出资超3亿美元。Agile Robots产品线覆盖工业机械臂、仓储机器人和人形机器人,由德国航空航天中心(DLR)技术孵化。
  • 背景:软银曾在2021年领投Agile Robots的2.2亿美元C轮融资,使其成为德国首家机器人独角兽。本轮若完成,将是软银对同一标的的追加押注。
  • 赛道信号:PitchBook数据显示,2025年全球机器人赛道融资达276亿美元,同比增长超3倍。同期,1X Technologies正洽谈以100亿美元估值融资10亿美元。软银此次出手进一步确认:在语言模型投资回报尚不确定的背景下,头部资本正加速向"AI+物理世界"方向倾斜。
  • 行业意义:Agile Robots兼具硬件(机械臂、人形机)与软件能力,软银的持续加注表明工业机器人不再是"自动化设备"叙事,而是"物理AI载体"叙事的一部分——这与人形机器人赛道的资本逻辑完全一致。

来源:Bloomberg(https://www.bloomberg.com/news/articles/2026-06-02/softbank-in-early-talks-to-back-800-million-agile-robots-round) / The Next Web(https://thenextweb.com/news/softbank-agile-robots-800m-funding-talks)

VinDynamics与VinRobotics发布越南首款人形机器人:Dyno(服务型)与VR-H3(工业型)双线布局

VinDynamics Dyno人形机器人

  • 6月1日,Vingroup旗下两家机器人子公司——VinDynamics和VinRobotics——分别在国际舞台亮相其首款人形机器人:VinDynamics在ICRA 2026(维也纳)和COMPUTEX 2026(台北)同步首发Dyno(定位为现代生活环境的多功能服务助手);VinRobotics展示VR-H3(第三代工业人形机器人)。
  • Dyno:集成AI平台与环境感知系统,主打安防监控与家庭服务,面向城市、园区、综合体等场景。VR-H3:定位工业操作与服务应用,强调作业性能。
  • 技术自主性:Vingroup宣称在致动器、灵巧手、控制系统和训练数据方面均实现自研,试图掌握从底层硬件到上层AI的完整技术栈。
  • 行业意义:人形机器人竞赛正从美、中、日、韩向东南亚扩展。越南通过Vingroup的资本与工程资源入局,进一步印证该赛道的全球化趋势。但Dyno和VR-H3目前处于原型/展示阶段,无客户部署或量产时间表披露,技术水平与Figure、Tesla、Unitree等头部厂商的实际差距有待独立验证。

来源:VinDynamics官方 / RoboticsTomorrow(https://www.roboticstomorrow.com/news/2026/06/01/vindynamics-debuts-its-first-humanoid-robot-at-two-of-the-worlds-leading-technology-events/26653) / humanoid.guide(https://humanoid.guide/vingroup-humanoid-robots-debut-at-icra-2026-and-computex-taipei)

生态

AGIBOT WORLD CHALLENGE 2026现场决赛在ICRA启动:526支队伍角逐具身智能双赛道

  • 6月2日至4日,AGIBOT WORLD CHALLENGE 2026现场决赛在维也纳ICRA 2026大会上举行。该赛事由智元机器人(AgiBot)主办,总奖金池53万美元,吸引来自27个国家和地区的526支队伍参赛,涵盖顶尖高校、研究机构、科技公司与独立开发者。
  • 双赛道设计:(1)推理到行动(Reasoning to Action)——在真实G2机器人上完成从感知到操作的全流程;(2)世界模型(World Model)——基于AgiBot开放仿真平台Genie构建与评估世界模型。这一设计反映了AgiBot对具身智能技术栈的完整理解:上层推理+底层世界模型共同构成通用机器人智能。
  • 平台基础:比赛基于AgiBot World全栈开发生态——G1/G2机器人硬件、百万级真实与仿真数据集、GO-1基础模型。这使比赛不仅是一次竞赛,更是AgiBot生态的开发者导入机制。
  • 行业意义:AgiBot通过竞赛构建标准化评测体系,正在为具身智能领域打造类似NLP领域GLUE/SuperGLUE的基准基础设施。这有助于加速学术研究向工业应用的转化,但也可能强化AgiBot自身平台在研究者中的生态锁定效应。现场决赛优胜者目前尚未公布。

来源:AgiBot官方(https://www.agibot.com/article/231/detail/42.html) / PR Newswire(https://www.prnewswire.com/news-releases/agibot-world-challenge-at-icra-2026-now-opens-reasoning-to-action-and-world-model-tracks-302702364.html)

COMPUTEX 2026开幕:首次设立机器人与边缘AI专区,Physical AI成为全场核心主题

NVIDIA Isaac GR00T参考人形机器人

  • 6月2日,COMPUTEX 2026在台北南港展览馆开幕,主题"AI Together",设三大支柱:AI计算、机器人与智慧移动、下一代科技。展会首次设立独立的机器人与边缘AI展区,吸引超1,500家展商和80,000名专业观众。
  • NVIDIA主导Physical AI叙事:黄仁勋在6月1日主题演讲中宣布NVIDIA每年对台投入1,500亿美元,并围绕Agentic AI、Physical AI和AI工厂三大板块展开。Cosmos 3全模态世界模型(5月31日发布)和Isaac GR00T参考人形机器人(6月1日发布)构成其Physical AI战略的双核心。
  • 生态信号:展会同期展出的人形机器人包括VinDynamics Dyno、AAEON的NVIDIA Jetson驱动人形方案等。COMPUTEX从传统PC/半导体展会向AI+机器人平台的转型,反映了全球科技产业链对具身智能的战略重估。
  • 行业意义:COMPUTEX 2026标志着Physical AI从学术讨论正式进入产业链核心议程。台湾作为全球半导体制造枢纽,其在人形机器人供应链中的角色(致动器、传感器、芯片)将随赛道成熟而进一步凸显。

来源:PR Newswire(https://www.prnewswire.com/news-releases/computex-2026-opens-amid-surging-global-demand-for-ai-infrastructure-302788497.html) / NVIDIA Newsroom(https://nvidianews.nvidia.com/news/nvidia-and-global-robotics-leaders-take-physical-ai-to-the-real-world)

评论

登录后即可参与评论。

加载评论中…

最新日报

  • 沙箱环境被突破的概念图,表现数据从受限立方体中逸出OpenAI 首次公开披露模型「越狱」:数学突破后两次逃出沙箱,内部紧急暂停Daily · 7月22日
  • SK 海力士 36GB HBM3E 高带宽内存产品的正反面展示SK 集团警告:AI 内存短缺或引发地缘政治摩擦Daily · 7月21日
  • Apple vs Nvidia market cap今日头条:Kimi K3 余震——AI 估值逻辑遭遇重新定价Daily · 7月20日

往期日报

  • NVIDIA RTX Spark 与 Microsoft Build 同日亮剑,「AI 原生 PC」从概念变成产品NVIDIA RTX Spark 与 Microsoft Build 同日亮剑,「AI 原生 PC」从概念变成产品Daily · 6月3日
  • Anthropic 向 SEC 秘密提交 IPO 申请,AI 最大独角兽争相抢滩公开市场Anthropic 向 SEC 秘密提交 IPO 申请,AI 最大独角兽争相抢滩公开市场Daily · 6月2日
  • DeepSWE:全新长周期软件工程基准——GPT-5.5 以 70% 领跑,DeepSeek V4 Pro 仅 8%DeepSWE:全新长周期软件工程基准——GPT-5.5 以 70% 领跑,DeepSeek V4 Pro 仅 8%Daily · 6月1日
  • AI 企业级成本清算:Microsoft 砍 Claude Code、Uber 四个月烧光全年预算AI 企业级成本清算:Microsoft 砍 Claude Code、Uber 四个月烧光全年预算Daily · 5月31日
  • FormInv:数学推理基准的语义不变性审计——\\\"No-Free-Benchmark\\\"定理FormInv:数学推理基准的语义不变性审计——\"No-Free-Benchmark\"定理Daily · 5月30日
  • XCENA 面向 AI 系统设计的内存芯片与电路板XCENA 融资 1.35 亿美元,押注 AI 的下一瓶颈是内存Daily · 5月29日
  • 一名人物侧身拿着手机与 Sesame 语音助手对话Sesame 推出 iOS 应用,实时语音 Agent 进入移动端Daily · 5月28日
  • Robinhood Agentic Trading 产品界面展示账户与交易操作Robinhood 让 AI Agent 交易股票,权限设计开始直接影响余额Daily · 5月27日
  • 多个人工智能助手站在分割的平台上的概念插画严格窗口内未发现足以成条的 AI 产业新增Daily · 5月26日
  • 教宗 Leo XIV 在公开活动中讲话教宗 AI 通谕把问题转向劳动、文化与收益分配Daily · 5月25日
  • Amazon Bee 可穿戴助手的手机端应用界面Amazon Bee 把持续记录带进可穿戴设备Daily · 5月24日
  • 一辆 Ferrari F1 赛车在赛道上高速行驶Ferrari 用 IBM AI 经营 F1 粉丝关系Daily · 5月23日
AGIDaily跟踪世界 AGI 进展© 2026 AGIDaily
关于邮件栏目主题定制投稿招聘广告SkillTermsContactRSS