跳到主内容
32 signals·11 sources·2026年7月10日星期五·07-06 05:00 ~ 07-09 12:32 UTC
今日主线 · main storyline

GR00T 开路,RoboSnap 仿真,灵波开源具身视频基模

今日具身智能从开发流程、仿真生成到底层模型集中突破:NVIDIA Isaac GR00T 端到端策略开发框架简化人形机器人训练;RoboSnap 单图生成可交互仿真场景,发布 DROID-Sim 数据集;蚂蚁灵波开源全球首个具身视频基础模型 LingBot-Video,填补机器人操控的视频基座空白。

今天三条进展分别对应具身智能的开发工具链数据生成模型基座。NVIDIA 推出 Isaac GR00T,直击人形机器人开发流程碎片化痛点,提供可重复的端到端策略训练流水线;与此同时,RoboSnap 仅凭单张 RGB 图像即可生成物理稳定的可交互仿真环境,并开源包含 564 个真实-仿真场景对的 DROID-Sim 数据集,将真实环境转化为机器人学习的可重用基础设施。

在模型侧,蚂蚁灵波发布全球首个面向具身智能的视频基础模型 LingBot-Video,专为物理交互与操控任务优化,并选择开源。这一动作填补了具身领域视频基模的空白,标志着视频理解技术开始从互联网走向真实世界,与今日其他轻量化导航模型(如 GemNav 以冻结多模态 LLM 实现零样本迁移)共同指向具身模型降低数据门槛、提升泛化的趋势。

#01

NVIDIA 发布 Isaac GR00T 框架,目标将碎片化的人形机器人开发统一为端到端流水线。当前开发者需耗费大量时间配置基础设施,GR00T 提供可重复工作流,支持任务特定技能训练到部署的全链路。

via
NVIDIA Developer Blog(官方机器人技术博客)
#02

RoboSnap 框架仅需一张图像即可一键构建可交互仿真场景,分层处理前景碰撞优化与背景高斯泼溅保真。实验可回放轨迹、生成策略训练数据,并推出含 564 个真实-仿真场景对的 DROID-Sim 数据集。

via
arXiv cs.RO(机器人学预印本论文)
#03

蚂蚁灵波发布全球首个面向具身智能的视频基础模型 LingBot-Video,专为机器人操控与物理交互任务优化。模型开源填补了具身领域视频基模的空白,推动视频理解从互联网走向真实世界。

via
量子位(AI 科技媒体)
风向 · vibes

What practitioners are saying

BLOG
This startup thinks robotics is about to have its ChatGPT moment
TechCrunch·source
DISCUSSION
全球首个面向具身的视频基模来了!
量子位·source
PAPER
仅需单张RGB图像即可构建可交互的仿真场景,用于泛化机器人学习
RoboSnap (arXiv)·source
研究启示 · insights

Worth re-reading

One-shot real-to-sim 成为可能

RoboSnap 是真实到仿真的框架,仅需单张 RGB 图像即可构建可交互的仿真场景。分层设计:前景物理交互资产经碰撞优化,背景通过 3D 高斯泼溅保留视觉保真度。实验表明能可靠回放轨迹,并发布 DROID-Sim 数据集含 564 个真实场景仿真版本。
RoboSnap, arXiv 2026·source

研究员注:💭 将真实环境一键转化为可重用仿真资产,显著降低 sim-to-real 的数据成本,为大规模策略训练与评估开辟新路径。

双臂 VLA 经验可迁移至无人机

系统梳理 2017-2026 年 183 篇 VLA 文献,指出双臂协调需 14 自由度协同,其策略、训练方法与动作表示可直接迁移至无人机,在严格延迟与载荷限制下实现视觉观测到推力、姿态控制。
VLA 综述, arXiv 2026·source

研究员注:💭 跨形态迁移的发现提示 VLA 架构的通用性,双臂丰富的交互策略或成为无人机自主操控的起点,有望加速空中机器人的智能化。

实用工具 · ship list

Tools, datasets & models shipped today

  • 蚂蚁灵波开源的首个具身视频基础模型,专为机器人操控优化。适合具身智能研究者探索视频理解在物理交互中的落地,填补领域空白。
    量子位
  • RoboSnap 发布的真实-仿真配准数据集,含 564 个场景仿真版。可用于策略训练与评估,作为 real-to-sim 的标准基准,降低对真实数据的依赖。
    RoboSnap, arXiv 2026
今日全部信号 · all sources

Sources of the day

36Kr · 全站文章/ Feed
95

万勋科技发布“柔韧充”自动充电通用服务引擎,以“0.000s无极容差应变”首创混沌服务、全类通解!

万勋科技发布“柔韧充”自动充电通用服务引擎,基于Pliabot柔韧具身架构实现0.000s无极容差应变,以混沌服务模式覆盖公用、专用、家用全类别自动充电场景。该引擎通过仿生柔性结构和神经元多模态AI,解决复杂环境下的安全、容差、防护与部署挑战。现场展示了全球首例公共场站、高海拔极限测试及与特斯拉打通的家用自动充电机器人等成果,推动全场景无人化智驾落地。

  • 柔韧具身架构实现0.000s无极容差应变,满足超快反应要求
  • 混沌服务模式统一解决公用、专用、家用自动充电痛点
  • 展示全球首例高海拔、公共场站及特斯拉打通的家用充电机器人
embodied-airobotic-chargingsoft-robotics
7月9日
arXiv cs.RO (Robotics)/ Feed
95

Ace! Motion Planning of Professional-Level Table Tennis Serves with a Robot Arm

本文针对机器人臂完成乒乓球专业发球任务,提出结合运动基元、模型预测控制和贝叶斯优化的新方法。发球需从无旋转球生成高旋转、精确瞄准并完成多目标优化,物理建模与控制要求极高。生成的发球旋转可达550 rad/s,速度达6.7 m/s,匹配甚至超越精英运动员水平,展示了机器人系统在极限动态操控上的潜力。

  • 乒乓球发球是机器人学中未被充分研究的问题,需极致物理建模与控制
  • 结合运动基元、MPC和贝叶斯优化生成规则合规的专业发球
  • 发球旋转高达550 rad/s,速度达6.7 m/s,超越精英运动员
embodied-airobotic-armtable-tennis
7月8日
arXiv cs.RO (Robotics)/ Feed
95

GemNav: Discrete-Token Visual Robot Navigation using a Multimodal Large Language Model

提出 GemNav,一种基于冻结多模态大语言模型的视觉机器人导航策略,仅通过 LoRA 微调语言塔,无需额外视觉编码器或连续回归头,使用离散 token 表示路径点与导航信号。在仅 8.7 小时的小数据集上训练后,零样本迁移到四种未见环境,在 20 次真实世界试验中平均停止在目标 0.25-0.42m 内。证明离散 token 适应可成为高效、可部署的基础模型机器人导航方案。

  • 用冻结 MLLM + LoRA 实现机器人视觉导航,无需专用视觉编码器
  • 离散 token 统一路径点和导航信号,辅以软解码损失恢复度量结构
  • 仅需 8.7 小时数据,远小于传统方法,实现高效训练
visual navigationmultimodal llmlora
7月8日
arXiv cs.RO (Robotics)/ Feed
95

A Continual Learning Framework for Adaptive Control of Modular Soft Robots

本文提出一种基于持续学习的控制框架,用于模块化软机器人的自适应控制。该框架能增量适应机器人的形态变化,避免灾难性遗忘,并支持固定配置下的分布式模块动力学学习,实现局部精确控制。在仿真和真实三模块气动软臂上验证了闭环轨迹跟踪,并通过选择性模块激活的达成实验,展示了降低计算开销的自适应能力。

  • 提出持续学习控制框架,增量适应模块化软机器人形态变化
  • 支持固定配置下分布式学习模块动力学,提升局部控制精度
  • 在仿真和真实气动软臂上验证闭环轨迹跟踪性能
continual learningsoft robotsmodular robots
7月8日
arXiv cs.RO (Robotics)/ Feed
95

Vision Language Action (VLA) Models for Unmanned Aerial Robotics and Bimanual Manipulation: A Review

该综述系统梳理了2017-2026年183篇文献,聚焦视觉语言动作(VLA)模型在无人航空机器人和双臂操作中的应用。文章从VLA架构、训练方法、动作表示、双臂协调、无人机导航控制、语言接地及记忆与世界模型七个维度展开,指出双臂VLA的协调策略、训练方法和动作表示可迁移至无人机系统,并提出了十四个跨领域研究方向。

  • VLA模型融合视觉、语言与动作生成,成为机器人操控的主流框架
  • 双臂协调要求14自由度协同完成折叠、装配等复杂操作,是核心测试平台
  • 无人机需在严格延迟与载荷限制下,从视觉观测协调推力、姿态与抓爪
embodied-aivlabimanual-manipulation
7月8日
arXiv cs.RO (Robotics)/ Feed
95

RoboSnap: One-Shot Real-to-Sim Scene Generation for Generalizable Robot Learning and Evaluation

RoboSnap 是一个真实到仿真的框架,仅需单张 RGB 图像即可构建可交互的仿真场景,用于泛化机器人学习和策略评估。其核心采用分层设计:前景物理交互资产经过碰撞优化以确保稳定交互,背景通过 3D 高斯泼溅保留视觉保真度。实验表明,RoboSnap 能可靠回放轨迹、生成任务特定合成数据训练策略,并提供有意义的仿真-真实相关性用于评估。还发布了 DROID-Sim 数据集,包含 564 个真实场景的仿真版本,展示了真实到仿真方法在将真实环境转化为机器人学习可重用基础设施方面的价值。

  • 单张 RGB 图像一键生成物理稳定的仿真场景
  • 分层设计:物理关键区域优化碰撞,背景高斯泼溅保真
  • 支持轨迹回放、策略训练合成数据生成和策略评估
real-to-simrobot-learningsimulation
7月8日
雷锋网/ Feed
95

AMI Labs 冯雁:AI 迈向现实世界,世界模型不可或缺 | ICML 2026

冯雁在ICML 2026指出,AI智能体从数字走向物理世界必需世界模型,用于预测物理演化以辅助决策。她对比了生成式世界模型与JEPA路线,强调JEPA预测抽象表示而非像素,追求因果正确性,参数量更小、推理更快、鲁棒性更强。团队已推出V-JEPA、LeWorldModel等成果,在机器人分层规划等任务领先,并开源数据集与模型推动生态。她也指出LLM/VLM在物理推理基准上远逊人类,存在落地差距。

  • AI智能体需要世界模型预测物理演化,而非依赖文本统计。
  • JEPA预测关键表征而非像素,实现高效、鲁棒的物理推理。
  • LLM/VLM在物理推理基准上远不如人类,不适合直接用于物理世界。
world-modelsjepaembodied-ai
7月8日
36Kr · 全站文章/ Feed
85

2026·Under36丨绕过旧答案的一代人

2026年36氪Under36榜单揭示了年轻创业者正在以技术突破改写商业叙事。入选者中超过七成聚焦AI与机器人领域,尤以具身智能分化明显:鹿明机器人通过低成本数据采集降低示教成本,泉智博规模化量产关节模组,帕西尼以触觉传感仿生灵巧手切入。与此同时,硬科技创业从互联网转向深水区,生命科学、量子计算等领域涌现年轻力量。投资人平均34.4岁,正与技术型创始人直接对话,重塑投资逻辑。

  • Under36入选者七成聚焦AI与机器人,具身智能路线高度分化
  • 鹿明机器人数据采集效率提升5倍、成本降至1/5,泉智博关节模组年出货十万台
  • 帕西尼仿生灵巧手以触觉传感突围,梅卡曼德市占率连续五年居首
embodied-airoboticsyoung-entrepreneurs
7月9日
arXiv cs.CV/ Feed
80

CoMind: Understanding Collaborative Human Activity from Multiple Minds and Views

CoMind 是一个面向人类协作活动理解的多模态数据集,聚焦烹饪场景下的协作行为。它整合了多视角视频、高质量音频、视线追踪、三维场景与物体扫描,并标注了共享注意力、社交线索和智能体间交互等信息。基于该数据集,作者提出了联合注意力估计、社交条件物体交互预测和协作交接预测三个基准,旨在推动多模态感知、主动辅助与协作规划的研究,助力开发能建模复杂社交交互与推理人类行为的 AI 系统。

  • 提供烹饪场景下的多视角、多模态协作活动数据集
  • 包含视线、社交、物体交互等多维标注
  • 设立联合注意力估计与协作交接预测等基准
collaborative-aijoint-attentionhuman-activity-dataset
7月8日
36Kr · 全站文章/ Feed
60

上市前夜|35岁清华学霸冲港股IPO,做出手机指纹中国第二

极豪科技是一家手机生物识别解决方案供应商,2025年在中国市场收入份额第二(14.5%),产品覆盖十大手机品牌中的八家。公司2023-2025年收入复合增速50.1%,已实现经调整净利润转正,但IFRS下仍亏损。核心收入来自光学指纹传感器(占比60%,毛利率45.8%),而技术服务(NRE)收入暴增至3996万元,毛利率62.3%,指向智能眼镜和具身智能的前期开发。团队源自旷视科技,拥有感知交互大模型,试图将技术从手机指纹延伸至新终端,但相关业务仍处早期。

  • 手机指纹识别中国第二,收入三年复合增速50.1%
  • 高毛利光学指纹占比提升推动毛利率升至37.6%
  • 技术服务收入快速增长,布局智能眼镜与具身智能
fingerprint recognitionbiometricsipo
7月8日
钛媒体/ Feed
55

中国AI产业的三大优势(上)

本文分析中国AI产业在稀散金属资源掌控上的战略优势,指出镓、锗、铟、锡、钨等关键材料在全球供给中占比极高,构成AI硬件产业链的‘命门’。这些金属伴生于铝土矿、铅锌矿等,中国凭借冶炼产能主导其供给,并通过出口管制形成反制能力。文章认为,尽管面临高端芯片制造等短板,但资源端优势短期内难以被替代,是中国AI产业发展的压舱石。

  • 中国垄断镓、锗、铟等AI关键稀散金属的全球供给,产量占比超70%
  • 这些金属多伴生矿属性,供给弹性低,中国冶炼产能主导全球链条
  • 稀土在AI服务器散热与机器人电机中不可替代,中国产量占全球70%
ai supply chaincritical mineralsgallium
7月9日
EMBODIED AI DAILY · auto-curated by GPT
Updated daily at 06:00 (your TZ)