Hugging Face 发布开源轻量机器人模型 SmolVLA
Hugging Face 推出 450M 参数的开源机器人视觉-语言-动作模型 SmolVLA,可直接在消费级硬件及 CPU 上运行。该模型完全基于 LeRobot 社区开源数据集预训练,结合 SmolVLM2 与流匹配动作专家架构,并通过视觉 token 压缩和层跳过优化推理延迟。
推荐理由:该模型展示了基于轻量架构与低成本社区数据训练机器人策略的路径,显著降低了具身智能的硬件门槛。
AI 走进物理世界:人形机器人、具身基础模型与真实环境操作能力的进展追踪。
Hugging Face 推出 450M 参数的开源机器人视觉-语言-动作模型 SmolVLA,可直接在消费级硬件及 CPU 上运行。该模型完全基于 LeRobot 社区开源数据集预训练,结合 SmolVLM2 与流匹配动作专家架构,并通过视觉 token 压缩和层跳过优化推理延迟。
推荐理由:该模型展示了基于轻量架构与低成本社区数据训练机器人策略的路径,显著降低了具身智能的硬件门槛。
Hugging Face 宣布收购拥有 9 年开源硬件经验的机器人团队 Pollen Robotics,开始销售开源机器人硬件。首款在售硬件为面向研究与具身智能实验的开源人形机器人 Reachy 2,售价 70,000 美元,具备 7 自由度双臂、全向移动底盘与 VR 遥操作功能。
推荐理由:这是 Hugging Face 首次通过收购直接销售开源硬件机器人,标志着其开源生态从软件平台延伸至具身实体。
NVIDIA 在 GTC 2025 推出面向物理 AI 开发的开源资源,包括 7B 参数的多控制世界基座模型 Cosmos Transfer、开源人形机器人基座模型 Isaac GR00T N1 以及 15TB 的物理 AI 数据集。
推荐理由:文章梳理了面向物理智能的世界基座模型与人形机器人推理模型,为具身智能开发者提供了可控场景生成与双系统控制的开源基线。
Yaak 联合 Hugging Face 的 LeRobot 团队发布开源自动驾驶数据集 Learning to Drive(L2D),专为端到端空间智能与自动驾驶模型训练设计。
推荐理由:数据集结合了驾校教练与学员的双重策略与自然语言指令,为端到端自动驾驶模型提供了大规模真实训练基准。
Hugging Face 正式将 Physical Intelligence 开发的通用机器人视觉-语言-动作模型 π0 与 π0-FAST 移植至 LeRobot 仓库,并提供 PyTorch 版本权重。
推荐理由:原文解析了通用机器人控制模型的注意力掩码与频域动作分词机制,读者可据此在 LeRobot 框架中直接微调和部署策略。
3D Gaussian Splatting 是一种通过离散三维高斯球实现逼真场景实时渲染的光栅化技术。其流程主要包括利用 SfM 提取点云、将点转化为高斯球、借助可微光栅化进行 SGD 优化,并通过自动化密集化与剪枝来细化结构。该方法具备实时渲染与快速训练的优势,但也面临高显存开销、大体积文件以及现有生产渲染管线兼容度低的挑战。
推荐理由:文章梳理了 3D 高斯泼溅的光栅化原理与训练流程,并对比了它在实时渲染质量与显存开销之间的权衡。
OpenAI 训练神经网络控制仿人机械手成功还原魔方,整个训练过程完全在仿真环境中进行。该方案复用了 OpenAI Five 的强化学习代码,并结合了自动域随机化(ADR)技术,使机械手在物理世界中能够承受未曾见过的外部扰动。这表明强化学习可以用于解决现实环境中需要高灵巧度的物理任务。
推荐理由:研究展示了借助自动域随机化技术在纯模拟环境中训练强化学习策略并成功迁移至真实物理硬件的方法。