在一处录制、训练和部署:使用 Strands Agents、LeRobot 与 Hugging Face Storage Buckets

2026-08-20 · Hugging Face

在一处录制、训练和部署:使用 Strands Agents、LeRobot 与 Hugging Face Storage Buckets

背景与挑战

当一个 Agent 已能录制演示并推送到 Hugging Face Hub 后,下一步是将其转化为持续运行的循环:全天收集 episode、在不断增长的数据集上训练策略、部署策略,并拉取下一批数据进行迭代。然而,重复运行会带来显著开销——录制文件持续增长,每次训练都要将整个数据集复制到 GPU,新检查点不断传输,同时下一批录制数据又要回传。

Strands Robots 介绍

Strands Robots 是 AWS 发布的开源 SDK(Apache 2.0),它将机器人抽象、仿真环境和 LeRobot 技术栈以 AgentTools 形式提供,可组合成单一 Strands Agent。本系列第一篇文章介绍了 Robot() 工厂、仿真环境下的演示录制、策略运行,以及将相同 Agent 代码部署到物理 SO-101 机器人。Robot() 工厂通过注册表解析名称,支持多种具身形态(手臂、人形、移动底座、机械手等),本文主要使用 SO-100。

LeRobot 数据集格式已在 Hugging Face Hub 上被超过 9 万个数据集和模型采用,来自 8000 多个发布者。Strands Robots 录制的结果直接兼容该格式,无需任何转换即可被支持 LeRobot 的工具读取。

Hugging Face Storage Buckets

本文重点介绍数据流动的反向路径:从第一帧录制开始,通过 Hugging Face Storage Buckets 最终回到部署的策略。Storage Buckets 是 2026 年 3 月发布的可变、非版本化、基于 Xet 的对象存储仓库类型,与数据集仓库同处于 hf:// 命名空间,可直接使用现有的 hf CLI。它作为工作层,存放从录制当天到训练当天之间的数据,避免重复字节传输。

构建的目标

本文构建的 Agent 能够完成以下闭环:

  • 从自然语言提示录制 LeRobotDataset
  • 将其同步到 Storage Bucket(仅上传变更的字节)
  • 无需本地副本、直接从 Hub 逐帧流式读取数据集,实时解码相机视频
  • 使用同一 Robot() 实例训练策略
  • 通过一个关键字参数变更即可将检查点部署回硬件

同一 Robot() 既负责录制,也负责流式读取数据集。收集数据与在其上训练是同一对象上的两个方法。

核心代码示例

整个循环可以用极少代码实现:


from strands import Agent
from strands_robots import Robot

sim = Robot("so100")  # mode="sim"(默认,安全无硬件)
agent = Agent(tools=[sim])

# 录制演示并同步到 bucket
agent("Record a pick-the-cube demo and sync it to my-org/robot-fave.")

# 从 bucket 直接流式读取进行训练
for batch in sim.stream_dataset("my-org/robot-fave/cube_pick", repo_type="bucket").dataloader(batch_size=64):
    ...

工作原理

四个阶段共享同一后端:

  • `Robot("so100")` 通过共享的 DatasetRecorder 录制 LeRobotDataset
  • `sync_dataset_to_bucket(...)` 将数据同步至 Storage Bucket
  • `stream_dataset(...)` 直接从 Hub 流式读取,无需完整下载
  • 训练后的检查点以 `mode="real"` 部署到同一 Robot

整个流程中磁盘格式始终保持 LeRobot 原始格式。配套可运行示例位于 `examples/notebooks/05_streaming_data_loop.ipynb`。

先决条件

最小配置(默认仿真路径)

  • Python 3.12+,运行于 Linux 或 macOS(支持 Apple Silicon 的 MuJoCo 后端)
  • Strands 兼容的模型提供商(Amazon Bedrock、Anthropic API、OpenAI 或本地 Ollama)
  • 安装 Strands Robots 数据集扩展:`uv pip install -U "strands-robots[sim-mujoco,lerobot]>=0.5.1"`

该命令会拉取 LeRobot (>=0.6.1)、datasets、av 和 torchcodec,支持录制与视频解码。所有阶段均可在满足以上条件的笔记本电脑上运行。

原文链接