roboloom
roboloomは,robotのteleoperationで観測と行動を集め,LeRobotDataset(0.7.0)に保存し,学習した方策で同じrobotを動かすPython packageです.
- 収集:leaderや手に持つ機器でfollowerを動かし,cameraや触覚と一緒に記録する.
- 学習:記録をそのまま
lerobot-trainや自作のmodelで学習する. - 推論と評価:方策でfollowerを動かし,途中で人が介入し,成否を残す.
各nodeはdora-rsのdataflowで別のprocessとして動きます.Session(操作画面,CLI,Python)がdataflowを起動し,episodeの開始・停止・保存を送ります.
flowchart LR
S["Session<br/>操作画面・CLI・Python"]
I["入力<br/>leader・Pika Sense"] --> C["controller"]
P["方策"] --> C
C --> F["follower<br/>Rakuda2・PiPER"]
X["sensor<br/>RealSense・DIGIT"] --> R["recorder"]
F --> R
I --> R
R --> D[("LeRobotDataset")]
S -. "start・stop・save" .-> C
S -.-> R
状態label
機能ごとに,どこまで確かめたかをlabelで示します:実機検証済み 模擬のみ 開発中 設計のみ.定義は 状態label にあります.実機のcommandは,操作者が設定値を照合し,機体ごとに動作を確かめてから使います.模擬の実行やdocsのbuildの成功は,実機の検証ではありません.