Manipulation (8) — 1/1


Paper/Blog Link My Issue
#ComputerVision #Dataset #Robotics #Data #EmbodimentAgnostic Issue Date: 2026-11-10 GPT Summary- 両手による器用なマニピュレーションのために、指の動きをグリッパのジョーへ直接対応付けるYUBIを提案。 柔軟な作動機構とVRベースの6DoF追跡により、直感的で高忠実度なデータ収集を実現。 119タスク・120万エピソード・8,434時間からなる大規模データセットを構築し、UMIを上回る汎用性と器用さを達成。 単一の方策をUR、Franka、ELEYなど複数の両腕ロボットへ転移可能で、ハードウェア・ソフトウェア・データセットを統合したオープンなロボット基盤モデル向けデータ収集基盤を提供。 Comment

pj page: https://yubi.airoa.io/




Paper/Blog Link My Issue
#ComputerVision #Pretraining #Dataset #OpenWeight #PostTraining #Selected Papers/Blogs #VisionLanguageModel #Robotics #reading #EmbodiedAI #EmbodimentAgnostic Issue Date: 2026-11-10 GPT Summary- ロボットデータを収集せず、YUBIを用いた16,151時間のハンドヘルド・デモンストレーションから両手操作システムA-0を学習。手首カメラのみで、部品の仕分けや清掃ロボットの部品交換、ファスナー開閉、タオル折りなど多様なタスクを実行し、未学習環境にも対応。10タスクで平均成功率78%を達成し、同じデモで追加学習した既存モデルの最高性能27%を大幅に上回った。強化学習やロボット上での修正を必要とせず、複数のロボットに対応するembodiment-agnosticな設計を実現。大規模なハンドヘルド・グリッパー・デモンストレーションデータセット、事前学習済みモデル、追加学習手順を公開。 Comment

元ポスト:

Loading…

HF: https://huggingface.co/airoa-org/AIRoA-0
github: https://github.com/airoa-org/AIRoA-0

関連:
- [Paper Note] YUBI: Yielding Universal Bidigital Interface for Bimanual Dexterous Manipulation at Scale, Takehiko Ohkawa+, arXiv'26, 2026.06




Paper/Blog Link My Issue
#Distillation #Robotics #CoRL #EmbodiedAI #One-Line Notes #TreeSearch #LongHorizon #Simulation Issue Date: 2026-11-07 GPT Summary- 長期ホライズンのマニピュレーションに対して、MCTSで生成した計画を方策・価値モデルに蒸留。連続行動は方策が提案し、価値関数が評価することで、探索と学習を反復。最終的に、テスト時の探索なしで実行可能な方策を獲得し、シミュレーションおよび実世界の再配置タスクで既存手法を上回った。 Comment

元ポスト:

Loading…

MCTSによって長期タスクの実行をシミュレーションし、得られた探索木の情報に基づいてポリシーとQ関数を蒸留することを繰り返す。これにより、ポリシーに長期タスクにおいて実行可能なアクションを出力させる能力を身につけさせ、Q関数によって適切に選択できるようにする、という感じだろうか。




Paper/Blog Link My Issue
#Dataset #Annotation #3D Reconstruction #Robotics #Locomotion #EgocentricView #Data #Author Thread-Post Issue Date: 2026-10-23 GPT Summary- 一人称視点映像から、カメラ・シーン・手・物体を共有世界座標系で関節的に再構成するため、データ収集から自動アノテーション、モデリング、評価までを統合したEgoXperienceを提案。 EgoX-Engineは物体追跡とSLAMを用いて一貫した教師信号を生成し、50時間のEgoX-Data-6Mと1時間の評価用EgoX-Benchを構築。 単眼映像と初期物体マスクから単一フォワードパスで各要素を再構成するEgoXにより、カメラ・手・深度の誤差を最大68.9%削減し、物体姿勢の性能を28.0%向上。 Comment

元ポスト:

Loading…

pj page: https://ropedia.github.io/EgoXperience/




Paper/Blog Link My Issue
#Dataset #Evaluation #read-later #Selected Papers/Blogs #Robotics #VisionLanguageActionModel #One-Line Notes Issue Date: 2026-01-31 GPT Summary- 動的オブジェクト操作に挑む「DynamicVLA」フレームワークを提案。畳み込み視覚エンコーダで迅速なマルチモーダル推論を実現し、連続推論で迅速な適応を促進。潜在認識アクションストリーミングにより認識と実行のギャップを埋める。新たに構築したDOMベンチマークで動的操作データを収集し、評価によって顕著な性能向上を示す。 Comment

pj page: https://www.infinitescript.com/project/dynamic-vla/

元ポスト:

Loading…

動くオブジェクト(Donamic Object)に関するデータセットとベンチマークに見える。
既存VLAではできないそこそこな速度で転がるピンポン玉などを正確に掴むことができるようなデモが掲載されている。興味深い。

コードとデータセットが公開:

Loading…




Paper/Blog Link My Issue
#NeuralNetwork #ComputerVision #MachineLearning #ReinforcementLearning #Self-SupervisedLearning #NeurIPS #read-later #Selected Papers/Blogs #Robotics #Locomotion #ContrastiveReinforcementLearning #EmergentAbilities #Depth Issue Date: 2025-12-01 GPT Summary- 自己教師ありRLのスケーラビリティを改善するため、ネットワークの深さを1024層に増加させることで性能向上を実証。無監督の目標条件設定でエージェントが探索し、目標達成を学ぶ実験を行い、自己教師ありコントラストRLアルゴリズムの性能を向上させた。深さの増加は成功率を高め、行動の質的変化ももたらす。 Comment

元ポスト:

Loading…




Paper/Blog Link My Issue
#Selected Papers/Blogs #Robotics #EmbodiedAI #Data Issue Date: 2026-11-05 GPT Summary- 人間のデモンストレーションから実運用可能なロボットポリシーへ直接スキルを転移するUMIフレームワークを提案。ハンドヘルド型グリッパーにより、携帯性・低コスト・豊富な情報量を備えたデータ収集を実現し、両手操作や動的・精密・長時間の操作にも対応する。推論時の遅延調整と相対軌道による行動表現によって、ハードウェアに依存せず複数のロボットへ展開可能。実世界実験では、新規環境や物体に対するゼロショット一般化を確認し、ハードウェアおよびソフトウェアをオープンソースとして公開。 Comment

元ポスト:

Loading…

pj page: https://umi-gripper.github.io