arXiv論文：人型ロボットが言葉とカメラ映像から29関節を動かし、狭い室内を移動

結論から言うと、arXiv論文「TANGO」は、人型ロボットが言葉の指示と自分のカメラ映像を使い、家具などがある狭い室内を全身で避けながら進む仕組みを提案しました。論文は2026年9月8日に投稿されています。従来の移動技術は床を上から見た2次元の経路として考えることが多く、肩や腕、胴体が障害物に当たらないよう連続的に姿勢を変える課題を十分に扱えませんでした。

TANGOは、自然言語の指示と一人称RGB映像を入力し、下流の全身制御に使う29自由度の関節動作を直接予測します。学習はすべてシミュレーションで行い、経路計画、運動学に基づく全身動作、障害物を考慮した動作編集、強化学習による追従を組み合わせて教師データを作りました。

実験では強い分割型の基準手法を上回り、実機のUnitree G1にも実世界の移動データで追加学習せず導入できたと著者らは報告しています。利用者に直接使える製品ではありませんが、倉庫や家庭でロボットへ「机の横を通って」のように頼む将来像につながります。

注意点として、結果は著者らのシミュレーションと限られた実機試験に基づく研究段階で、成功率の詳細や未知の建物での安全性は本文と今後の再検証が必要です。