言葉を聞いて絵を描くテストで、ロボットの応用力を調べる
同じ線を何度もなぞれるだけでは、ロボットが新しいお願いに対応できるか分からない。Xiangyu Xu氏らが発表した研究では、白い画面に言葉で指示された物や配置を描く。正しい絵は一種類とは限らず、線を描く順番もいくつか考えられる。そこで、決まった動きを暗記するだけでは十分ではない。
読む版を選ぶ
版: 探究者. 新しい技術のしくみと、社会にもたらす変化。
Physical AI — 素晴らしい未来への道。



予報 · 2026-11-02 · MSK
朝 · 09:00
2.9°
曇り
風: 北東 1.64 m/s · 0%
昼 · 12:00
4.3°
曇り
風: 北東 1.64 m/s · 3%
夕方 · 18:00
4.9°
曇り
風: 北東 1.25 m/s · 10%
一日: 2.3–6 °C
降水確率: 10%
雨の降るあいだ、私たちにできるのは、人間であることを学ぶことだけ。
号 № 5 ·
rev. 1 · アーカイブ
ロボットの学習や触覚、技能の評価から実用化の課題まで、新しい研究を伝える。
同じ線を何度もなぞれるだけでは、ロボットが新しいお願いに対応できるか分からない。Xiangyu Xu氏らが発表した研究では、白い画面に言葉で指示された物や配置を描く。正しい絵は一種類とは限らず、線を描く順番もいくつか考えられる。そこで、決まった動きを暗記するだけでは十分ではない。
ロボットが練習する仮想の場所を作るには、専門家の時間がかかることがある。Pranjal Aggarwal氏とSean Welleck氏は、プログラムを書くAIエージェントに環境を作らせ、別の確認作業で物理的な条件や課題の設定を点検するGym-Anythingを提案した。扱う仕事の種類は、米国の経済活動に関する資料も参考にして選んでいる。
部屋の地図を見ればドアの位置は分かるが、どちらに開くのか、どれほどの力が必要なのかは分からない。Dibyendu Ghosh氏が提案したPhysVLMMは、動く部品の性質について、まだ分からない部分も含めて記録する方法だ。ロボットが引く力を測ると情報が更新され、計画を立てる仕組みは、決めた危険度の範囲で動かせそうかを問い合わせられる。
人の指とロボットの指は、長さも曲がり方も同じではない。人の動きをそのまま写しても、物に触れる位置がずれてしまうことがある。Haozhe Zhang氏らが発表したTouchBridgeは、人が身につける記録装置とロボット側の装置を組み合わせ、見え方だけでなく、指先がどこに触れたかも記録する方法だ。
ロボットの手は、指の数や曲がる部分の数が機種によって違う。それでも、両手で物を持ち、向きを変える時には、手首と指をうまく合わせる必要がある。Xiaoyu Yang氏とNan Wu氏が提案したAcrossDEX 1.0は、人の動きから学ぶ段階と、仮想環境での練習、ロボットでの記録、カメラを見ながら動きを直す段階をつなぐ方法だ。
新しい研究は、細かなデータ、測定、再現できる評価を重視する。
キーワード
この号の大切なことばを、簡潔に解説します。