だれかが物をたなに並べる動画を見たとします。でも、手をどの方向へ何センチ動かしたかは書かれていません。ロボットにとっても、映像だけから作業を覚えるのはむずかしいことです。ジュン・ツェンさんたちの研究チームは、練習したことのない作業でも、動画が助けになるかを調べました。大切なのは、見た場面と実際の手の動きをつなぐことです。

研究では、動画から次にどんな場面になるかを予想するしくみと、その場面に近づくための動きを考えるしくみを組み合わせました。これを動画からの学習^[1]と考えることができます。ただし、人の動きをそのまままねするわけではありません。人とロボットでは手の形や動かせる場所がちがうため、ロボットに合った命令を別に決める必要があります。

新しい作業を行うコンピューター上の試験では、最初の成功率^[2]は25.07％でした。その作業の動画を追加すると55.90％になりました。さらに、動きの命令が付いたお手本^[3]を作業ごとに一つ加えると70.70％になりました。成功率とは、決められた回数のうち、うまくできた割合のことです。この数字は研究で使った試験の結果です。

だからといって、どんなロボットでも動画を一度見れば料理や家具の組み立てができるわけではありません。動画に写っていない力のかけ方や、初めて見る道具への対応には、まだ調べることがあります。今回わかったのは、動画だけでも新しい作業の練習に役立つ場合があるということです。命令のない動画も役立ちましたが、動きの命令が付いたお手本を一つ加えると、さらに結果がよくなりました。