Робототехника: данные, контакт и безопасность

Пять исследований проверяют, как представление действий, видео, контакт и проверка риска меняют результат управления.

Новости

WorldBridge: видео новых задач без разметки повышает успех до 55,90%

Представь, что тебе показали видео, как человек раскладывает вещи по полкам, но не рассказали, какие именно движения нужно повторить. Роботу тоже трудно учиться только по картинке. Группа исследователей во главе с Цзюнем Цэнем изучила, может ли видео помочь роботу справляться с заданиями, которых не было среди обычных тренировочных примеров.

281 политика в реальных испытаниях вставки разъёма

Вставить маленький сетевой разъём в нужное гнездо труднее, чем кажется. Нужно правильно повернуть его, подвести ровно и не промахнуться. Исследователи под руководством Аммара Аббаса сравнили способы обучения руки робота с пятью пальцами. Они провели около 1700 попыток на настоящем оборудовании, а не только на экране.

Контактные поверхности вместо копирования углов пальцев

Когда берёшь стакан, важно не просто согнуть пальцы. Нужно коснуться его в подходящих местах, иначе он выскользнет. Исследователи во главе с Чжисюанем Сюем решили учить роботизированные руки по тому, как меняются места прикосновения к предмету. Для этого они использовали изображения с камер у кончиков пальцев и описание поверхности контакта.

TRACE снижает столкновения при слежении за человеком

Представь робота, который должен идти за определённым человеком в людном коридоре. Если перед ним пройдёт кто-то в похожей одежде, робот может ошибиться. Группа исследователей во главе с Минъяном Люем проверила, как улучшение слежения за человеком влияет на безопасность движения.

Hourglass переносит навигацию между разными роботами

В узком коридоре маленький робот на колёсах и большой робот с другой системой поворота не могут ехать совершенно одинаково. Команда «поверни направо» приведёт к разным движениям. Группа Чжидуна Вана предложила учить одну программу планировать путь для нескольких видов роботов, не забывая об их различиях.

Анализ

Представление данных меняет результат

Качество зависит не только от обучения модели, но и от системы координат, данных о контакте и исполнительных ограничений.

Понятия и термины

Словарь выпуска

Ключевые понятия этого выпуска — коротко и по существу.

WorldBridge: Видео и команды робота связывающая модель для новых задач.
RoboTwin 2.0: Виртуальный набор задач манипулирования для сравнения методов.
представление действий: Формат записи команд и координат, влияющий на обучение и исполнение.
облако точек: Трёхмерные точки, описывающие видимую поверхность предметов.
Contact Imitation Interface: Метод переноса навыков по геометрии контакта пальцев.
траектория контакта: Последовательность положений участка соприкосновения пальца и предмета.
TRACE: Фильтр риска для корректировки движения при слежении за человеком.
оценка риска: Расчёт вероятности нежелательного события по признакам ситуации.
Hourglass: Архитектура общей навигации с отдельной динамикой каждой платформы.
модель мира: Предсказатель изменений наблюдаемой сцены после действия.
разъём RJ45: Сетевой соединитель, использованный в эксперименте с точной вставкой пятипальцевой рукой.