Создание достоверной виртуальной среды для обучения робота требует значительных усилий специалистов. Пранджал Аггарвал и Шон Веллек предложили Gym-Anything: программирующие агенты строят симуляции^[1], а проверяющая процедура оценивает качество физической модели и задания. Авторы выбирали виды работ с опорой на структуру экономики США, чтобы выйти за пределы привычных учебных сценариев.

RoboWorld содержит 25 симуляций, 175 учебных сред и 25 отдельных тестовых сред. По словам авторов, даже сильнейшие проверенные модели не выполнили ни одного тестового задания; средняя награда составила 0,06. Это численная оценка внутри симулятора, а не процент успеха реального робота. Исследователи также проверили обучение на повторных попытках, помощь наставника с доступом к внутреннему состоянию симулятора и программно созданные демонстрации.

Несколько подходов улучшили результаты в экспериментальной постановке, но перенос на физическое оборудование пока не гарантирован. Автоматически созданный мир может неверно отражать трение, контакт и неожиданные события настоящего производства.

Инженерная ценность этого результата определяется воспроизводимостью, а не только итоговым числом. При повторении эксперимента нужно зафиксировать оборудование, исходные данные, способ оценки, частоту управления и условия остановки. Важно сопоставлять метод с исходным вариантом при одинаковом бюджете вычислений и числе попыток. Следует отдельно анализировать редкие отказы, а не прятать их за средним значением. Без открытого протокола и повторения на независимой установке исследовательское улучшение остаётся доказательством в пределах выбранного стенда. Прежде чем полагаться на оценки симулятора, необходимо сравнить воспроизведение контактов, трения и условий задачи с измерениями реального оборудования. Низкая оценка в тесте показывает пробел именно в этом испытании.