Гуманоид Figure 02 от компании Figure освоил естественную походку, что позволяет ему ставить пятку на землю, отталкиваться носком и размахивать руками, подобно человеку. Это стало возможным благодаря обучению с подкреплением, в ходе которого роботы тренировались в симуляторе, имитирующем годы реальных данных. Данная технология дает возможность масштабировать обучение на тысячи андроидов.
Теперь роботы Figure 02 могут имитировать сложные человеческие движения. Используя метод обучения с подкреплением, Figure вознаграждает роботов за корректные действия, при этом анализируя их скорость, энергоэффективность и надежность. В новом видео показаны десять роботов, работающих на одной нейросети без каких-либо изменений, что демонстрирует возможность развертывания множества роботов без необходимости ручной настройки.
Обучение с подкреплением, лежащее в основе этой технологии, базируется на многократном вознаграждении за успешные действия. Тренировка роботов проходила в высокоточной физической симуляции, что позволяло ускорить процесс моделирования за счет использования графических процессоров. Тысячи виртуальных гуманоидов с разными физическими параметрами одновременно обучались в приближенных к реальным условиям, что позволяло им справляться с различными трудностями, такими как скольжение и толчки.
Одним из основных преимуществ подхода, предложенного компанией Figure, является возможность переноса обученной модели из симуляции на реальные роботы без дополнительных настроек. Это сокращает время разработки и значительно увеличивает адаптивность андроидов. Компания уверяет, что они смогли научить роботов ходить при помощи искусственного интеллекта и симуляций в компьютере, что позволяет им двигаться увереннее и быстрее — важные качества для работы, как на заводах, так и в быту.
Figure планирует запустить массовое производство своих роботов к 2025 году, начиная с поставок на заводы и, в последствии, на рынок бытовых роботов. Эта инициатива может существенно изменить рынок робототехники и улучшить качество жизни, предлагая решение для автоматизации различных задач в домашних условиях.