Компания PNDbotics представила Adam — гуманоидного робота, который учится человеческим движениям с помощью алгоритма обучения с подкреплением. Adam ростом 1,6 м и массой 60 кг может адаптироваться к сложным условиям, например, передвигаться по неровным поверхностям. В отличие от традиционных систем, которые эффективны только в предсказуемых условиях, Adam учится на взаимодействии с окружающим миром.
Традиционные системы управления роботами, основанные на точных математических моделях и предопределенном планировании движений хорошо работают в предсказуемых условиях. Но они теряют эффективность в сложной изменяющейся среде, где невозможно заранее все просчитать. Решением может стать глубокое обучение с подкреплением (RL), которое позволяет роботам самостоятельно учиться на взаимодействии с окружающим миром. Этот подход хорошо показал себя на четвероногих роботах, но использовать его для гуманоидов сложно и дорого.