Робот научился подниматься по лестнице, которую видит впервые.
Исследователи из Amazon учат человекоподобных роботов взбираться по лестницам, которых они никогда раньше не видели, со скоростью человека, а затем выполнять работу, не падая.
Команда передовой исследовательской лаборатории технологического гиганта Amazon FAR только что представила платформу под названием LadderMan, которая обучает человекоподобных роботов работать в опасных условиях на высоте. Система была разработана в сотрудничестве с Университетом Южной Калифорнии, Калифорнийским университетом в Беркли, Стэнфордским университетом и Университетом Карнеги — Меллон.
«Возможность для человекоподобных роботов уверенно взбираться по лестницам и работать на них — ключевой шаг на пути к их использованию в промышленных условиях, например на строительных площадках, складах и при выполнении задач по техническому обслуживанию», — пишут исследователи в своей работе.
Они начали с того, что с помощью системы захвата движения OptiTrack сняли на видео, как человек взбирается по лестнице. Это видео послужило шаблоном для обучения китайского человекоподобного робота Unitree G1 в симуляторе. Затем цифровой двойник робота тренировался на различных лестницах с разными углами наклона и расстоянием между перекладинами.
Затем LadderMan объединил эти тренировочные восхождения в единую систему искусственного интеллекта, которая могла бы смотреть на новую лестницу и определять, куда ставить руки и ноги. Робот воспринимает лестницу в основном с помощью функции глубинного зрения. Команда использовала базовую модель машинного зрения, чтобы очистить необработанные данные о глубине, получаемые с камеры, и сделать так, чтобы перекладины лестницы отображались более четко и последовательно. Кроме того, они научили систему фокусироваться на перекладинах, не отвлекаясь на боковые перила и фоновые объекты.
Бодро. Так скоро научат по скалам перемещаться.
Источник: https://ladderman-robot.github.io/
#Amazon #Unitree #LadderMan
@news_UAV
Исследователи из Amazon учат человекоподобных роботов взбираться по лестницам, которых они никогда раньше не видели, со скоростью человека, а затем выполнять работу, не падая.
Команда передовой исследовательской лаборатории технологического гиганта Amazon FAR только что представила платформу под названием LadderMan, которая обучает человекоподобных роботов работать в опасных условиях на высоте. Система была разработана в сотрудничестве с Университетом Южной Калифорнии, Калифорнийским университетом в Беркли, Стэнфордским университетом и Университетом Карнеги — Меллон.
«Возможность для человекоподобных роботов уверенно взбираться по лестницам и работать на них — ключевой шаг на пути к их использованию в промышленных условиях, например на строительных площадках, складах и при выполнении задач по техническому обслуживанию», — пишут исследователи в своей работе.
Они начали с того, что с помощью системы захвата движения OptiTrack сняли на видео, как человек взбирается по лестнице. Это видео послужило шаблоном для обучения китайского человекоподобного робота Unitree G1 в симуляторе. Затем цифровой двойник робота тренировался на различных лестницах с разными углами наклона и расстоянием между перекладинами.
Затем LadderMan объединил эти тренировочные восхождения в единую систему искусственного интеллекта, которая могла бы смотреть на новую лестницу и определять, куда ставить руки и ноги. Робот воспринимает лестницу в основном с помощью функции глубинного зрения. Команда использовала базовую модель машинного зрения, чтобы очистить необработанные данные о глубине, получаемые с камеры, и сделать так, чтобы перекладины лестницы отображались более четко и последовательно. Кроме того, они научили систему фокусироваться на перекладинах, не отвлекаясь на боковые перила и фоновые объекты.
Бодро. Так скоро научат по скалам перемещаться.
Источник: https://ladderman-robot.github.io/
#Amazon #Unitree #LadderMan
@news_UAV
🔥7💯4🤗3