Apple обучает роботов вести себя как люди с помощью видео и гарнитуры Vision Pro
Apple вместе с ведущими университетами США представила новое исследование, которое может изменить подход к обучению роботов. Вместо традиционного программирования и пошаговых инструкций, инженеры предложили систему, в которой роботы учатся действовать, просто наблюдая за людьми. Название проекта — «Humanoid Policy ∼ Human Policy», и в его основе лежит идея: чтобы научить машину быть более человечной, нужно дать ей возможность смотреть на мир нашими глазами.
Apple всерьез занимается обучением роботов
❗️ПОДПИСЫВАЙСЯ НА НАШ КАНАЛ В ДЗЕНЕ И ЧИТАЙ КРУТЫЕ СТАТЬИ БЕСПЛАТНО
Для обучения использовались видеозаписи от первого лица — более 25 000 кадров, где человек взаимодействует с предметами в реальной жизни, и около 1500 демонстраций с участием робота. Все данные объединили в специальный датасет под названием PH2D, с помощью которого и обучалась модель. Это позволило роботу не просто повторять движения, а понимать, как человек выбирает силу захвата, как удерживает предметы и каким образом адаптирует свои действия к условиям окружающей среды.
В проекте участвовали MIT, Carnegie Mellon, Университет Вашингтона и UC San Diego, а Apple предоставила свои ресурсы и оборудование, и в частности гарнитуру Vision Pro. Камеры и датчики от Apple фиксировали каждое движение, включая мельчайшие взаимодействия с объектами. Полученные данные позволили натренировать модель, которая в реальном времени может копировать поведение человека с точностью до 90%.
Чтобы использовать Vision Pro для обучения роботов, гарнитуру пришлось немного дооснастить. Изображение: 9to5mac.com
Самое интересное — это то, как робот интерпретирует поведение. Он не просто «запоминает» движение, а анализирует причину, по которой человек выбрал то или иное действие. Например, если рука обходит объект, а не берёт его напрямую, система понимает, что это связано с ограниченным пространством, и повторяет это поведение, а не пытается идти по прямой. Это делает движения более естественными и адаптивными к новым условиям.
❗️ПОДПИСЫВАЙСЯ НА ТЕЛЕГРАМ-КАНАЛ СУНДУК АЛИБАБЫ. ТАМ КАЖДЫЙ ДЕНЬ ВЫХОДЯТ ПОДБОРКИ САМЫХ ЛУЧШИХ ТОВАРОВ С АЛИЭКСПРЕСС
Ранее обучение роботов было долгим, ресурсоёмким и требовало точного программирования каждого шага. Новый подход открывает возможность создания универсальных моделей поведения, которые можно переобучать всего за несколько демонстраций. Это приближает нас к тому моменту, когда роботы действительно смогут стать помощниками в быту, на складе или в производстве — без сложной настройки и кодинга.
Исследование — часть более широкой стратегии Apple по развитию искусственного интеллекта и взаимодействия с окружающим миром. Камеры Vision Pro и другие устройства компании уже используются для фиксации поведения, и очевидно, что Apple стремится совместить свои программные и аппаратные возможности для создания умных помощников нового поколения.
Вполне возможно, что в будущем роботы будут учиться у нас так же, как дети — наблюдая, повторяя и совершенствуя свои действия. И Apple уже делает первый шаг к тому, чтобы эти роботы не просто работали, а действительно понимали, как действовать по-человечески.