[Подражатель] Робота научили новому навыку по одному видео с человеком: 29 секунд вместо 50 демонстраций и 62% успеха с первой попытки

отметили
12
человека
в архиве

Система HOST повышает успешность выполнения задач с 17% до 62%, не меняя веса обученной нейросети.

Группа, аффилированная с X Square Robot, выложила на arXiv метод HOST (Human-to-robot One-Shot Skill AcquisiTion), позволяющий роботу освоить новый навык, посмотрев всего одно видео с человеком, и сразу применить его, не меняя веса нейросети.

Среднее время «усвоения» составило 29 секунд, а успешность — 62%. До промышленной надёжности ещё далеко, но важно, что HOST не использует демонстрацию как новый обучающий набор, а превращает её в контекстную подсказку для уже обученной, но замороженной модели. Именно это и даёт скорость.

Механика работает так. Система берёт видео с человеком, выполняющим задачу — к примеру, переложить предмет из одной ёмкости в другую, — и оценивает, на какой стадии выполнения находится демонстратор. Затем она предсказывает, как та же стадия должна выглядеть с точки зрения самого робота, то есть переводит человеческую демонстрацию в его собственное «тело» и сенсорику. После этого HOST выводит цепочку действий, которая приведёт робота к такому же результату. Никакого дообучения и множества повторений с разметкой — одна демонстрация и один проход.

Изображение сгенерировано: Nano Banana

Авторы сравнивают HOST с двумя ситуациями: когда робот пытается выполнить задачу вообще без подсказки (zero-shot), успех составляет 17%, и когда систему тонко настраивают на 50 демонстрациях для каждой конкретной задачи. HOST обходит zero-shot на 45 процентных пунктов, а по времени в 507 раз быстрее, чем тонкая настройка на 50 примерах. Однако 62% всё ещё означает, что почти в 4 случаях из 10 робот ошибается. Более того, тесты проводились на своих платформах и своих задачах, без проверки на чужих роботах, в незнакомых помещениях или с другими типами объектов.

Для инженеров-робототехников практический интерес представляет сам подход: замороженная политика, управляемая демонстрацией на этапе вывода, без циклов оптимизации. Если другие группы воспроизведут результат на других роботах и покажут, что 62% можно поднять хотя бы до 85–90% за счёт улучшения модуля оценки прогресса, то HOST может стать шаблоном для быстрой перенастройки промышленных манипуляторов.

Источники: arXiv
Добавил suare suare 15 Августа
Комментарии участников:
suare
+3
suare, 15 Августа , url

Безотходное обучение: все обучающие методики бьют точно в цель без дополнительных усилий по оптимизации и повышению эффективности образовательного процесса.

Никаких повторов, оценок, дополнительных материалов, репетиторов.

«Увидел» навык лучшего в своем деле — повторил его буквально в своем коде без кодирования, да еще сделал его общим достоянием всех машин, работающих в этой области.

Перенастройка нейросетей и роботов под новые задачи происходит каждый раз, снова и снова практически мгновенно и в необходимых масштабах обучаемых роботов и нейросетей:  ни больше, ни меньше — ровно с только, сколько требуется для решения данной задачи

Дуальное обучение нейросетей и роботов ов..

Что такое дуальное обучение

Представьте себе, что вы изучаете новый технологический процесс в понедельник в колледже, а уже во вторник применяете его на реальном заводе под присмотром опытного инженера. Это не идеализированная картинка, а суть дуальной системы образования — модели, где теория и практика объединены в единый, непрерывный поток.

Дуальное обучение — это модель профессиональной подготовки, при которой образовательный процесс органично разделен между учебным заведением и работодателем. То есть студент чередует изучение теоретических дисциплин в аудитории с непосредственным применением этих знаний на реальном рабочем месте в компании-партнере. Это обеспечивает синхронное формирование профессиональных компетенций и практических навыков.

В отличие от традиционной схемы с отдельной практикой, при дуальном обучении студент с первого курса погружен в профессиональную среду. Он проводит часть недели за партой, а другую — на рабочем месте компании-партнера, где закрепляет знания, решает актуальные задачи и осваивает тонкости будущей специальности.

vvsupervv66
+2
vvsupervv66, 15 Августа , url

Только человек может получать навык, поскольку сможет(и это главное) осознано использовать его часть или вообще творчески развить и доработать.

А этот робот просто повторитель.

precedent
+1
precedent, 16 Августа , url

Здравствуй, робот!

djamix
+2
djamix, 17 Августа , url

Ты вообще с чего решил, что я админ или модер?

djamix
+4
djamix, 17 Августа , url

ну ты ведь сам виноват в этом.

 

По поводу моего проекта — вчера модер удалил твой провокационный каммент. Я логи просмотрел.

И он правильно сделал. 

Не стОит туда переносить свою боротьбу с *режЫмом*.

 

Будешь там вести себя, как здесь — калитка.

djamix
+2
djamix, 17 Августа , url

Поясню.

 

Сраться можно, но без фанатизма.

Ты мне сам пообещал, что у меня, как на Н2, не будешь пакостить, клоноводить ( хотя это и так не прокатит) и так дале.

Ты не удержался.

 

Будь взвешен в камментах.

Ты можешь спорить, постить, но, снова, как ты делаешь здесь, устраивать прохохляцкую тему — не получится.

djamix
+1
djamix, 17 Августа , url

Лучше про космос.

 

А ведь ты опять начинаешь пакостить на Юпостере… Ну что за человек.

 

Калитка номер 2

Третья и амба.

djamix
+1
djamix, 17 Августа , url

утомил



Войдите или станьте участником, чтобы комментировать