Исследователи из Национального университета Сингапура, Шанхайского Jiao Tong University и Нанкинского университета разработали новый метод обучения роботов манипуляциям с помощью видео из Интернета, сообщает Ferra.
В своей работе, опубликованной на arXiv, ученые предлагают использовать обширные видеозаписи, размещенные в сети, для тренировки алгоритмов роботов.
Метод включает три основных компонента: Real2Sim, Learn@Sim и Sim2Real. Первым этапом является Real2Sim, который отслеживает движение объекта в видео и воспроизводит его в симуляции. Далее, Learn@Sim обучает робота захватывать и размещать объекты, используя алгоритмы усиленного обучения. Последним этапом, Sim2Real, применяется для переноса полученных навыков на реального робота, минимизируя разрыв между симуляцией и реальным миром.
Этот подход позволяет роботам эффективно обучаться манипуляциям, даже если видео снято в различных условиях. В тестах, проведенных на задаче завязывания галстука, система успешно справилась с задачей, продемонстрировав потенциал новой методики для сложных манипуляционных задач.
Будущие исследования будут направлены на расширение этой методики для решения других сложных задач в робототехнике и улучшение навыков роботов через имитационное обучение.
Пенсия 2026
В Казахстане упростили порядок получения пенсии
Налоговый кодекс РК 2026
В Налоговый кодекс вносятся поправки в связи с созданием Курултая и Қазақстан Халық Кеңесі
АЭС
В США начали строить первый ядерный реактор нового поколения
Алматы
Студентку жестоко избила сверстница в Алматы
МРП 2026
Штрафы подросли: за какие нарушения казахстанцам придётся платить до 130 тыс. тенге
Землетрясение
Землетрясение произошло в 300 километрах от Алматы
Бокс
Злейшие обидчики казахстанских боксёров на провальных Олимпиадах: что происходит с ними сейчас
Футбол
МВД Казахстана предупреждает родителей: дети могут передать пароли от аккаунтов мошенникам в интернете
Астана
Почти вдвое больше ЖК появится в Астане в ближайшие 10 лет
Азербайджан
Крушение самолета под Актау: Россия и Азербайджан сделали заявление
Шымкент
Какой будет погода в мегаполисах Казахстана в ближайшие дни
Иран
Гуманитарный груз в Иран направил Казахстан
Нефть
В Казахстане началась подготовка к строительству крупного НПЗ на 10 млн тонн
Закон
Закон об ответственном обращении с животными приняли в Парламенте
Война
Иностранные журналисты заявили, что военные Израиля применили к ним силу
Туризм
В МИД обеспокоены ростом числа инцидентов с казахстанцами за границей
Медицина
Алматинцы стали реже жаловаться на медорганизации: итоги проверок