Компания Generalist AI представила свою новую модель GEN-1.5, которая обучается выполнению физических задач на основе всего лишь одного примера, длительностью от 3 до 12 секунд. Для работы модели достаточно ввести сенсомоторные данные в контекстное окно продолжительностью 30 секунд, после чего робот способен выполнить задачу без необходимости в дообучении или программировании под конкретные задачи.
В ходе тестирования модель продемонстрировала средний уровень успешности выполнения 10 различных манипуляционных задач на уровне 59% без дополнительных корректировок. При добавлении всего 10 градиентных шагов с использованием пяти минут данных для каждой задачи, успешность выполнения возросла до 83%. Этот метод, названный компанией физическим prompting, стал возможен благодаря более чем восьми месяцам непрерывного предобучения на данных о физических взаимодействиях.
Хотя модель GEN-1.5 показывает многообещающие результаты, ее применение в реальных условиях пока не возможно, так как она находится на стадии исследования. Тем не менее, это первый известный случай, когда одноразовое обучение физических навыков было достигнуто в масштабах, что может открыть новые горизонты в области робототехники и искусственного интеллекта.