VLA-модель (зрение-язык-действие)

Нейросеть, которая принимает изображение с камер и текстовую команду и выдаёт действия робота.

Вместо программирования каждого шага вы говорите роботу что-то вроде положи красную чашку в раковину, а модель сама решает, как двигать суставами. Одна модель может справляться со множеством задач, поэтому VLA сейчас в центре проектов с гуманоидами.

Покупателю стоит помнить, что технология пока ранняя. Демо часто работают в обстановке, где модель обучали, и ломаются на новой кухне. Спрашивайте про процент успеха в незнакомых местах, сколько длится одно действие и работает ли модель на самом роботе или нужен интернет.

Связанные термины