«Яндекс» создаст первый в России физический искусственный интеллект

Основная задача — научить роботов и автономные системы комплексно обрабатывать различные данные. Технология должна быть адаптивной, чтобы подстраиваться под разные типы роботов и транспортных средств.

Одним из ключевых элементов является VLA-модель (Vision-Language-Action), которая преобразует голосовые команды, текст и визуальную информацию с камер в конкретные действия. На текущий момент модель поддерживает более 10 базовых операций, таких как «взять» или «перенести». В перспективе их количество планируется увеличить до сотни.

Для управления роботами разрабатывается система Yandex RMS. Она позволит машинам самостоятельно определять последовательность действий для решения задач, работать в кооперации и запрашивать недостающие данные из смежных систем.

В области автономного транспорта продолжается развитие ML-планировщика на основе нейросети-трансформера. Система обучается на данных о поведении профессиональных водителей. Также используется симулятор для отработки навыков вождения в различных, в том числе редких, ситуациях.