Навигация по зрению и языку

ID сущности

visionlanguagenavigation

Тип сущности

Task

Английская метка

Vision Language Navigation

Русская метка

Навигация по зрению и языку

Казахская метка

Көру және тіл бойынша навигация

Частота

3

Английское описание

A challenging task that involves navigating in an environment using vision and language.

Русское описание

Навигация на основе визуального языка (Vision Language Navigation) - это задача в области обработки естественного языка (NLP), направленная на понимание визуальной информации и навигацию с использованием языка. Её цель - навигация в реальной среде, выполняя текстовые команды. Например, когда пользователь говорит 'поверни направо' или 'движись вперед', система объединяет эти команды с визуальной информацией, позволяя перемещаться по пространству. Эта задача имеет важное значение для понимания и генерации языка, так как требует от компьютеров взаимодействия с реальным миром через естественный язык.

Казахское описание

Көру Тілін Навигациялау (Vision Language Navigation) - табиғи тіл өңдеу (NLP) контекстінде визуалды ақпаратты түсіну мен тілді пайдаланып навигация жасауға арналған тапсырма. Оның мақсаты - мәтіндік нұсқауларды орындау арқылы нақты ортада навигациялау. Мысалы, пайдаланушы 'оңға бұрыл' немесе 'алға жылжы' деп айтқанда, жүйе бұл нұсқауларды визуалды ақпаратпен біріктіріп, ортада қозғалыс жасауға мүмкіндік береді. Бұл тапсырма тілдік түсіну мен генерацияға маңызды, себебі ол компьютерлердің табиғи тіл арқылы нақты әлеммен өзара әрекеттесуін талап етеді.