Underspecified Vision and Language Navigation

Entity ID

underspecifiedvisionandlanguagenavigation

Entity Type

Task

English Label

Underspecified Vision and Language Navigation

Russian Label

Недостаточно определенная навигация с использованием визуальных и языковых данных

Kazakh Label

Анықталмаған көру және тілмен навигация

Frequency

1

English Description

A task that evaluates agents using multi level underspecified instructions.

Russian Description

Недостаточно определенная навигация в визуальном и языковом пространстве – это задача в контексте обработки естественного языка (NLP), исследующая взаимодействие между текстом и изображениями. Ее цель – навигация по изображениям на основе текстовых инструкций, предоставленных пользователем. В этой задаче модели принимают текстовые описания, определяют визуальные элементы, соответствующие этим описаниям, и перемещаются по ним. Недостаточная определенность в данной задаче может быть связана с неполнотой или неясностью инструкций. В контексте NLP эта задача важна для понимания и генерации языка, так как позволяет моделям глубже понять взаимосвязь между изображениями и текстами.

Kazakh Description

Анықталмаған көрнекі және тілдік навигация – табиғи тілдерді өңдеу (NLP) контекстінде, мәтін мен кескін арасындағы өзара әрекеттесуді зерттейтін тапсырма. Оның мақсаты – пайдаланушының берілген мәтіндік нұсқауларына сүйене отырып, кескіндерде навигациялау. Бұл тапсырмада модельдер мәтіндік сипаттамаларды қабылдап, сол сипаттамаларға сәйкес келетін визуалды элементтерді анықтап, олар арқылы қозғалады. Анықталмағандық осы тапсырмада, мысалы, нұсқаулардың толық емес немесе нақты емес болуы мүмкіндігімен байланысты. NLP контекстінде бұл тапсырма тілдің түсінігі мен генерациясы үшін маңызды, себебі ол модельдерге бейнелер мен мәтіндер арасындағы байланысты тереңірек түсінуге мүмкіндік береді.