Анықталмаған көру және тілмен навигация

Нысан ID

underspecifiedvisionandlanguagenavigation

Нысан түрі

Task

Ағылшын белгісі

Underspecified Vision and Language Navigation

Орыс белгісі

Недостаточно определенная навигация с использованием визуальных и языковых данных

Қазақ белгісі

Анықталмаған көру және тілмен навигация

Жиілік

1

Ағылшын сипаттамасы

A task that evaluates agents using multi level underspecified instructions.

Орыс сипаттамасы

Недостаточно определенная навигация в визуальном и языковом пространстве – это задача в контексте обработки естественного языка (NLP), исследующая взаимодействие между текстом и изображениями. Ее цель – навигация по изображениям на основе текстовых инструкций, предоставленных пользователем. В этой задаче модели принимают текстовые описания, определяют визуальные элементы, соответствующие этим описаниям, и перемещаются по ним. Недостаточная определенность в данной задаче может быть связана с неполнотой или неясностью инструкций. В контексте NLP эта задача важна для понимания и генерации языка, так как позволяет моделям глубже понять взаимосвязь между изображениями и текстами.

Қазақ сипаттамасы

Анықталмаған көрнекі және тілдік навигация – табиғи тілдерді өңдеу (NLP) контекстінде, мәтін мен кескін арасындағы өзара әрекеттесуді зерттейтін тапсырма. Оның мақсаты – пайдаланушының берілген мәтіндік нұсқауларына сүйене отырып, кескіндерде навигациялау. Бұл тапсырмада модельдер мәтіндік сипаттамаларды қабылдап, сол сипаттамаларға сәйкес келетін визуалды элементтерді анықтап, олар арқылы қозғалады. Анықталмағандық осы тапсырмада, мысалы, нұсқаулардың толық емес немесе нақты емес болуы мүмкіндігімен байланысты. NLP контекстінде бұл тапсырма тілдің түсінігі мен генерациясы үшін маңызды, себебі ол модельдерге бейнелер мен мәтіндер арасындағы байланысты тереңірек түсінуге мүмкіндік береді.