Task Success Rate

metric ID: tasksuccessrate

Entity Details

Basic Information

Entity ID

tasksuccessrate

Entity Type

Metric

English Label

Task Success Rate

Russian Label

Коэффициент успеха задачи

Kazakh Label

Тапсырма табыстылығының мөлшері

Frequency

4

Description

English Description

A performance metric indicating the success rate of tasks executed by the agent.

Russian Description

Коэффициент успеха задачи (Task Success Rate, TSR) – это метрика, используемая в контексте обработки естественного языка (NLP) для оценки способности модели выполнять конкретные задачи. TSR обычно измеряет, насколько успешно модель справляется с поставленной задачей, то есть отвечает на запросы или требования пользователей. Например, в диалоговой системе TSR показывает, правильно ли модель ответила на вопрос пользователя. Чем выше TSR, тем эффективнее понимание и генерация языка, так как это отражает способность модели понимать и выполнять конкретные языковые задачи.

Kazakh Description

Мақсатқа жету көрсеткіші (Task Success Rate, TSR) – табиғи тілдерді өңдеу (NLP) контекстінде модельдің нақты тапсырманы орындау қабілетін бағалау үшін қолданылатын метрика. TSR, әдетте, модельдің берілген тапсырманы қаншалықты сәтті орындағанын өлшейді, яғни, пайдаланушының талаптарына немесе сұрауларына жауап беруді қамтиды. Мысалы, диалог жүйесінде, TSR – бұл пайдаланушының қойған сұрағына модельдің дұрыс жауап беруі. TSR жоғары болған сайын, тілдің түсінуі мен генерациясы тиімдірек болады, себебі ол модельдің нақты тілдік тапсырмаларды түсіну мен орындау қабілетін көрсетеді.