Automatic Reference-free Evaluation

Entity ID

automaticreferencefreeevaluation

Entity Type

Metric

English Label

Automatic Reference-free Evaluation

Russian Label

Автоматическая оценка без ссылок

Kazakh Label

Автоматты сілтеме жоқ бағалау

Frequency

1

English Description

An evaluation metric that compares semantic distribution between source documents and summaries without reference summaries.

Russian Description

Автоматты сілтеме-еркін бағалау (Automatic Reference-free Evaluation) – бұл табиғи тіл өңдеуде (NLP) модельдердің өнімділігін бағалау үшін қолданылатын метрика. Оның мақсаты – адам сілтемелеріне (яғни, алтын стандарттарға) тәуелсіз тексттердің сапасын анықтау. Бұл метрика модельдің шығаруын тілдің табиғи құрылымымен салыстыра отырып, лексикалық, синтаксистік және семантикалық аспектілерін талдайды. Мысалы, генерацияланған мәтіннің бірегейлігі мен мазмұны, сондай-ақ, тілдің грамматикалық құрылымын ескере отырып, бағаланады. Автоматты сілтеме-еркін бағалау тіл түсіну немесе генерациясында маңызды, себебі ол жүйенің өнімділігін жылдам және тиімді бағалауға мүмкіндік береді, адамдық бағалауларға қажеттілікті азайтады.

Kazakh Description

Автоматты сілтеме-еркін бағалау (Automatic Reference-free Evaluation) – бұл табиғи тіл өңдеуде (NLP) модельдердің өнімділігін бағалау үшін қолданылатын метрика. Оның мақсаты – адам сілтемелеріне (яғни, алтын стандарттарға) тәуелсіз тексттердің сапасын анықтау. Бұл метрика модельдің шығаруын тілдің табиғи құрылымымен салыстыра отырып, лексикалық, синтаксистік және семантикалық аспектілерін талдайды. Мысалы, генерацияланған мәтіннің бірегейлігі мен мазмұны, сондай-ақ, тілдің грамматикалық құрылымын ескере отырып, бағаланады. Автоматты сілтеме-еркін бағалау тіл түсіну немесе генерациясында маңызды, себебі ол жүйенің өнімділігін жылдам және тиімді бағалауға мүмкіндік береді, адамдық бағалауларға қажеттілікті азайтады.