Human Scoring

metric ID: humanscoring

Entity Details

Basic Information

Entity ID

humanscoring

Entity Type

Metric

English Label

Human Scoring

Russian Label

Оценка человека

Kazakh Label

Адам бағалауы

Frequency

2

Description

English Description

A score representing human judgments on machine translation quality on a scale of 4 points.

Russian Description

Человеческая оценка (Human Scoring) - это метод в области обработки естественного языка (NLP), используемый для оценки производительности текстов и языковых моделей. Его цель - сравнить результаты автоматизированных систем с оценками человеческих экспертов, чтобы улучшить качество понимания или генерации языка. Процесс человеческой оценки обычно осуществляется путем вычисления среднего значения оценок нескольких экспертов, что показывает, насколько эффективно автоматизированная система. Человеческая оценка играет важную роль в оценке качества языковых моделей, таких как автоматический перевод, генерация текста или системы вопросов и ответов.

Kazakh Description

Адамды бағалау (Human Scoring) - табиғи тілдерді өңдеу (NLP) контекстінде мәтіндер мен тілдік модельдер өнімділігін бағалаудың әдісі. Оның мақсаты - автоматтандырылған жүйелердің нәтижелерін адам сарапшыларының бағалауымен салыстырып, тілдік түсінік немесе генерациядағы сапаны жақсарту. Адамды бағалау процесі, әдетте, бірнеше адам сарапшысының бағаларының орташа мәнін есептеу арқылы жүзеге асырылады, бұл автоматтандырылған жүйенің қаншалықты нәтижелі болғанын көрсетеді. Адамды бағалау тілдік модельдердің, мысалы, автоматтандырылған аударма, мәтін генерациясы немесе сұрақ-жауап жүйелерінің сапасын бағалауда маңызды рөл атқарады.