metric ID: crowspairs

Детали сущности

Основная информация

ID сущности

crowspairs

Тип сущности

Metric

Английская метка

CrowS Pairs

Русская метка

CrowS Pairs

Казахская метка

CrowS Pairs

Частота

3

Описание

Английское описание

A dataset used to measure bias in language models through pairwise comparisons.

Русское описание

CrowS Pairs - это метрика в области обработки естественного языка (NLP), предназначенная для оценки того, как модели справляются со стереотипами по гендерному и расовому признаку. Эта метрика использует набор пар слов, каждая из которых включает два различных лексических элемента: один соответствует стереотипу, а другой - противоречит ему. CrowS Pairs требует от моделей способности распознавать гендерные или расовые стереотипы в контексте этих пар. В результате эта метрика помогает определить справедливость NLP моделей и глубину их языкового понимания.

Казахское описание

CrowS Pairs - бұл табиғи тілдерді өңдеу (NLP) саласындағы метрика, ол модельдердің гендерлік және нәсілдік стереотиптерді қалай өңдейтінін бағалауға арналған. Бұл метрика парлы сөздер жиынтығын пайдаланады, олардың әрқайсысы екі түрлі сөздік бірлікті қамтиды: біреуі стереотипке сәйкес, екіншісі - стереотипке қарсы. CrowS Pairs бағалау үшін модельдерден бұл жұптардың контекстінде гендерлік немесе нәсілдік стереотиптерді тану қабілетін талап етеді. Нәтижесінде, бұл метрика NLP модельдерінің әділдігін және тілдік түсініктерінің тереңдігін анықтауға көмектеседі.