CrowS Pairs

Entity ID

crowspairs

Entity Type

Metric

English Label

CrowS Pairs

Russian Label

CrowS Pairs

Kazakh Label

CrowS Pairs

Frequency

3

English Description

A dataset used to measure bias in language models through pairwise comparisons.

Russian Description

CrowS Pairs - это метрика в области обработки естественного языка (NLP), предназначенная для оценки того, как модели справляются со стереотипами по гендерному и расовому признаку. Эта метрика использует набор пар слов, каждая из которых включает два различных лексических элемента: один соответствует стереотипу, а другой - противоречит ему. CrowS Pairs требует от моделей способности распознавать гендерные или расовые стереотипы в контексте этих пар. В результате эта метрика помогает определить справедливость NLP моделей и глубину их языкового понимания.

Kazakh Description

CrowS Pairs - бұл табиғи тілдерді өңдеу (NLP) саласындағы метрика, ол модельдердің гендерлік және нәсілдік стереотиптерді қалай өңдейтінін бағалауға арналған. Бұл метрика парлы сөздер жиынтығын пайдаланады, олардың әрқайсысы екі түрлі сөздік бірлікті қамтиды: біреуі стереотипке сәйкес, екіншісі - стереотипке қарсы. CrowS Pairs бағалау үшін модельдерден бұл жұптардың контекстінде гендерлік немесе нәсілдік стереотиптерді тану қабілетін талап етеді. Нәтижесінде, бұл метрика NLP модельдерінің әділдігін және тілдік түсініктерінің тереңдігін анықтауға көмектеседі.