Перекрытие слов n-gram

metric ID: wordngramoverlap

Детали сущности

Основная информация

ID сущности

wordngramoverlap

Тип сущности

Metric

Английская метка

Word n-gram Overlap

Русская метка

Перекрытие слов n-gram

Казахская метка

Сөз n-gram сәйкес келуі

Частота

1

Описание

Английское описание

A measure of similarity based on the overlap of word n-grams between two texts.

Русское описание

Сөз n-грама сәйкестігі – табиғи тілдерді өңдеу контекстінде мәтіндер арасындағы ұқсастықты өлшеу үшін қолданылатын метрика. Бұл әдіс берілген мәтіндердегі n-грама деп аталатын үзінділердің (n санына байланысты) үлгілерін салыстыру арқылы жұмыс істейді. N-грама – бұл n сөзінен тұратын үзінділер, мысалы, 2-сөздік (биграм) немесе 3-сөздік (триграм). Сөз n-грама сәйкестігі, негізінен, мәтіндерді классификациялау, ақпаратты іздеу және мәтін генерациясы кезінде пайдалы. Мәтіндердің бір-біріне қаншалықты ұқсас екенін анықтау үшін n-грама сәйкестігі жиі қолданылады, өйткені ол тілдік құрылымды, контекстті және мағынаны жақсы түсінуге мүмкіндік береді.

Казахское описание

Сөз n-грама сәйкестігі – табиғи тілдерді өңдеу контекстінде мәтіндер арасындағы ұқсастықты өлшеу үшін қолданылатын метрика. Бұл әдіс берілген мәтіндердегі n-грама деп аталатын үзінділердің (n санына байланысты) үлгілерін салыстыру арқылы жұмыс істейді. N-грама – бұл n сөзінен тұратын үзінділер, мысалы, 2-сөздік (биграм) немесе 3-сөздік (триграм). Сөз n-грама сәйкестігі, негізінен, мәтіндерді классификациялау, ақпаратты іздеу және мәтін генерациясы кезінде пайдалы. Мәтіндердің бір-біріне қаншалықты ұқсас екенін анықтау үшін n-грама сәйкестігі жиі қолданылады, өйткені ол тілдік құрылымды, контекстті және мағынаны жақсы түсінуге мүмкіндік береді.