TF IDF weightings

Entity ID

tfidfweightings

Entity Type

Method

English Label

TF IDF weightings

Russian Label

Веса TF IDF

Kazakh Label

TF IDF салмақтары

Frequency

1

English Description

A method of calculating the importance of words in documents, used in the context of GWSC task.

Russian Description

TF-IDF (Term Frequency-Inverse Document Frequency) - табиғи тілдерді өңдеу (NLP) контекстінде жиі қолданылатын әдіс. TF-IDF әрбір сөздің мәтіндерде қаншалықты маңызды екенін анықтауға көмектеседі. Методтың мақсаты - әрбір сөздің термин жиілігі (TF) мен кері құжат жиілігін (IDF) есептеу арқылы, мәтіннің ерекшеліктерін көрсету. TF - сөздің белгілі бір құжаттағы жиілігі, ал IDF - сөздің бүкіл құжаттар жиынтығында қаншалықты сирек кездесетінін анықтайды. TF-IDF қондырмасы, осылайша, жиі кездесетін, бірақ ақпаратты аз беретін сөздерді төмендетіп, сирек кездесетін, бірақ маңызды сөздерді жоғары бағалайды. Бұл әдіс тілдік түсінік, ақпаратты іздеу, мәтіндерді классификациялау және құжаттарды кластерлеу сияқты тапсырмаларда қолданылады.

Kazakh Description

TF-IDF (Term Frequency-Inverse Document Frequency) - табиғи тілдерді өңдеу (NLP) контекстінде жиі қолданылатын әдіс. TF-IDF әрбір сөздің мәтіндерде қаншалықты маңызды екенін анықтауға көмектеседі. Методтың мақсаты - әрбір сөздің термин жиілігі (TF) мен кері құжат жиілігін (IDF) есептеу арқылы, мәтіннің ерекшеліктерін көрсету. TF - сөздің белгілі бір құжаттағы жиілігі, ал IDF - сөздің бүкіл құжаттар жиынтығында қаншалықты сирек кездесетінін анықтайды. TF-IDF қондырмасы, осылайша, жиі кездесетін, бірақ ақпаратты аз беретін сөздерді төмендетіп, сирек кездесетін, бірақ маңызды сөздерді жоғары бағалайды. Бұл әдіс тілдік түсінік, ақпаратты іздеу, мәтіндерді классификациялау және құжаттарды кластерлеу сияқты тапсырмаларда қолданылады.