Unsupervised Multi-document Summarization for News Corpus with Key Synonyms and Contextual Embeddings
1055Authors
nan
Abstract
AbstractInformation overload has been one of the challenges regarding information from the Internet. It is not a matter of information access, instead, the focus had shifted towards the quality of the retrieved data. Particularly in the news domain, multiple outlets report on the same news events but may differ in details. This work considers that different news outlets are more likely to differ in their writing styles and the choice of words, and proposes a method to extract sentences based on their key information by focusing on the shared synonyms in each sentence. Our method also attempts to reduce redundancy through hierarchical clustering and arrange selected sentences on the proposed orderBERT. The results show that the proposed unsupervised framework successfully improves the coverage, coherence, and, meanwhile, reduces the redundancy for a generated summary. Moreover, due to the process of obtaining the dataset, we also propose a data refinement method to alleviate the problems of undesirable texts, which result from the process of automatic scraping.
Keywords
Full Content
������������ �������������� ������������� ��� ���� ������ ���� ��� �������� ��� ���������� ���������� ������� ������� ������ ������������������� �������� �������� �������� ���������� ������� ����� ��������� �� ����������� ������� ��� �������������� ���������� �� �������� �������� �������� ����� ��� ����������� �������� ������ ������ �������� ��� �������������� ��������� �������� ��������� �� ����������� ��������� �������� ������� ������� ������ ������������� �������������� ������������������� �������������������� �������� ����������� �������� ��� ���� ��� �� ��� ���������� ��������� ����������� �� ��� ��� ������� �� �� �� ������ � ������ �� ��� ��������� ������� �������� ��� ����� ��� ������� ������� ��� ������� �� ��� ��������� ����� ������������ �� ��� ���� ������� �������� ������� ������ �� ��� ���� ���� ������ ��� ��� ����� �� �������� ���� ���� ��������� ���� �������� ���� ���� ���� ��� ���� ������ �� ����� �� ����� ����� ��� ������ ��� ��� ������ �� ������ ��� �������� � ������ �� ������� ��������� ����� �� ����� ��� ����������� �� ������ ��� �� ��� ������ �������� �� ���� ���� ������ ��� ������ ���� �������� �� ������ ���������� ������� ������������ ���������� ��� ������� �������� ��������� �� ��� ���� ����� ���������� ��� ������� ���� ���� ��� �������� ������������ ��������� ���� ��������� �������� ��� �������� ��� ������ ����� ����� ���� �������� ��� ���������� ��� � ��������� �������� ��������� ��� �� ��� ������� ������� ����� ��� ������� �� ��������� � ���� ��������� ������ �� �������� �� ��������� ��� ������� �� ����� ������� ������ ����� ������ ���� ��� ������� �� ��������� ��������� � ������������ ���� ������������� �� ������ �� ��� ��� �� ���������� ��� ���� ��������� ����� �� ����� ����� ��������� �� ������� �� � ����� ��� ����� ����� ��� ��� ���� ������ ����� �� �������������� ��� ��������� �� ����� ������ ������ ����� �� ���������� ������������� ��� ����������� �������������� ��� ���� �������� ��������� ���� ��� �������� ��������� ���� ���������� ��� ��������� ������� ���� ����� ��� ������ �� ������ � �������� ���������� ��� ��������� ������������� �� ��� ��� �� ����� ���� ������������� ������� �������� �� �������� � ������� ���� ����� ��������� ��� ���� ���� �� ��� �������� ���� ������ ������������� ��� ���� �� ������� ��� �� ��� ������ �� ������ ��������� ���� �������� ������� ������ �������� ��� ������ �������� �������������� �� ���� ��������� �� ��� �������� �� ���������� ������������� �� �������������� ���� �������� ������ �� ���� ���� ������� ���������� �������� ������ ��� �������������� ���� ���������� ����� ������ ���������� ����� ��� ��������� ��� ������ �� ���� ����� ��� ����� ������� �� ��� �������� ��� ���������� ��� ���������� ��� ����������� �� ��� ������� �� ��� ��������� �������� ����� �� �� ���������� ��������� ���� �������������� ������������� ��� �� �������� ����������� ���������� ��� ���� ���� � ����� �� ����������� �� ����� ��� ������� ���� ���� ���� �� ��� �������� ����� ������ ��� �������������� ������ � ���� ���� ���� ������ ��� ������� ��������� ���� ������ ��� ���� ������ ���������� �� ������� � ������ ���� �� ������� ��� ������� �� �������� ��� ���������� ����������� ���� ��������� ���� ��� ������ �� ������ ��������� �� ��� ���� ����� ��� ������������� �� ������� ��� �������� �� ��������� ����������� ��� ��������� �� �������������� ������������� ��� �� ���� ������� �� …
Content truncated to 500 words
Labeled Text
AbstractInformation overload has been one of the challenges regarding information from the Internet. It is not a matter of information access, instead, the focus had shifted towards the quality of the retrieved data. Particularly in the news domain, multiple outlets report on the same news events but may differ in details. This work considers that different news outlets are more likely to differ in their writing styles and the choice of words, and proposes a method to extract sentences based on their key information by focusing on the shared synonyms in each sentence. Our method also attempts to reduce redundancy through hierarchical clustering and arrange selected sentences on the proposed orderBERT. The results show that the proposed unsupervised framework successfully improves the coverage, coherence, and, meanwhile, reduces the redundancy for a generated summary. Moreover, due to the process of obtaining the dataset, we also propose a data refinement method to alleviate the problems of undesirable texts, which result from the process of automatic scraping.
Publication Details
- Paper ID:
- 1055
- Year:
- 2021
- Publication:
- TIPSTER
- Publication Type:
- conf
- DOI:
- nan