Does QA-based intermediate training help fine-tuning language models for text classification?

28417

Knowledge Triples

Source Entity	Relationship	Target Entity
Тонкая настройка Method	appliesTo	Базовая языковая модель OtherEntity
Тонкая настройка Method	appliesTo	Компактная языковая модель OtherEntity
Промежуточное обучение Method	appliesTo	Классификация пар последовательностей Task
Промежуточное обучение Method	appliesTo	Классификация одиночной последовательности Task
Промежуточное обучение Method	appliesTo	Классификация текста Task
Ответы на вопросы Task	affects	Производительность переноса Metric