Don’t Judge a Language Model by Its Last Layer: Contrastive Learning with Layer-Wise Attention Pooling

4819

Knowledge Triples

Source Entity	Relationship	Target Entity
Назар аударуға негізделген пуллинг Method	enhances	Контекстуализацияланған сөйлемнің көрінісі Material
Контрастты оқыту Method	improves	Семантикалық іздеу Task
Контрастты оқыту Method	improves	Семантикалық мәтіндік ұқсастық Task
Контрастты оқыту Method	optimizes	Назар аударуға негізделген пуллинг Method
Алдын ала оқытылған тілдік модельдер Method	captures	Лингвистикалық ерекшеліктер Material
Алдын ала оқытылған тілдік модельдер Method	creates	Контекстуализацияланған сөйлемнің көрінісі Material