Адаптивті градиентті басқару

method ID: adaptivegradientgating

Нысан мәліметтері

Негізгі ақпарат

Нысан ID

adaptivegradientgating

Нысан түрі

Method

Ағылшын белгісі

Adaptive Gradient Gating

Орыс белгісі

Адаптивное градиентное управление

Қазақ белгісі

Адаптивті градиентті басқару

Жиілік

1

Сипаттама

Ағылшын сипаттамасы

A novel method that addresses the degeneration problem by gating the specific part of the gradient for rare token embeddings.

Орыс сипаттамасы

-

Қазақ сипаттамасы

-