【文献メモ】Coupled Adam によるよりよい埋め込み (ACL 2025) - Qiita
Coupled Adam とは、Adam の 2 次モーメントが埋め込みベクトルを偏在させる仮説に基づき、成分ごとに全トークンで共通の 2 次モーメントを用いるように変更したものです。2025年の ACL 2025(Long Papers)に採択された論文 Better E...