TransformerのSelf-Attentionをざっくり解説 - Qiita
はじめに 弊社では、自然言語処理技術を使ったシステム開発を行なっていますが、自然言語処理技術の中の1つにBERTがあります。 以前、BERTの単語ベクトルに関するを書きましたが、その原理についてはよく理解してませんでした。 BERTの単語ベクトルを覗いてみる BERTの単...