近年ChatGPTなどのLLMを中心にNLP周りの発展が著しく、いまいち仕組みがわからずに用いている方も多いかもしれません。LLMのベースに用いられるTransformerの処理がブラックボックスになりがちなことから理解は大変なように見えますが、実際はTransformerも基本的なNLP処理の発展だと概ね解釈することができます。 上記を…