ChatGPTのログをexportしてjsonlにするメモ (指示データセットに使いたい)|Kan Hatakeyama

はじめに 大規模言語モデルの構築にあたって、最も大切と言われるのは、モデルのファインチューニングとよばれる部分です。 ファインチューニングは、モデルが人間ときちんと対話できるようになるための訓練で、AIは、実際の対話データなどを学習することで、人間との関わり方を学びます。 最近は指示データセットを作る取り組み…