yousanのメモ
id:ayousanz
複数のLLMのPerplexityの精度を比較して、文章の自然さを判定を試す
初めに 環境 準備 比較対象のモデル 対象のデータ 複数のモデルでPerplexityの値を取得 結果 初めに 環境 L4 GPU ubuntu22.04 準備 ライブラリをインストールします pip install torch transformers huggingface_hub 比較対象のモデル stabilityai/StableBeluga-7B mistralai/Mistral-7B-Instruct-v0.2 Rakuten/RakutenAI-…