[コーパス] - 日本語におけるCosmopedia手法の生成文評価

[YusukeNakamura69]

Overview

Cosmopediaのプロンプト手法を日本語において実験し、生成速度と生成文の評価を行う。

Details

Cosmopediaのプロンプトを用いて、日本語の高品質合成データを各プロンプトで100サンプル作成し、その品質と速度について評価を行う。生成モデルにはgemma-2-9b-itを使用する。

Resources

• 計算機

  • クラスタ: mdx llm-jp-nvlink
  • ノード種別: gpu (A100x8)
  • ノード台数: 1

• 出力データ:

  • 保存先: llm-jp:/model/experiments/0069_japanese_cosmopedia_100samples

• 開始日: 2024-10-26

• 終了予定日: 2024-10-30

[hkiyomaru]

出力データの保存先は特別な理由がなければ llm-jp:/model/experiments/0069_xxx (xxx は実験内容が分かる適当な名前；例えば 0069_japanese_cosmopedia とか) にしてください．

[YusukeNakamura69]

コメントありがとうございます。保存先を追記いたしました。