[コーパス] - 日本語におけるCosmopedia手法の生成文評価-69続き

[YusukeNakamura69]

Overview

Cosmopediaのプロンプト手法を日本語において実験し、生成速度と生成文の評価を行う。

Details

Cosmopediaのプロンプトを用いて、日本語の高品質合成データを各プロンプトで100サンプル作成し、その品質と速度について評価を行う。生成モデルには以下のモデルを使用する。

• llm-jp-3-13b-instruct
• gemma-2-9b-it
• gemma-2-jpn

Resources

• 計算機

  • クラスタ: mdx llm-jp-nvlink
  • ノード種別: gpu (A100x8)
  • ノード台数: 1

• 出力データ:

  • 保存先: llm-jp:/model/experiments/0074_japanese_cosmopedia_100samples

• 開始日: 2024-11-03

• 終了予定日: 2024-11-09