llm-jp / awesome-japanese-llm

日本語LLMまとめ - Overview of Japanese LLMs
https://llm-jp.github.io/awesome-japanese-llm
Apache License 2.0
1.01k stars 31 forks source link

英語を中心に学習されたモデルに日本語で追加学習したもの #2

Closed kaisugi closed 1 year ago

kaisugi commented 1 year ago

参考: https://yuzuai.jp/benchmark

ganchengguang commented 1 year ago

こんにちは、横浜国大森研の甘です。最近、LLaMA2を基づいて、日本語のLLMを訓練しました。よろしければ、加えて嬉しいです。また、今後もっと大きいサイズのモデル更新予定です。https://huggingface.co/ganchengguang/Yoko-7B-Japanese-v1

kaisugi commented 1 year ago

@ganchengguang ありがとうございます!llama2 を QLoRA チューニングしたものですね 👏 👏

自分の時間の都合上、英語を中心に学習されたモデルに日本語で追加学習したモデルはまだリポジトリに載せられていないのですが、概要だけでも載せられるように検討します!

ganchengguang commented 1 year ago

ありがとうございます。