shirakurak / kaggle-google-ai-assistants-for-data-tasks-with-gemma

0 stars 0 forks source link

「Get started with Gemma using KerasNLP」をノートブックにまとめつつ数学への寄り道を探す #12

Open shirakurak opened 5 months ago

shirakurak commented 5 months ago

面白そう、とこういう観点でタイトルにしてしまったが、そもそもそれは可能なのか?というのがある

→まずはGet started 〜 でやってみる https://ai.google.dev/gemma/docs/get_started

ただ、Gammaのチュートリアルだけやっても、それはノートのタイトルが嘘になってしまう (ので、どんなに小さくてもいいので、数学を入れ込むことを優先したい)

shirakurak commented 5 months ago

ちょっとでも数学に掠れそうなことがあれば、ここにメモしていく

shirakurak commented 5 months ago

プロンプトを調整して上手いことやっているノート探してみるかぁ

Prompt Gemma like a Pro

これとか?

shirakurak commented 5 months ago
shirakurak commented 5 months ago

大きな流れ

  1. まずは普通に聞いてみる
  2. プロンプトを工夫して、教えてもらう
  3. fine tuning的なことを試みる
shirakurak commented 5 months ago

CLMというものは何か?

他にも3つ種類がある

文章生成には、CLMが適している

どのようにしているか?次の文字を予測している

予測とは何か? →確率分布

ここも質問してみる?