hikariming / chat-dataset-baseline

人工精调的中文对话数据集和一段chatglm的微调代码
1.13k stars 95 forks source link

我好奇你加了多少自己的信息让他改名的 #50

Open huangtao36 opened 1 year ago

huangtao36 commented 1 year ago

如题,请教

cristianohello commented 1 year ago

+1,如何让他改名?

hikariming commented 1 year ago

大概3-5条?我们使用colab和本地的GPU(显存有32G)显存做了训练,都成功了。 你们看一下我发的示例代码里面的lora的r呢,r设置得不够大就很容易嘴硬

huangtao36 commented 1 year ago

大概3-5条?我们使用colab和本地的GPU(显存有32G)显存做了训练,都成功了。 你们看一下我发的示例代码里面的lora的r呢,r设置得不够大就很容易嘴硬

再请教一下,这个lora的参数的具体含义是?我翻了一些github,发现代码都不太一样呢