ymcui / Chinese-LLaMA-Alpaca-2

中文LLaMA-2 & Alpaca-2大模型二期项目 + 64K超长上下文模型 (Chinese LLaMA-2 & Alpaca-2 LLMs with 64K long context models)
Apache License 2.0
7.09k stars 578 forks source link

请问支持全参微调吗? #353

Closed CHAOJICHENG5 closed 1 year ago

CHAOJICHENG5 commented 1 year ago

提交前必须检查以下项目

问题类型

模型训练与精调

基础模型

Others

操作系统

Linux

详细描述问题

# 请在此处粘贴运行代码(请粘贴在本代码块里)

依赖情况(代码类问题务必提供)

# 请在此处粘贴依赖情况(请粘贴在本代码块里)

运行日志或截图

# 请在此处粘贴运行日志(请粘贴在本代码块里)
ymcui commented 1 year ago

需要自己改代码,或者使用其他支持llama全量训练的代码。

CHAOJICHENG5 commented 1 year ago

好的谢谢