Linxyhaha / DEALRec

Data-efficient Fine-tuning for LLM-based Recommendation (SIGIR'24)
https://arxiv.org/pdf/2401.17197
19 stars 2 forks source link

运行prune.py时,发现缺少alpaca-lora-7B文件 #3

Open wuren519 opened 2 months ago

wuren519 commented 2 months ago

感谢您DEALRec这个工作,我对它很感兴趣。在复现过程中发现缺少alpaca-lora-7B文件,我在网上搜到的alpaca-lora-7B使用会报错,因为我搜到的lora r=16,配置需要lora r=8. parser.add_argument("--resume_from_checkpoint", type=str, default="/storage/xylin/recommendation/LLM/code/alpaca/alpaca-lora-7B/", help="path of the alpaca lora adapter") parser.add_argument("--lora_r", default=8, type=int, help="lora r")

Mithas-114 commented 1 month ago

感谢您DEALRec这个工作,我对它很感兴趣。在复现过程中发现缺少alpaca-lora-7B文件,我在网上搜到的alpaca-lora-7B使用会报错,因为我搜到的lora r=16,配置需要lora r=8. parser.add_argument("--resume_from_checkpoint", type=str, default="/storage/xylin/recommendation/LLM/code/alpaca/alpaca-lora-7B/", help="path of the alpaca lora adapter") parser.add_argument("--lora_r", default=8, type=int, help="lora r")

您好,我也遇到了这个问题,请问您是否有解决方法呢?

Linxyhaha commented 1 month ago

感谢您DEALRec这个工作,我对它很感兴趣。在复现过程中发现缺少alpaca-lora-7B文件,我在网上搜到的alpaca-lora-7B使用会报错,因为我搜到的lora r=16,配置需要lora r=8. parser.add_argument("--resume_from_checkpoint", type=str, default="/storage/xylin/recommendation/LLM/code/alpaca/alpaca-lora-7B/", help="path of the alpaca lora adapter") parser.add_argument("--lora_r", default=8, type=int, help="lora r")

您好,我也遇到了这个问题,请问您是否有解决方法呢?

感谢对我们工作的兴趣 :)

alpaca-lora-7B所使用的文件是我们follow了BIGRec 预训练后的ckpt。

为了方便大家运行,我们将实验中用到的base model (llama-7B)以及预训练好的alpaca-lora-7B 的ckpt 分享在google链接中供使用者下载 :) https://drive.google.com/drive/folders/1q6FpI9QMcHkpIDcBzKeWwEqwqbvvIYCK?usp=sharing

Mithas-114 commented 1 month ago

非常感谢您的分享!祝工作顺利!

wuren519 commented 1 month ago

感谢作者大大的分享!!!