search

cryscan / web-rwkv

Implementation of the RWKV language model in pure WebGPU/Rust.
Other
210 stars 15 forks source link

提个需求：偿试支持训练，或微调吧 #19

Open longzou opened 4 months ago

longzou commented 4 months ago

如题。

目前，Candle也支持了RWKV，但也是对Vulkan不太支持。web-rwkv如果可以进行LoRA微调就好了，这样可以充分扩展RWKV的能力了。