PEFT 参数高效微调v0.1.0SkillClawHub1002.8kio.clawhub.desperado991128/peft使用 LoRA、QLoRA 及 25+ 方法对 LLM 进行参数高效微调。当需要在有限 GPU 显存下微调大模型(7B-70B)、以极小精度损失训练不到 1% 的参数,或多 adapter 服务时使用。HuggingFace 官方库,与 transformers 生态集成。source在 ClawHub 查看