跳到正文
掘金· 日习一技·· 9 天前AI 评分62

用 TRL 和 PEFT 微调 Qwen3-0.6B-Base:SFT 与 LoRA 实践教程

学习大模型训练的监督微调:SFT 与 LoRA

AI 导读

这篇教程讲清 SFT 与 LoRA 的原理,并给出用 TRL 的 SFTTrainer 加 PEFT 的 LoraConfig 微调 Qwen3-0.6B-Base 的完整代码。

来源:掘金 · juejin.cn