#优化器状态卸载

共 3 篇相关文章

分享Qwen3-4B模型微调实践全过程，通过补充100-200条身份稳定数据，成功解决角色混乱问题。详解小模型微调中的数据策略、效果验证方法及MoE架构进阶规划。

Unsloth是GitHub 63K+星标的开源大模型微调工具，支持Gemma 4、Qwen 3、DeepSeek等主流模型，通过LoRA/QLoRA技术将训练速度提升2-5倍，显存降低80%，提供Web UI界面让本地微调大模型变得简单高效。

Unsloth 是 GitHub 63000+ Star 的开源大模型训练工具，支持 Gemma 4、Qwen3、DeepSeek 等主流模型的本地微调，提供 Web UI 界面、显存优化和 2-5 倍训练加速，让消费级 GPU 也能跑通模型微调全流程。