2024年11月7日
微调LLM时，full、freeze、lora区别
摘要： LLama-Factory支持full、freeze、lora三种微调，区别：1. Full微调：Full微调是指在微调过程中更新整个模型的所有参数。这意味着所有的层和参数都会被更新，并且在微调期间都会参与训练。Full微调通常用于对模型进行全面的调整，以适应新的任务或领域。 2. Freeze微调 阅读全文
posted @ 2024-11-07 20:03 朱小勇 阅读(45) 评论(0) 推荐(0) 编辑