LlamaFactory 发布 v0.9.5:支持 Qwen3.5/3.6、Gemma 4 与 Transformers v5

LlamaFactory v0.9.5 新增对 Qwen3.5/Qwen3.6/Gemma4 模型的主要支持,并兼容 Transformers v5。

LlamaFactory v0.9.5:追平最新一批模型,并迈进 Transformers v5

LlamaFactory 发布 v0.9.5,官方标题直接点题——「Qwen3.5/3.6, Gemma 4, Transformers v5」。这一版做的是微调框架最该做的事:第一时间把最新开源模型接上,并跟上上游训练栈的大版本。

新接入的模型

类别 模型
主推新增 Qwen3.5、Qwen3.6、Gemma4
更多支持 LiquidAI LFM2.5 / LFM2.5-VL、Phi-4-mini、Youtu-VL、MiniCPM-o-4.5、GLM-4.7-Flash、GLM-OCR

v1 训练栈也在持续完善,覆盖 FSDP2、DeepSpeed、量化、批量生成等。

框架兼容:跟上 Transformers v5

v0.9.5 适配了 Transformers v5,并相应更新 peft、deepspeed 等依赖。对想在 Qwen3.5/Gemma4 上做微调的团队,这一版基本是开箱即用;同时也确保与上游生态保持同步。

别忘了 v0.9.4 起的几处结构性变化

升级前要留意从 v0.9.4 延续下来的变更:仓库已更名为 LlamaFactory;要求 Python 3.11+;安装迁移到 uv(uv pip install llamafactory)。

升级前检查

  1. 先确认 Python ≥ 3.11,按官方说明用 uv 安装。
  2. 在隔离环境校验现有训练脚本在 Transformers v5 下的兼容性后再切换。
  3. 逐项变更与受支持模型清单以官方发布说明为准。
版权声明:本文内容来自 LlamaFactory GitHub Releases 。本平台对该内容进行了编译和整理,仅用于信息传播和学习交流之用。如有侵权,请联系我们进行处理。

用户评价

  • 加载评价中...