LLaMA-Factory

15小时前发布 3 0 0

开源大模型微调框架,通过Web界面零代码完成100+模型的SFT、RLHF与QLoRA训练,支持云端算力调度。

所在地:
中国
语言:
中文、英文
收录时间:
2026-08-26
LLaMA-FactoryLLaMA-Factory
价格免费周期额度会员订阅制
平台网页版命令行API

LLaMA-Factory详细介绍

LLaMA-Factory 是一个把大模型微调这件事从命令行拉进浏览器窗口的开源框架。你不用记 `torchrun` 怎么配、也不用折腾 `deepspeed` 的配置文件,打开 Web 界面选好模型和数据集,点一下就能开始训练。这个项目在 GitHub 上有 7 万多颗星,算是微调领域里热度最高的开源方案之一。

它最核心的卖点是“零代码”。Web UI 把全参数微调、LoRA、QLoRA、冻结微调这些方法都做成了下拉菜单和复选框,数据集上传、格式转换、训练参数调整都在同一个界面里完成。对于刚接触大模型微调的开发者来说,这个门槛确实降到了最低。不过它也不是纯傻瓜式工具,训练要用到 GPU,要么自己买卡,要么租云服务器。官方有一个 Online 平台可以按小时租用 H800 算力,但那个平台本身也将在 2026 年 6 月 20 日停止运营,后续会迁移到新的算力平台。

最省事的地方是模型和数据集的覆盖面。Qwen、DeepSeek、LLaMA、GLM 这些主流模型都预置好了,不用自己去 Hugging Face 上翻。训练过程中可以用 LlamaBoard 实时看 loss 曲线,也可以对接 TensorBoard、Wandb 这些外部监控工具。但要注意的是,如果数据量特别大或者模型参数超过 100B,单卡显存可能会扛不住,需要走分布式训练的配置路线,这时候就绕不开一些命令行操作了。

LLaMA-Factory 更适合那些“想微调模型但不想从零搭环境”的人。它不是生产级的 MLOps 平台,没有 SLA 保障,也没有一键部署到线上的能力,但在“快速验证微调想法”这个环节上,它确实是目前最顺手的开源方案之一。

LLaMA-Factory的核心功能

  • 零代码 Web UI:通过浏览器界面完成模型选择、数据集上传、参数配置与训练启动,无需编写代码。
  • 100+ 模型支持:覆盖 LLaMA、Qwen、DeepSeek、Gemma、GLM-4.1V、Phi 等主流大语言模型与多模态模型。
  • 多种微调算法:支持全参数微调、LoRA、QLoRA、冻结微调,以及 GaLore、BAdam、APOLLO、Muon 等高级优化器。
  • 对齐训练:集成 PPO、DPO、KTO、ORPO 等偏好优化算法,支持 RLHF 与 DPO 对齐训练。
  • 多模态微调:支持图像、视频、音频等多模态数据的微调训练。
  • 训练监控:内置 LlamaBoard,可对接 TensorBoard、Wandb、MLflow、SwanLab 等外部监控工具。
  • 多后端支持:兼容 NVIDIA GPU、AMD GPU 和华为昇腾 NPU。
  • CLI 与 API:提供命令行接口与 OpenAI 风格 API,支持 vLLM/SGLang 推理部署。

LLaMA-Factory的价格详情

免费权益:

框架本身完全开源免费,无任何功能限制。Online 平台提供 LoRA 模型对话与评估限时免费活动,按量计费时仅在实际使用 GPU 资源的时段产生费用,关机即停止计费。价格可能随官方调整。

收费模式:

套餐 价格 包含内容
Online 平台 – 按量计费 1卡 H800:极速尊享 ¥30.72/小时
动态优惠 ¥15.36~30.72/小时
灵动超省 ¥7.68~15.36/小时
NVIDIA H800A GPU
显存 80G,CPU 13cores,MEM 200GB
秒级计费,精确到秒
最低计费金额 0.0001 元
支持 1/2/4/6/8/16/24/32 卡配置
代金券与账户余额抵扣

LLaMA-Factory的应用场景

  • 垂直领域模型定制:用企业内部文档微调通用模型,使其输出符合特定行业术语与业务逻辑。
  • 学术研究快速验证:在论文或实验中快速对比不同微调算法(LoRA vs 全参)的效果差异。
  • 创业团队 MVP 开发:缺乏专业 ML 工程师的团队通过 Web UI 快速完成模型适配,降低试错成本。
  • 多模态能力拓展:将图像、视频数据接入微调流程,让模型具备多模态理解能力。

LLaMA-Factory的适用人群

  • 算法工程师与开发者:LLaMA-Factory 的 Web UI 和 CLI 双模式覆盖了从快速验证到批量调参的不同工作流。
  • 高校科研人员:零代码界面降低了实验门槛,支持快速对比多种微调算法与模型架构。
  • AI 产品经理:无需深入掌握训练细节即可完成模型效果验证,用于产品原型演示。
  • 初创团队与技术爱好者:开源免费的特性适合预算有限但需要快速验证 AI 能力的场景。

同类工具对比

对比维度 LLaMA-Factory(本工具) PEFT Unsloth Axolotl
定位 零代码 Web UI 驱动的开源大模型微调框架,覆盖 100+ 模型与 20+ 算法 Hugging Face 官方高效微调库 专注训练速度与显存优化的微调框架 YAML 配置驱动的微调框架
核心优势 零代码 Web 界面降低门槛、模型与算法覆盖面最广、支持多模态与 RLHF、开源免费 生态完善,与 Transformers 深度集成,社区活跃 训练速度提升 2-5 倍,显存占用降低 80% 配置灵活,适合自动化与批量实验
主要短板 Online 平台即将停运、生产级部署需额外基建、超大规模模型需分布式配置 无 Web UI,需编写代码,学习曲线较陡 模型支持范围相对较窄,无 Web UI 需编写 YAML 配置,无图形界面
价格 框架免费 / Online 平台按量计费(H800 ¥7.68~30.72/小时) 免费开源 免费开源(含商业许可选项) 免费开源
适合谁 需要快速验证微调想法的开发者、科研人员与技术爱好者 熟悉 Hugging Face 生态的开发者 追求极致训练效率的开发者 需要可复现实验配置的团队

相关导航

暂无评论

用户投票:

none
暂无评论...