当前位置: 首页 > web >正文

LLaMA-Factory的webui快速入门

一、webui的启动方式

LLaMA-Factory 支持通过 WebUI 零代码微调大语言模型。 在完成安装 后,您可以通过以下指令进入 WebUI:

llamafactory-cli webui

使用上面命令启动服务后,即可使用默认7860端口进行访问。访问地址:http://ip:7860,截止:2025年7月11日,页面结构如下:

二、开始训练前需设置的基本参数

在开始训练模型之前,您需要指定的参数有:

  • 模型名称、路径及模型下载源
  • 训练阶段
  • 微调方法
  • 训练数据集
  • 学习率、训练轮数等训练参数
  • 微调参数等其他参数
  • 输出目录及配置路径

在这里由于我选择了加速方式为unsloth 所以需要在llama-factory的虚拟环境中执行命令:

pip install unsloth

截止当前我安装的包版本如下:

并且需要将计算类型选择”fp16” 否则会报错,报错信息如下:

packages/unsloth/kernels/fast_lora.py", line 259, in forward

    Q = matmul_lora(X, QW, QW_quant, QA, QB, QS)

  File "/usr/local/miniconda3/envs/llama-factory/lib/python3.10/site-packages/unsloth/kernels/utils.py", line 703, in matmul_lora

    out = torch_matmul(X, W, out = out)

RuntimeError: expected mat1 and mat2 to have the same dtype, but got: c10::BFloat16 != c10::Half

参数设置如下:

三、开始训练

至此,即可点击开始进行模型训练。训练完成后,如下图所示:

后台日志窗口如下所示:

http://www.xdnf.cn/news/15377.html

相关文章:

  • NLP-迁移学习
  • 海豚远程控制APP:随时随地,轻松掌控手机
  • [Rust 基础课程]选一个合适的 Rust 编辑器
  • Vue 3 动态ref问题
  • 如何将FPGA设计的验证效率提升1000倍以上(4)
  • MailSpring
  • python excel处理
  • python-enumrate函数
  • 字母异位词分组
  • Linux驱动09 --- 环境搭建
  • 计算机毕业设计Java停车场管理系统 基于Java的智能停车场管理系统开发 Java语言实现的停车场综合管理平台
  • 如何检测自动化设备中的直线导轨品质是否优良?
  • UE5多人MOBA+GAS 19、创建升龙技能,以及带力的被动,为升龙技能添加冷却和消耗
  • 【408考研知识点全面讲解计算机学科专业基础综合(408)】——数据结构之排序
  • SELECT ... INTO OUTFILE和LOAD DATA INFILE
  • 请求服务端获取broker的机房归属信息异常
  • 【C#】GraphicsPath的用法
  • ai批量抠图win和mac都可以用
  • 数据库连接池及其核心特点
  • Spring Boot整合MyBatis+MySQL+Redis单表CRUD教程
  • OneCode 3.0 DDD领域模型开放接口:基于DSMFactory的架构解析与实践指南
  • 创建 UIKit 项目教程
  • 浅谈npm,cnpm,pnpm,npx,nvm,yarn之间的区别
  • 周末总结(2024/07/12)
  • 小架构step系列12:单元测试
  • 为什么有些PDF无法复制文字?原理分析与解决方案
  • 知识宇宙-思考篇:AI大模型如何重塑软件开发流程?
  • MCP选型指南:AWS vs Azure vs GCP vs 国内云厂商深度对比
  • openGauss 的列式存储表时遇到的排序和聚合查询性能问题
  • mybatis模糊匹配采用concat与#{},动态sql讲解