LoRA训练实战30:HunyuanVideo1.5人物角色LoRA超详细入门指南!
一、人物角色的LoRA模型训练
LoRA训练大师使用方法
核心功能:通过训练LoRA模型实现角色一致性视频生成,简化训练流程并提升可控性
训练流程:准备角色素材→训练LoRA模型→通过提示词生成视频
1)准备数据集
素材要求:需要准备60-100张角色素材图片(如86张),建议包含多角度、多表情的清晰图像
创建步骤:
点击"新建数据集"按钮
命名数据集(如"AI搅拌手自然语言")
添加素材图片到数据集文件夹
打标方法:
自动打标:支持多种风格(描述式、SD标签、Midjourney格式等)
参数设置:可调整随机度(0-100)、生成长度(短/中/长)和最大token数
触发词:需设置唯一标识词(如"AI搅拌手")并追加到标签头部
2)模型训练配置
基础设置:
任务命名(如"混元video1.5_AI搅拌手V5")
选择基础模型(如"混元video1.5_T2V_720P")
设置保存频率(每20轮/每1000步保存一次)
硬件配置:
显存<12G:需开启低显存模式(分块处理)
显存≥16G:可关闭优化以获得更快训练速度
3)训练过程监控
过程采样:
可实时查看拟合效果(约1000步开始显现角色特征)
支持自定义采样提示词(如"AI搅拌手在街道上走路")
Loss曲线:
提供按训练步数和训练轮数的双重评估
混元video1.5模型拟合速度较快
4)模型输出与应用
输出文件:
按配置生成多个版本(如step1000/step2000/final)
文件格式为.safetensors(单个约345MB)
格式转换:
混元video1.5模型需转换为ComfyUI专用格式
转换后文件名添加"_comfy"后缀
2.应用案例
示例:道路开车视频生成
关键步骤:
在文生视频工作流中添加训练好的LoRA模型
提示词必须包含触发词(如"AI搅拌手")
设置CFG=6.0、shift=9.00等参数
效果描述:
生成角色驾驶跑车的连贯视频
包含能量爆发、漂移特效等动态效果
视频时长3-5秒,分辨率720P
二、知识小结
| 主题 | 核心步骤 | 技术要点 | 关键参数 | 输出结果 |
| 数据集准备 | 新建数据集/添加素材 | 自动打标功能支持多种风格 | 触发词设置(如"AI搅拌手") | 标准化训练数据集 |
| 模型训练配置 | 新建训练任务 | 混元video 1.5架构选择 | 显存优化设置(12G/16G模式) | 训练任务模板 |
| 训练过程监控 | 实时采样观察 | loss曲线可视化 | 每20轮/1000步自动保存 | 拟合进度展示 |
| 模型格式转换 | Comfyui兼容处理 | 模型文件后缀处理 | 格式转换工具调用 | 适配工作流的模型 |
| 视频生成应用 | 提示词工程 | 触发词绑定技术 | 混元video t2v工作流集成 | 角色动作视频 |
可点击下方链接观看视频教程👇
https://comfyit.cn/blog/211/?invite_code=TSH
LoRA训练大师官网下载地址
https://loramaster.com/
夸克: https://pan.quark.cn/s/a770f2051e2e
百度: https://pan.baidu.com/s/1yOgv2L3AvNJLA2FyJNC8BA?pwd=55hj
云端训练镜像地址(搜LoRA训练大师):https://www.xiangongyun.com/register/7IQBMI
训练实战案例合集:https://comfyit.cn/blog/204/?invite_code=TSH
ComfyUI管理大师(最好用的ComfyUI管理器):https://comfyit.cn//?invite_code=TSH
裙:559826331
