一、灵魂画手风格LoRA模型训练全流程1.灵魂画手介绍市场热度抖音平台上灵魂画手类短视频非常火爆案例视频获得23万点赞、9.2万转发风格特征具有手绘线稿风格带有类似素描的质感画面简洁生动2.灵魂画手训练全流程1收集图片素材素材要求成对收集需要同时截取影视片段原画面和转绘后的灵魂画手风格画面命名规范两组图片必须一一对应命名如001.png对应001.png数量建议案例中使用450组配对图片进行训练素材处理原图组保持原始影视画面目标组去除水印/LOGO后转换为线稿风格2LoRA训练大师使用模型选择基础模型选择QwenImageEdit2511作为基础模型训练类型根据需求选择特定风格的训练方法案例选择2511版本素材导入数据集创建新建控制组存放原图450张新建目标组存放转绘效果图450张标签设置目标组需统一打标Remove watermarks, logos and text from the image and convert it into a rough line drawing模型配置训练步数计算最大训练轮数×素材数量案例30轮×100张3000步分辨率设置建议512×512像素显存要求适中过程采样采样频率每1轮和每1000步自动采样一次采样设置需要输入完整图片路径如使用003.png作为采样样本使用统一提示词即打标内容显存优化低显存模式显存不足时可开启分块处理优化建议调整交换块数案例设为46启用FP8精度加速训练执行训练监控可实时查看采样结果案例显示1000步即达到良好拟合自动保存按轮次和步数的模型输出模型保存训练完成后生成.safetensors格式模型文件Loss曲线分析监控指标通过Loss曲线判断模型收敛情况优化参考案例中1000步后Loss值已趋于稳定3剪映视频制作制作步骤导出需要转绘的静帧画面在ComfyUI中使用训练好的LoRA模型处理图片将转绘效果导回剪映时间线添加音效、文字和特效工作流配置加载训练好的QwenEdit2511_LHHS_V1模型输入标准提示词生成转绘效果4成片效果展示风格还原成功复现抖音热门灵魂画手风格应用扩展该方法可适配不同风格的转绘需求二、知识小结分类核心步骤技术要点工具/参数示例数据数据集准备收集原图与转绘风格图建立控制组与目标组LoRA训练大师0001.png原图/转绘图数据标注统一打标处理标签规范化去除水印线稿转换批量打标300张模型训练配置训练参数显存优化设置分辨率512/Qwen image edit 25111000步loss值0.12效果验证过程采样检查Loss曲线监控每1000步采样第3轮采样效果达标应用部署模型导入comfyui工作流配置剪映提示词《功勋》转绘案例视频合成素材按序编排音画同步字幕/特效添加荷塘月色背景音乐可点击下方原文链接观看视频教程https://comfyit.cn/blog/241/?invite_codeTSH