打造你的 AI 替身:Draw Things 本地 LoRA 训练方法

社区话题 📺 VFX Pipeline | 数字创意工作流 打造你的 AI 替身:Draw Things 本地 LoRA 训练方法

标签: ,

  • 该话题包含 0 个回复、1 个参与人,并且最后由 追光55 分 前 更新。
正在查看 0 条回复
  • 作者
    帖子
    • #131709

      追光
      参与者

      最近我一直在想,如果一个影视剧中用到多个角色、能不能把角色制作成Lora,这样角色就能迁移、需要几个角色、只需要调用对应的ora组合就可以。想让AI 生成的各种场景中保持脸部、妆容一致,这就需要用到训练自己的ai Lora,通过 Draw Things 就能在本地训练属于自己的 LoRA 模型,当然也可以通过Comfyui等工具来训练。本文将基于最新的 FLUX.2/SD 架构界面,训练自己的AI 角色Lora。

      Screenshot


      训练AI 角色Lora操作方法

      1. 准备数据集 (Dataset)

      在界面的右侧 Dataset 区域:

      添加图片: 点击 “Add” 按钮,上传 15-25 张个人照片。

      Auto Fill Prompt: 建议选择 “Automatic”。它会自动识别你照片里的内容(比如:a man with glasses, smiling)。

      关键点: 确保每张图的描述词开头都加上你的 Trigger Word(触发词)。

      2. 设置超参数 (Hyperparameters)

      参照界面左侧,建议配置如下:

      Base Model (底模): 必须选择本地下载好的模型(如 FLUX.2 [klein])、Qwen image等。

      Output LoRA Name: 给你的模型起个名,例如 MyFaceV1。

      Trigger Word (触发词): 重中之重! 这是一个模型中不存在的唯一词,如 ohwx 或 personname。以后生成图时,输入这个词才会出现你的脸。

      Network Dim (网络维度): 界面默认 32。对于写实人脸,32 或 64 是比较平衡的选择。

      Network Scale: 保持 1.0,这是初始影响力系数。

      Learning Rate (学习率)

      Upper Bound (上限): 建议参考截图中的 0.0004 (4e-4) 或更低(如 1e-4)。
      Lower Bound (下限): 保持 0.0。

      Steps Between Restarts: 截图显示为 200,这代表学习率周期,通常保持默认即可。

      Screenshot


       细节注意

      1. 触发词的唯一性: 不要用 man 或 girl 这种通用词作为触发词,否则 AI 会把所有的男人或女孩都画成你。建议用“姓名拼音+后缀”。

      2. 图片质量:千万别全是用手机前置自拍,需要有远景、半身、特写。
      光线多样化: 室内、室外、暖光、冷光各有一些,模型才不会“学死”。

      3. 设备散热: 训练非常吃 GPU 指令。如果是 Mac,请确保风扇全力运转;如果是 iPad,建议摘掉保护壳,放在通风处,防止过热降频导致速度变慢。

      可能遇到的问题与解决方案

      Q:训练出来的图片不像我怎么办?
      A: 可能是步数(Steps)不够,或者照片中你的脸占比太小。增加几张大头特写图重新训练。

      Q:生成的图片背景总是和我的原始照片一模一样?
      A: 这种情况叫“过拟合”。是因为你在数据集描述(Prompt)里没有把背景写出来。如果你在公园拍的,Caption 必须写 in the park,这样 AI 才知道公园是背景,而不是你身体的一部分。

      Q:训练时程序闪退了。
      A: 显存(Unified Memory)溢出了。尝试调低 Network Dim(比如设为 16)或者关闭其他后台应用。

      Q:如何判断什么时候停止训练?
      A: Draw Things 会在一定步数后保存权重。你可以每隔几百步试着生成一张图。如果脸部特征已经稳定且能顺从提示词换衣服,就可以收工了!

      建议: 第一次训练建议先用 5-10 张图小范围测试,找找感觉,再进行大规模训练。祝大家都能拥有完美的 AI 数字化替身!如果遇到问题可以跟帖留言,共同解决问题。

正在查看 0 条回复
  • 在下方一键注册,登录后就可以回复啦。