查看原文
其他

如何提高Dreambooth训练AI人像模型的质量?

穿行者2049 今说新语 2024-04-15
前面文章新版Dreambooth训练AI模型教程,效率和效果大幅提升!介绍了近期比较热的Dreambooth微调模型的方法,并且推荐了一个速度较快的Colab。
这里想就一些细节再说明一下,很多朋友喜欢使用自己的照片做第一次训练尝试,有些反馈微调后的模型生成的图像不太像本人,主要原因应该还是模型训练过程的一些细节有问题。从我自己训练模型的结果看,如果是自己的照片训练的模型,可以生成和本人长相相似度高达99%的效果,也就是说拿给别人看,肯定认为是你的真人照片。而且由于逼真度太高,不得不添加一些效果美化一下,否则自己看自己的真实长相会觉得很丑。还有些朋友训练好模型后,不知道怎么应用模型生成其他风格的肖像。
这篇文章就这两个环节介绍一下:训练用的照片和实际生成时的提示语。
训练用照片:
  • 目前的模型建议提供30张以上照片,照片越多效果越好,当然涉及到计算时间和内存占用的平衡,建议最少也要10-30张图片。并且最好拍摄或裁剪到1:1的宽高比。
  • 在30张照片中建议上传全身的照片:半身照片:特写镜头=2:3:5。
  • 照片内容要有变化是训练的关键:改变每张图片的身体姿势,使用来自不同背景、光线、室内外的图片,并显示各种表情和情感。确保你的照片中的眼睛朝不同方向的都有,还可闭上眼睛拍摄一张。你的每张照片都应该向AI提供有关你的新信息供AI学习。
  • 无论你照片中出现什么,都会被过度学习,所以将来生成图像时,你不想与你本人联系起来的东西应该经常改变。也就是说尽可能选择不同的背景,即使只是移动了一点也实际改变了背景。
  • 如果你戴眼镜,最好提供几张不戴眼镜的照片,因为眼镜的最终效果偶尔会出错,所以提供一些不戴眼镜的照片,后期还可以通过提示语添加眼镜。
基础提示语:

<训练关键词>, award winning photo by Patrick Demarchelier(可选择一些知名的肖像摄影师) , 20 megapixels, 32k definition, fashion photography, ultra detailed, precise, elegant

Negative prompt: ((((ugly)))), (((duplicate))), ((morbid)), ((mutilated)), [out of frame], extra fingers, mutated hands, ((poorly drawn hands)), ((poorly drawn face)), (((mutation))), (((deformed))), ((ugly)), blurry, ((bad anatomy)), (((bad proportions))), ((extra limbs)), cloned face, (((disfigured))), out of frame, ugly, extra limbs, (bad anatomy), gross proportions, (malformed limbs), ((missing arms)), ((missing legs)), (((extra arms))), (((extra legs))), mutated hands, (fused fingers), (too many fingers), (((long neck)))

如果使用的SD程序支持负面提示,可以添加以上负面提示,如果不支持,也不影响后面生成的效果。

Steps: 90, Sampler: DPM2 a Karras, CFG scale: 8.5,Size: 512x704, 

采样器根据自己的喜好选择,尺寸的长宽比不易再大。基础提示语测试成功后,说明模型训练没问题了,就可以选择其他各种风格、效果更改提示语,生成你希望的风格照片。还可以试试生成不同年龄的自己的照片。

风格化提示语:<训练关键词> as Captain America
复杂提示语:
Closeup face portrait of a <训练关键词> with black hair and stubbles wearing glasses, smooth soft skin, big dreamy eyes, beautiful intricate colored hair, symmetrical, anime wide eyes, soft lighting, detailed face, by makoto shinkai, stanley artgerm lau, wlop, rossdraws, concept art, digital painting, looking into camera
后面的详细描述可根据自己的实际风格需要,改动修饰词和艺术家,如果是非正方形构图,如下方的高宽比大的构图,可添加上身服饰的详细描述。


推荐阅读以下AI绘画内容:



喜欢可点赞、关注、转发、打赏支持!

继续滑动看下一个
向上滑动看下一个

您可能也对以下帖子感兴趣

文章有问题?点此查看未经处理的缓存