首页教程
【Stable Diffusion模型】如何在Stable Diffusion中生成逼真的人物
48

【Stable Diffusion模型】如何在Stable Diffusion中生成逼真的人物

AI知识学习小助手
AI知识学习小助手
2023-07-17 17:07

Stable Diffusion最好用的用途之一是生成逼真的人物。它们看起来就像从相机拍摄的一样真实。在这篇文章中,您将学习生成照片风格肖像图像的机制。您将了解用于生成现实人物的提示、模型和升级器

软件

我们将使用 AUTOMATIC1111 Stable Diffusion GUI 来生成逼真的人物。您可以在Windows、 Mac或 Google Colab上使用此 GUI

提示词

在本节中,您将学习如何逐步构建逼真照片风格的高质量提示。

让我们从坐在餐厅外面的一位女士的简单提示开始。让我们使用v1.5 基本模型。

提示词:年轻女子的照片,突出头发,坐在餐厅外,穿着裙子

模型:稳定扩散 v1.5

采样方式:DPM++ 2M Karras

采样步数:20

CFG 规模:7

尺寸:512×768

嗯,事情进展不太顺利…… 负面提示

让我们添加一个否定提示。这个负面提示非常简单。它的目的是产生更好的解剖结构并避免非现实的风格。否定提示:毁容、丑陋、不良、不成熟、卡通、动漫、3D、绘画、黑白

可以看到有所改变:女性看起来更好。上半身看起来还不错,但下半身的解剖结构仍然存在问题。还有很大的改进空间

灯光关键词

摄影师工作的很大一部分是设置良好的灯光。一张好的照片有有趣的灯光。这同样适用于Stable Diffusion 。让我们添加一些照明关键字和控制视角的关键字

  • 边缘照明

  • 演播室灯光

  • 看着相机

提示词:年轻女子的照片,突出头发,坐在餐厅外,穿着裙子,边缘照明,工作室照明,看着相机 负面提示:毁容、丑陋、不良、不成熟、卡通、动漫、3D、绘画、黑白

照片立刻看起来更有趣了。您可能会注意到解剖结构不太正确。不用担心。有很多方法可以修复它。我会在文章的后面部分告诉你。

画质提示词

dslr、超画质、8K、UHD 等关键词可以提高图像质量

提示词:年轻女子的照片, 突出头发, 坐在餐厅外, 穿着裙子, 边缘照明, 工作室照明, 看着相机, 单反相机, 超品质, 锐焦, 锐利, 自由度, 胶片颗粒, Fujifilm XT3, 晶莹剔透, 8K UHD 负面提示:毁容、丑陋、不良、不成熟、卡通、动漫、3D、绘画、黑白

我不能说它们绝对更好,但包含它们肯定不会有什么坏处……

面部细节

最后,一些关键词可以作为甜味剂来描述眼睛和皮肤。这些关键词旨在渲染更真实的面孔

  • 高度细致的光泽眼睛

  • 高细节皮肤

  • 皮肤毛孔

使用这些关键字的副作用是使拍摄对象更靠近相机。

将它们放在一起,我们得到以下最终提示。

提示词:年轻女子的照片, 突出头发, 坐在餐厅外, 穿着裙子, 边缘照明, 工作室照明, 看着相机, 单反相机, 超品质, 锐焦, 锐利, 自由度, 胶片颗粒, Fujifilm XT3, 晶莹剔透, 8K UHD 、高细节光泽眼睛、高细节皮肤、皮肤毛孔

负面提示:毁容、丑陋、不良、不成熟、卡通、动漫、3D、绘画、黑白

您是否对基础模型能够生成这些高质量的逼真图像感到惊讶?我们甚至还没有使用特殊的逼真模型。只会变得更好

控制面孔

混合两个名字

您想在多个图像中生成相同的外观吗?一个技巧是利用名人。他们的外表是他们身体上最容易辨认的部分。所以它们保证是一致的。

但我们通常不想使用他们的脸。他们太容易辨认了。您想要一张具有特定外观的新面孔。

诀窍是使用即时调度来混合两个面。AUTOMATIC1111 中的语法是:[人 1: 人 2: 因素]

Factor是 0 到 1 之间的数字。它表示关键字从人物 1 切换到人物 2 时占总步数的分数。例如,[Ana de Armas:Emma Watson:0.5] 包含 20 步,表示提示使用步骤 1 – 10 中使用Ana de Armas ,步骤 11-20 中使用Emma Watson

您只需将其放入提示符中即可,如下所示。 提示词:年轻女子的照片,[安娜·德·阿玛斯:艾玛·沃森:0.5],突出头发,坐在餐厅外,穿着裙子,边缘照明,工作室照明,看着相机,数码单反相机,超品质,锐焦,锐利,自由度,胶片颗粒, Fujifilm XT3, 晶莹剔透, 8K UHD, 高细节光泽眼睛, 高细节皮肤, 皮肤毛孔 负面提示:毁容、丑陋、不良、不成熟、卡通、动漫、3D、绘画、黑白

通过仔细调整系数,您可以调整两张脸的比例。

混合一个名字

您是否注意到使用两个名字时背景和构图发生了巨大变化?这就是联想效应。女演员的照片通常与某些场景相关,例如颁奖典礼。

整体合成由第一个关键字设置,因为采样器在前几个步骤中降噪最多。

利用这个想法,我们仍然可以在前几步中使用女性,然后只在后面交换名人的名字。这样可以保留构图,同时将普通面孔与名人融合在一起

提示是这样的:年轻的照片[女人:Ana de Armas:0.4],突出头发,坐在餐厅外,穿着连衣裙,边缘照明,工作室照明,看着相机,数码单反相机,超品质,锐焦,粘性锐利,自由度,胶片颗粒, Fujifilm XT3,晶莹剔透,8K UHD,高细节光泽眼睛,高细节皮肤,皮肤毛孔

负面提示可以保持不变:毁容、丑陋、不良、不成熟、卡通、动漫、3D、绘画、黑白

使用这种技术,我们可以在一定程度上控制脸部的同时保持构图

修复脸部

修复是一种既能保持构图又能完全控制脸部的技术。

在 txt2img 选项卡中生成图像后,单击“发送到修复”。

在修复画布中,画一个遮盖脸部的面具。

现在修改提示以包括两个面的混合。例如:年轻的照片 [艾玛·沃森:安娜·德·阿玛斯:0.4],突出头发,坐在餐厅外,穿着裙子,边缘照明,工作室照明,看着相机,数码单反相机,超品质,锐焦,锐利,自由度,胶片颗粒, Fujifilm XT3, 晶莹剔透, 8K UHD, 高细节光泽眼睛, 高细节皮肤, 皮肤毛孔

去噪强度设置为 0.75,批量大小设置为 8。点击“生成”并挑选效果最好的一个

修复缺陷

您不需要一次性生成具有正确解剖结构的逼真人物。重新生成部分图像相当容易。

让我们看一个例子。下图看起来还不错,只是手臂变形了。

要修复此问题,请首先单击发送到修复,将图像和参数发送到 img2img 选项卡的修复部分。

在 img2img 选项卡的修复画布中,在有问题的区域上绘制遮罩

将“种子”设置为 -1(随机),将去噪强度设置为 1,将批量大小设置为 8。

您可以尝试修复区域设置 - 整个图片或仅蒙版。

点击生成。

你会有一些不好的。但纯属偶然,你应该会看到一个像样的。如果没有,请再次按“生成”。

您不需要一次性完成完美的修复。您可以通过修复迭代地优化图像。当您看到图像朝正确方向移动时,请按“发送到修复”。

现在你正在按照新形象行事。逐渐降低去噪强度,以保留图像的内容。下面是进行第二轮修复的示例。去噪强度设置为0.6。

查看更多从零了解Stable Diffusion内容点击:https://www.haoshuo.com/article/64b899356b6e1b749015ef90

转载自查看原文

全部讨论

no data来都来了,坐下聊聊