如何在Stable Diffusion中生成动物（动物合成模拟器）

生成动物的教程不多。在本文中，我们将通过一些技术来生成

逼真的动物
可爱的动物图片
动物矢量艺术
具有人体的奇幻动物
使用 ControlNet 控制合成

我们将使用 AUTOMATIC1111 Stable Diffusion GUI 生成动物图像。你可以在 Windows、Mac 或 Google Colab 上使用此 GUI。

逼真的野生动物

由于目标是生成逼真的摄影图像，因此你需要包含关键字“photo”。

prompt提示应该像这样开始

photo of ……

主题

首先，你需要选择主题。例如：Lion、Pack of wolf、Red panda、Peacock、teacup kitty等。

场景

场景控制背景和周围环境。如果不加场景关键词，通常会得到野生动物的自然栖息地。snow、river、tree、forest、grassland, grass field、on a couch都是场景。

灯光

灯光对图像的外观有很大影响。良好的灯光使图像更好看。例如dark studio、rim lighting、sunset、dramatic lighting

其它

使用与相似的现实关键字。例如：dslr、ultra quality、film grain、8K UHD

根据我的经验，这些关键字并不总是越多越好。使用其中的一些就已经可以解决问题了。使用太多可能会导致生成的图片很差。我怀疑这些关键字中的许多都与人类照片相关联，并且可能会损害动物照片。

以下短语可以增强野生动物图像的美感

National Geographic Wildlife photo of the year
The American Landscape Contest
Wildlife photography contest

Model

你应该使用具有写实风格的Model。例如：Realistic Vision、Dreamlike Photoreal。

逼真的动物图像示例

以下是生成真实图像的一些示例prompts。你随意使用或重新混合。

Model: Realistic Vision v2.0

Prompt:

National Geographic Wildlife photo of the year, elephant trunk pointing up in beijing city, night, dark studio, depth of field,

Negative prompt:

deformed, disfigured, underexposed, overexposed

Model: Realistic Vision v2.0

Prompt:

National Geographic Wildlife photo of the year, red panda, evening light, sunset, rim lighting

Negative prompt:

deformed, disfigured

Model: Realistic Vision v2.0

Prompt:

Photo of (Lion:1.2) on a couch, flower in vase, dof, film grain, Fujifilm XT3, crystal clear, 8K UHD, dark studio

Model: Realistic Vision v2.0

Prompt:

National Geographic Wildlife photo of the year, siberian cat on river, evening light, sunset, rim lighting, depth of field

Negative prompt:

deformed, disfigured

Model: Realistic Vision v2.0

Prompt:

National Geographic Wildlife photo of the year, peacock flying , evening light, sunset, rim lighting, depth of field

Negative Prompt:

deformed, disfigured, underexposed, overexposed

可爱动物使用模型

如果你只是想生成一些可爱的动物图片，一个包含“可爱”一词的非常简单的提示就可以完成这项工作。

Model: DreamShaper

Prompt:

A cute kitten

风格

你还可以添加关键字以使用相同的模型进一步修改样式。

Model: DreamShaper

Prompt:

a cute kitty, (extremely detailed CG unity 8k wallpaper), professional majestic impressionism oil painting

Negative prompt:

cartoon, 3d, disfigured, deformed easynegative

Chinese Zodiac LoRA

十二生肖 LoRA以卡通风格生成可爱的动物。将 LoRA 与 sunshinemix_sunlightmixPruned 模型结合使用。

你可以修改下面的提示以生成其他动物。本模型推荐动物有猪、熊、鸡、猴、羊、马、蛇、龙、兔、虎、牛、鼠。

Prompt:

pig, Exquisite City, (sky:1.3), (Miniature tree:1.3),Miniature object, many flowers, glowing mushrooms, (creek:1.3), lots of fruits, cute colorful animal protagonist, Firefly,meteor, Colorful cloud,Complicated background, rainbow, studio lighting, auora, rim light <lora:Chinese zodiac:1>

Negative prompt:

Void background,black background

动物矢量艺术

你可以生成不同矢量艺术风格的动物。

动画风格

The example below uses an anime model with a simple prompt. Many anime models are fine-tuned with people, especially girls. So use the keywords people and girl in the negative prompt to get only the animal. 下面的示例使用带有简单prompt的动画模型。许多动漫模型都是针对人来微调的，尤其是女孩。所以为了只得到动物，在否定提示中使用关键字 people 和 girl 。

Model: MeinaMix

Prompt:

vector art of a horse, white background

Negative prompt:

bad art, amateur, girl, people, riding

动物贴纸

该技术通过在白色背景上绘制贴纸来生成矢量图。它并不总是有效。

Model: Stable Diffusion v2.1 (768)

Prompt:

vector art of a tiger illustration stickers, ((vivid colors, colorful, pastel cute colors)), white background

Negative prompt:

low poly, tetric, mosaic, disfigured, kitsch, ugly, oversaturated, grain, low-res, Deformed, blurry, bad anatomy, disfigured, poorly drawn face, mutation, mutated, extra limb, ugly, poorly drawn hands, missing limb, blurry, floating limbs, disconnected limbs, malformed hands, blur, out of focus, long neck, long body, ugly, disgusting, poorly drawn, mutilated, mangled, old, surreal, pixel-art, black and white, childish low poly, tetric, mosaic