咱们好,我是小鱼姐姐,近期运用Stable Diffusion比较多,堆集整理了一些内容,有空共享给咱们。假如你近期正好在关注AI绘画范畴,能够看看哦。 本文不包含SD怎么安装及运用的内容,比较合适现已解决了安装问题,在寻觅合适的大模型及lora,或许想找一些绘画事例给自己的创造带来一些创意的人。文章总共2000多字,且涉及很多图片,慎重观看哈。下面正式开端。

Stable Diffusion简介

Stable Diffusion 是由 CompVis、Stability AI 和 LAION 共同开发的一个文本转图画模型,它经过 LAION-5B 子集很多的 512×512 图文模型进行训练,咱们只需简略的输入一段文本,Stable Diffusion 就能够敏捷将其转换为图画,同样咱们也能够置入图片或视频,合作文本对其进行处理。

浅显的解说:

StableDiffusion是一种根据分散进程的图画生成模型,能够生成高质量、高分辨率的图画。它经过模拟分散进程,将噪声图画逐渐转化为目标图画。这种模型具有较强的稳定性和可控性,能够生成具有多样化作用和杰出视觉作用的图画。

根底大模型引荐

模型网址引荐:

C站:有预览图、提示词,十分合适新手,能够经过查找自己喜爱的图片来挑选合适的模型。

civitai.com/

最全的模型库:(合适有代码根底的同学运用)

huggingface.co/models

下面引荐几个我在C站发掘的目前最常用的几个模型:

1、美观人物插画风:

阐明:

civitai.com/models/1540…

长处:画人物特别美观

主张调配参数: 采样器:DPM++ 2M Karras 步数20

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

绘画示例:

1、人物人物设计:

提示词示例:((masterpiece)),((nsanely detailed)), ((intricate)),((high quality)) a little girl character, pop-art illustration style, simple,cute, 5 years old girl, full color, blue dress, blue shoes, long brown hair, blue hat, no outline, 3d

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

根据这个人物尝试制作一个4格漫画:

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

2、生成相似的布景+不同的人物:

提示词示例:((masterpiece)),((nsanely detailed)), ((HD Quality)),((exquisite face)) background: The background is a construction site, with skyscrapers under construction, feeling in 1990s shenzhen. character:There is only one 20-year-old smile asian female agent,must appear item:balloon

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

关于这个模型的一个小技巧:

这个模型其他都好,就是你们看我上面生成的图片人物都很精美很美观,可是就是颜色一直是灰蒙蒙的作用。多方查阅之后,找到一个办法,需求下载一个VAE,然后在设置里边勾选上即可:

参阅教程链接:www.bilibili.com/video/BV1Sb…

VAE下载地址:huggingface.co/stabilityai…

怎么运用:

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

下面是比照作用:

((masterpiece)),((best quality))The style of a natural painter includes storybook illustrations, detailed plant illustrations, andlively tableaus. The kawaii girl sitting on a half cut watermelon.

设置VAE前:

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

设置VAE后:

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

2、二次元

阐明:

civitai.com/models/9409…

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

这个是其他地方收集的这个模型的一些运用咒语,能够参阅:

暂时无法在飞书文档外展示此内容

绘画示例:

1、人物设计:

((masterpiece)),((nsanely detailed)), ((intricate)),((high quality)) a little girl character, pop-art illustration style, simple,cute, 5 years old stading girl, full color, red dress, red shoes, long brown hair, red hat, no outline, 3d

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

2、生成故事插画:

((masterpiece)),((nsanely detailed)), ((intricate)),Best quality,anime,Draw a little girl [Zhang Ziyi | Lin Chiling] walking in the park, wearing a beautiful red dress, she showed a surprised expression,suddenly only a cute white kitten in the grass.

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

((masterpiece)),((nsanely detailed)), ((intricate)),((high quality)) 5 years old standing girl, simple,cute, full color, brown hair, yellow dress, black shoes.She stands in a magical garden surrounded by colored flowers . Her big eyes were full of curiosity and surprise.

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

3、超实在风格

阐明:

civitai.com/models/4823…

运用较多,默认实在风格,且调配很多lora作用都不错

主张调配参数:DPM++ SDE Karras+step20

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

绘画示例:

1、生成相似的布景+不同的人物:

绘画提示词:((masterpiece)),((nsanely detailed)), ((HD Quality)),((exquisite face)) background: The background is a construction site, ((skyscrapers under construction)), feeling in 1990s shenzhen china. character:There is only one asian female agent,clear face,20-year-old,smile,must appear item:(an ice cream cone)

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

同样的提示词,加上lora之后,表情质感的确更好一点点

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

4、动画:

civitai.com/models/7371…

长处:调配泡泡玛特lora作用十分棒

主张调配参数:采样器:Euler a+step 28

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

绘画示例:

提示词:(masterpiece),(best quality),(ultra-detailed), (full body:1.2), wide angle,1girl,cute, smile, open mouth, flower, outdoors, running on the grass, blurry, brown hair, blush stickers, long sleeves, bangs, black hair, pink flower, (beautiful detailed face), (beautiful detailed eyes),music, beret, blush, short hair, surrounded by balloons, blue sky and white clouds, lora:blindbox_v1_mix:1

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

5、悬疑风/风景/插画

阐明:

civitai.com/models/1119…

这个模型一开端是想用来做悬疑小说的封面的,后来发现画简笔画、插画竟然也都还行!

主张调配参数:采样器DPM++ 2M Karras +step 20

绘画示例:

1、玄幻风、悬疑风的小说封面、插图:

提示词:gray sky,white clouds,fantasstyle,fantasy,mountains,castle,canyons,fantasy,magic,4k.

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

提示词:

Grand and spectacular scene, big background, small characters, a misty back, fantasy world of cultivating immortals, swords, flowing clothes,4k

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

2、简笔头像:

(races of monotony Line drawing),(flat illustration),minimalism,headshot, line art.

A cute cartoon girl with short hair,stick figure,headshot,bold line illustration,((in the style of Black line drawn drawing)),((traces of monotony line drawing)), clean blue background

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

3、插画

((masterpiece)),((nsanely detailed)), ((HD Quality)),((best quality))kawaii girl sitting on a watermelon, in the style of nature painter, ai yazawa, xiaofei yue, storybook illustrations, detailed botanical illustrations, lively tableaus

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

There is a watermelon on the poster, giving people a refreshing and cool feeling. Watermelon can be cut into pieces to showcase its juicy red interior, surrounded by white water droplets. The background can be light blue to enhance a cool and refreshing atmosphere

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

6、国风

阐明:

civitai.com/models/1041…

主张调配参数:采样器Euler a+step30

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

示例:

1、运用官方的这个提示词直出作用如下:

best quality, masterpiece, highres, 1girl,blush,(seductive smile:0.8),star-shaped pupils,china hanfu,hair ornament,necklace, jewelry,Beautiful face,upon_body, tyndall effect,photorealistic, dark studio, rim lighting, two tone lighting,(high detailed skin:1.2), 8k uhd, dslr, soft lighting, high quality, volumetric lighting, candid, Photograph, high resolution, 4k, 8k, Bokeh

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

2、用lora里边的那个示例的人物的作用:

((masterpiece)),((nsanely detailed)), ((HD Quality)),((best quality))A young lovely girl, upper body shot, clear face,dressed in a beautiful traditional Hanfu. Her hair is neatly coiled into a bun, adorned with bobby pins and an elaborate tiara.

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

LORA简介及引荐

LoRA模型全称是:Low-Rank Adaptation of Large Language Models,浅显的能够理解为Stable-Diffusion中的一个插件,仅需求少量的数据就能够进行训练的一种模型。在生成图片时,LoRA模型会与大模型结合运用,然后实现对输出图片结果的调整。下面是我现已实验体验过的一些lora:(最后会有一组不同lora的运用作用比照)

1、合适插画/二次元adventures:

civitai.com/models/1479…

试用总结:合作deliberate不错

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

2、表情lora

crazy-expressions:二次元

civitai.com/models/5891…

试用总结:合作deliberate不错,出现正脸概率较大

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

3、墨心:

civitai.com/models/1259…

试用总结:合作deliberate不错

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

4、小人书连环画 xiaorenshu

civitai.com/models/1832…

试用总结:合作deliberate不错

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

5、二次元漫画风

[LoCon/LoRA] Airconditioner/空调 Style

civitai.com/models/2260…

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

6、城市景色:

civitai.com/models/1491…

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

7、线条:

civitai.com/models/1993…

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

8、科幻:

civitai.com/models/3048…

试用总结:人物也能够加这个lora,合作deliberate不错

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

9、室内设计:

civitai.com/models/2811…

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

10、亚洲男生:(合适用sd1.5根底大模型)

civitai.com/models/1322…

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

11、人物设计多角度:

合适设计人物charTurnbeta:

civitai.com/models/7252…

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

示例:

为了比照作用,我先用根底大模型deliberate生成一个人物人物,然后调配不同的lora看作用。

((masterpiece)),((nsanely detailed)), ((HD Quality)),((best quality))

A young lovely girl, full body shot, clear face,dressed in a beautiful traditional Hanfu. Her hair is neatly coiled into a bun, adorned with bobby pins and an elaborate tiara.

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

调配不同的lora作用图参阅如下:

Stable Diffusion入门使用技巧及个人实例分享--大模型及lora篇(1)

欢迎看到最后,假如觉得还不错,欢迎点赞收藏哈。后续有空会继续发controlnet的运用技巧、提示词的运用技巧等系列文章,合适初学者观看哈!