圖生圖基礎
本系列筆記主要參考B站nenly同學的視頻教程,傳送門:B站第一套系統的AI繪畫課!零基礎學會Stable Diffusion,這絕對是你看過的最容易上手的AI繪畫教程 | SD WebUI 保姆級攻略_嗶哩嗶哩_bilibili
本文主要講解如何使用SD中的圖生圖功能
AI繪畫不僅可以基于文本(提示詞)進行創作,它還可以接收圖片信息,根據圖片來生成新的圖片,在短視頻上大火的將照片轉換為二次元風格用法就是通過這個功能實現的。
在生活中經常遇到這種情況,你的老板喋喋不休的對你提需求,但你總是不能很好地get到他所描述的點,這時候老板找到一個類似的參考方案,并告訴你就按這個樣子來做,這時候你就能夠非常清晰的了解老板的需求。這個過程和圖生圖很像,如果說你用提示詞無法準確地向AI表達自己的需求,那么使用一張參考圖,就可以讓AI更懂你的意思。
圖生圖流程
-
導入圖片
圖生圖的整體界面和文生圖類似,只是多出了一個用來傳入圖像的地方,如下圖所示,我們今天先講一下如何使用圖生圖,其余的功能包括局部重繪等后期進行詳細講解。給SD傳入圖像有兩種方法:打開資源管理器或者直接拖拽
-
書寫提示詞
圖生圖也要求提示詞,如果沒有提示詞的話SD可能會識別出錯,比如錯誤地將一個男孩識別成為一個女孩,所以哪怕是最基礎的提示詞也應該寫上,比如1 boy
-
參數調整
圖生圖的參數大部分都和文生圖一樣,多了一個重繪幅度,重繪幅度可以理解為AI作畫的結果和你輸入的圖片的相似程度,數值越大則差距越大,AI發揮的空間更大;數值越小則和輸入圖片越相似,AI發揮空間更小。
參數解釋
分辨率:重新生成的圖片的分辨率最好能夠和原圖保持一致,如果原圖較大,使用AI繪畫一次性畫大分辨率的圖片可能會爆顯存,此時盡量保持和原圖的比例一致
隨機種子使用探索:在多次的繪畫“抽卡”過程中,如果你遇到一個喜歡的人物形象,然后想要改變這個人所處的背景環境,這時如果你直接在提示詞中添加新的背景描述,可能因為抽卡的隨機性,人物又發生了變化,這就不是你想要的效果了。解決方法就是固定隨機種子,這樣可以最大程度保證多次進行抽卡的結果不發生大的變化。
應用
風格遷移
這是AI繪畫最常用的應用,各種短視頻中流行的濾鏡和畫風變化等,自己使用AI的話可以得到更加細致地操作過程,得到更精細控制的出圖
【示例】使用深淵橘模型將一張真人照片轉換為二次元風格,模型的下載和切換參考文章:
示例圖片:
1man, short hair, gold hair, blue eyes, beard, red plaid shirt, woolen hat,(masterpiece:1.2), best quality, masterpiece, highres, original, extremely detailed wallpaper, perfect lighting,(extremely detailed CG:1.2),
Negative prompt: NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbid:1.21), (mutilated:1.21), (tranny:1.331), mutated hands, (poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra limbs, (disfigured:1.331), (missing arms:1.331), (extra legs:1.331), (fused fingers:1.61051), (too many fingers:1.61051), (unclear eyes:1.331), lowers, bad hands, missing fingers, extra digit,bad hands, missing fingers, (((extra arms and legs))),
Steps: 20, Sampler: DPM++ 2M SDE Karras, CFG scale: 7, Seed: 529925132, Size: 800x800, Model hash: 038ba203d8, Model: 二次元:AbyssOrangeMix2_sfw, Denoising strength: 0.6, Clip skip: 2, Version: v1.5.2
這是我使用的出圖設置,在未來你看到的很多作品展示都會附上這樣的描述,如果你想要得到同樣的出圖結果,只需要設置相同的參數即可,我來教你如何讀懂這些參數設置,首先第一部分是正向提示詞,Negative prompt部分為反向提示詞,最后一部分則是出圖參數設置,Steps表示采樣步數,Sampler表示采樣方法,Seed表示隨機種子,Size表示出圖大小,Model為使用的模型,其余的參數你可以不用太在意,通常保持默認即可。如果你想要達到和我一樣的效果,遵循我的參數設置即可,但我更建議你多多設置不同的參數進行實驗,這樣能夠幫助你理解參數的具體含義
生成結果:
靜物擬人化
使用AI繪畫圖生圖功能,我們可以實現將靜物擬人化,比如大家最喜歡的將各種東西娘化
【示例】使用圖生圖把農夫山泉娘化
示例圖片:
SFW, (1girl:1.3), long hair, white hair, face, front, looking at viewer, white shirt, (green belt:1.5), red skirt, red hats, dancing, upper body, standing, (white background:1.5), hands at the back
(masterpiece:1.2), best quality, masterpiece, highres, original, extremely detailed wallpaper, perfect lighting,(extremely detailed CG:1.2),
Negative prompt: NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbid:1.21), (mutilated:1.21), (tranny:1.331), mutated hands, (poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra limbs, (disfigured:1.331), (missing arms:1.331), (extra legs:1.331), (fused fingers:1.61051), (too many fingers:1.61051), (unclear eyes:1.331), lowers, bad hands, missing fingers, extra digit,bad hands, missing fingers, (((extra arms and legs))),
Steps: 20, Sampler: DPM++ SDE Karras, CFG scale: 8, Seed: 4072734575, Size: 600x600, Model hash: 038ba203d8, Model: AbyssOrangeMix2_sfw, Denoising strength: 0.7, Clip skip: 2, Version: v1.5.2
生成結果:
抽象派畫師
你還可以發揮自己的想象力,畫一些簡單的簡筆畫,讓ai將其變成細節豐富的作品
示例圖:
1girl, dancing, ocean, sunset, (masterpiece:1.2), best quality, masterpiece, highres, original, extremely detailed wallpaper, perfect lighting,(extremely detailed CG:1.2),
Negative prompt: NSFW, (worst quality:2), (low quality:2), (normal quality:2), lowres, normal quality, ((monochrome)), ((grayscale)), skin spots, acnes, skin blemishes, age spot, (ugly:1.331), (duplicate:1.331), (morbid:1.21), (mutilated:1.21), (tranny:1.331), mutated hands, (poorly drawn hands:1.5), blurry, (bad anatomy:1.21), (bad proportions:1.331), extra limbs, (disfigured:1.331), (missing arms:1.331), (extra legs:1.331), (fused fingers:1.61051), (too many fingers:1.61051), (unclear eyes:1.331), lowers, bad hands, missing fingers, extra digit,bad hands, missing fingers, (((extra arms and legs))),
Steps: 20, Sampler: DPM++ 2M SDE Karras, CFG scale: 7, Seed: 2803648791, Size: 800x800, Model hash: 038ba203d8, Model: 二次元:AbyssOrangeMix2_sfw, Denoising strength: 0.75, Clip skip: 2, Version: v1.5.2
生成結果: