LoRA的風格分類
不用去記它有什么很特別的風格,簡單來說基礎模型就像一個全能畫手,什么都能畫,而LoRA是在某個風格中經過特訓的它的一個分身。使得它更精通該風格。
關于LoR風格分類:提示詞撰寫公式
Checkpoint&LoRA對比
訓練 | 效果 | 使用 | |
Checkpoint | 數據集:幾千張 時間:幾天 高GPU算力需求 | 效果更穩定,泛用性更好 | 可獨立使用 |
LoRA | 數據集:幾十張 時間:幾小時 低GPU算力需求 | 風格效果多樣,畫面細節豐富 | 不可獨立使用,必須和同系列的大模型搭配使用 |
模型篩選思路
明確目標→查找篩選目標模型→查看模型基本信息以及模型作者提供的說明
LoRA相關參數設置?
LoRA需要設置觸發詞以及控制權重
只有在提示詞中添加了觸發詞,LoRA模型才會產生作用。?
LoRA權重控制LoRA對畫面的影響程度,權重越高,LoRA對生成圖片的影響越大,反之,權重為0表明LoRA不產生效果。但是權重過高會導致畫面變得扭曲。
*滑塊類LoRA
這類LoRA會通過權重對畫面細節進行調節,在使用時需要特別注意作者關于該模型的說明。
人物年齡調節器,細節質感調節器、身材調節器、膚色調節器
多個LoRA的使用
混合出新的畫風
在使用同一個底模的情況下使用多個LoRA
如下圖的產出就是利用了3個LoRA模型。
嘗試復刻該圖的畫風
1.模型部署
基于大佬提供的的模型,將對應模型加入到SD-webUI中
2.參數設置
參考作者提供的參數設置對應的參數,?
如果想要復刻原圖作者的圖片,需要在隨機種子處填入和作者相同的隨機種子數。
設置好對應的參數,如采樣方法,圖片大小,隨機種子數,迭代步數等。
3.提示詞填寫?
在填寫提示詞前可以先拆解原大佬的提示詞,對部分關鍵提示詞進行保留。?
正面提示詞
bestquality,masterpiece,Highest quality,very detailed,//畫面質量
1girl,solo,:p,long hair,blue hair,blue eyes,(A girl),full body,single focus,//畫面主體&外貌特征
hair ornament(頭發裝飾物),halo,earrings,mole(色素痣?),jewelry,white gloves,bare shoulders,white dress,strapless dress,head wings,princess dress,//服飾道具
hand on own chest,//肢體動作
single focus(單聚焦),//鏡頭
moon,the moon,glowing starry sky(星光燦爛的天空),glowing palace,//環境
負面提示詞
(worst quality:1.4),(low quality:1.4),(monochrome:1.1),( Unspeakable-Horrors-64v, NG_DeepNegative_V1_75T, negative_hand-neg, FastNegativeV2, boring_e621_v4, bad-hands-5, BadDream, By bad artist -neg, bad-picture-chill-75v, verybadimagenegative_v1.3),negative_hand-neg,FastNegativeV2,BadDream,bad-picture-chill-75v,verybadimagenegative_v1.3,((negative_hand)),((easynegative)),ng_deepnegative_v1_75t,negative_hand,nsfw,
查看其他模型提示詞撰寫要求
可以重點關注觸發詞,
可以看到Checkpoint模型的作者就有很詳細的注釋需要我們注意。?
?也可以注意到身材類LoRA沒有觸發詞
基于上述知識,以及SD-提示詞書寫1-CSDN博客提到的提示詞書寫方法
可以寫出下述正面提示詞
bestquality,masterpiece,highest quality,very detailed,//畫面質量
1girl,solo,halo,//畫面主體
long hair,blue hair,hair ormament,//外貌特征
earrings,mole,blue and green?eyes,jewelry,white gloves,bare shoulders,white and purple?dress,strapless dress,head wings//服飾道具
dancing,lift hair,happy,blush,45 degree profile,eyes closed//肢體動作
white crystal,blue crystal,galaxy,musical note,tiny spot//場景環境
overhead shot,//鏡頭
基于上述提示詞生成的結果AI繪畫-runsheep-AI繪圖-LiblibAI
恩,出圖確實像抽卡。
?
推薦uu們自行多嘗試各種LoRA模型的搭配。?
實現更精致復雜的出圖
1.手部修復
通過使用手部修復模型,以及TI模型實現手部的細節修復
可以看到生成的圖片手部明顯比未添加TI模型以及手部模型的表現更好
未添加其他模型以及TI模型時生圖效果
TI模型說明:SD-提示詞書寫1-CSDN博客
*注意?
在使用多個LoRA時,需要靈活調節各個LoRA之間的權重,多個LoRA之間的權重差異在0.2-0.5之間,在增加新LoRA時如果遇到畫面表現不如預期時,需要意識到需要適當降低LoRA的權重。
建議依次疊加使用,而不是以上來就直接使用多個LoRA,因為這樣不利于查找原因。
LoRA疊加數量最好不要超過5個,過多可能導致部分LoRA失效,讓畫面變得難以調整優化。
以上end?