大家好,我是小志Jason。一個探索Latent Space的程序員。
之前的時(shí)候出了一個SDXLMixSampler,現(xiàn)在更新一下功能。
(相關(guān)資料圖)
前文:【玩轉(zhuǎn)SD】自制節(jié)點(diǎn)介紹SDXLMixSampler LatentByRatio
/read/cv25107377
首先解釋一下什么是loop,loop就是base+refiner共同跑完一次的結(jié)果,為止一次loop,
多重混合節(jié)點(diǎn)的目的是讓base+refiner跑完一次后,先不輸出結(jié)果,把第一次的結(jié)果作為下一個loop的latent image再跑一次base+refiner,來實(shí)現(xiàn)多次base+refiner的圖片。
這次主要更新的是把之前的total_steps改成了loop,不用自己算了,背后直接mix_steps*loop=total_steps。
兼容一次輸出多個loop的結(jié)果,但是由于每個loop的leftover_noise和結(jié)算步數(shù)都不一樣,所以不能簡單的輸出每次循環(huán)的latent image,背后需要每個循環(huán)都自己跑一次,所以出圖會比較慢。
所以默認(rèn)的是final_only:yes,只輸出最后那個loop的結(jié)果,如果final_only:no,那就輸出每次循環(huán)的結(jié)果:
C站地址:
/models/108594/sdxlmixsampler-comfyui-jnode-workflow-included
PS碎碎念:
經(jīng)過詢問和交流,感覺現(xiàn)在SDXL的lora還有微調(diào)都是不完善的。
SDXL的架構(gòu)是base+refiner等于完整輸出,而目前無論是lora還是微調(diào),都集中在base模型那里,問題在于無論是lora還是微調(diào),使用原來的refiner去添加細(xì)節(jié),都會影響到lora和微調(diào)的訓(xùn)練出來的特征,讓訓(xùn)練的效果減弱。
所以現(xiàn)在的微調(diào)和lora不得不減少refiner的作用來保留訓(xùn)練的特征,這種做法我覺得是有違SDXL的架構(gòu)的,如果想使用SDXL的架構(gòu)來達(dá)到最好的效果,就需要有對應(yīng)的refiner訓(xùn)練。
比如base+base lora->refiner+refiner lora,fine tune base->fine tune refiner,這樣的流程來確保base和refiner都能向訓(xùn)練的特征偏移,才能實(shí)現(xiàn)最好的結(jié)果。
歡迎點(diǎn)贊投幣轉(zhuǎn)發(fā)加群
群號:866612947
驗(yàn)證:小志Jason
關(guān)鍵詞:
SDXLMixSampler 1.1 大家好,我是小志Jason。一個探索LatentSpace的程序員。之前0 9的時(shí)候
預(yù)警“叫應(yīng)”機(jī)制再立功,湖北建始零傷亡避險(xiǎn)大型泥石流 極目新聞記者黃忠通訊員李偉7月4日,湖北省建始縣遭遇極端強(qiáng)降雨天氣。
原創(chuàng)組圖|海南“村VA”觀眾席上的“老年粉” 新海南客戶端、南海網(wǎng)、南國都市報(bào)7月30日消息(記者姚皓實(shí)習(xí)生劉心瑀
微信群里的微笑表情,引發(fā)一場官司 28歲的小劉,原本在上海一家教培機(jī)構(gòu)工作,5年來,她一步步做到了運(yùn)營
達(dá)實(shí)智能(002421.SZ)中標(biāo)8049.09萬元深圳地鐵5號線西延線等二期綜合監(jiān)控及MCC系統(tǒng)項(xiàng)目 智通財(cái)經(jīng)APP訊達(dá)實(shí)智能002421002421SZ公告公司收到招標(biāo)代理機(jī)構(gòu)廣東省
中信證券:歷史經(jīng)驗(yàn)表明,地產(chǎn)板塊的最佳窗口,不是政策生效后,而是政策出臺時(shí) 政策預(yù)期明朗和政策陸續(xù)出臺的時(shí)間,是地產(chǎn)開發(fā)板塊重要的配置窗口。政
“八一”來臨之際,讓“最可愛的人”感受來自上海群眾的溫暖 在八一建軍節(jié)即將到來之際,一場“卅載閃耀榮光,再創(chuàng)雙擁輝煌”2023年
臺風(fēng)“卡努”逐漸向浙江沿海靠近,下周二將給華東帶來風(fēng)雨 澎湃新聞記者陳悅今天(7月30日)午間,上海再現(xiàn)藍(lán)天白云,不過今年第6
福建首位全盲高考考生:“我的大學(xué)夢,圓了” 中新網(wǎng)莆田7月30日電 (林曉玲)“我的大學(xué)夢,圓了。”收到大學(xué)錄取
和田玉墨玉的歷史 和田玉墨玉是一種稀有的玉石,擁有悠久的歷史。和田玉是指產(chǎn)自中國新疆
焦點(diǎn)訪談:來成都看青春的模樣 7月28日晚上,第31屆世界大學(xué)生夏...
全國主流媒體聚焦海南!“蓬勃興起自貿(mào)港 旅游發(fā)展新熱潮”采風(fēng)活動圓滿收官 佛山新聞網(wǎng)訊記者羅靜文報(bào)道:7月2...
瞰漢中|古韻悠悠展新風(fēng) 在陜西省西南部,有這樣一座城,盤...
佛山網(wǎng)評 | “益企(一起)到崗”是多贏服務(wù)戰(zhàn)略 如何讓有用工需求的企業(yè)與有求職需...
SDXLMixSampler 1.1 大家好,我是小志Jason。一個探索L...
預(yù)警“叫應(yīng)”機(jī)制再立功,湖北建始零傷亡避險(xiǎn)大型泥石流 極目新聞記者黃忠通訊員李偉7月4日...
原創(chuàng)組圖|海南“村VA”觀眾席上的“老年粉” 新海南客戶端、南海網(wǎng)、南國都市報(bào)...
微信群里的微笑表情,引發(fā)一場官司 28歲的小劉,原本在上海一家教培機(jī)...