ControlNet 12 konditsioneerimise tüüpi ühes tööriistas
Laadige üles viide pilt, valige konditsioneeri tüüp, kirjutada kiiresti. AI hoiab oma viide struktuuri (rida, poos, sügavus, jne) ja muudab uue sisu mis tahes stiilis. Backed poolt ControlNet-Union SDXL ProMax ~ Apache 2.0, täielikult kaubanduslikul eesmärgil sõbralik.
Tulemus
Kuidas ControlNet toimib
ControlNet võimaldab juhtida pildi genereerimist viitepildi struktuuriga, selle asemel et tugineda ainult tekstile. Eeltöötleja loeb sinu viite ja võtab välja ühe konditsioneerimissignaali, selle servad, sügavuse kaart, isiku skelett jne. Seejärel lukustatakse difusioonimudel sellele signaalile, samal ajal kui kiir otsustab stiili, värvi, valgustuse ja subjekti. Tulemus jätab alles täpse koostise, millesse sa toitusid, kuid näeb välja nagu midagi täiesti uut.
Seda tööriista toetab ControlNet-UnionSDXL ProMax (Apache 2.0) ~ üks mudel, mis mõistab kõiki 12 allpool esitatud konditsioneerimistüüpi, nii et sa lülitud nende vahel ühelt valijalt ilma iga kord erinevat võrku laadimata. See on täielikult kaubanduslikult kasutatav: hoia, müü või muuda seda, mida iganes sa tekitad.
12 kliimaseadme tüüpi
CannyCity in New Jersey USA
Parim teravate kontuuride ja puhaste joonte säilitamiseks.
Sügavus
3D sügavuskaart. Hoiab ruumilise paigutuse ~ mis on lähedal ja mis on kaugel.
PoseCity in Newfoundland Canada
Avatud kehaskelett. Lukustab kuju asendi ja jäseme asendi.
ScribbleCity in Newfoundland Canada
Lahtised käsitsi joonistatud doodles muutunud valmis kunst.
Segmenteerimine
Värviga kodeeritud piirkonna kaart. Määra iga stseeni ala klassile.
Normaalne
Pinna-normaalne kaart. Säilitab peene 3D pinna orientatsiooni ja muhke.
Lineart
Fine line ekstraktsioon ® ideaalne inking, manga, ja illustratsioon.
Pehmeservaline
Õrn piirituvastus, mis järgib Cannyst lõdvemaid kujundeid.
MLSD
Straight-line segmendid. Valmistatud arhitektuuri, interjööri, ja toote kaadrid.
Paanid
Detailne hooldamine konditsioneerimine upscaling ja õmblusteta tekstuurne töö.
Inpaint
Maskiteadlik seisund, et taastada ainult osa kujutisest.
Repaint / outpaint
Laiendage lõuendit või värvige ümbruskondi, austades samal ajal ümbritsevat struktuuri.
Kolm sammu
- Pildi üleslaadimine foto, visand, pilt, kõik, mida soovite säilitada.
- Vali konditsioneerimine tüüp, mis sobib, mida sa hoolid (pose jaoks figuur, sügavus stseen, canny või lineart puhas kontuurid).
- Kirjuta oma soovitud välimust kirjeldav ja genereeriv käsk. Tõsta kontrolli tugevust, et seda täpsemalt järgida, langetades seda loovama vabaduse nimel.
ControlNet 12 konditsioneerimise tüüpi ühes tööriistas — FAQ
Üks vahend, mis paljastab kõik 12 konditsioneerimise tüübid ControlNet-Union SDXL ProMax mudel ® canny, poseerib, sügavus, scribble, lineaarne, anime-lineart, MLSD, HED, pehme servaga, normaalne, killustatus, ja plaat. Vali konditsioneerimise tüüp, tilk viide pilt, kirjutada kiire ja SDXL muudab uue pildi, mis järgib struktuuri oma viide.
img2img re-maalid üle sisend otse ~ värvid, servad, JA geomeetria segada kiire. ControlNet viskab värvid ära ja hoiab just valitud struktuuri signaali (liinid, kujutab luukere, sügavus kaart, jne.). See võimaldab teil radikaalselt vahetada sisu säilitades koostise kivi tahke. Palju tugevam struktuurne kontroll kui img2img.
Canny / linerat for clean linework input. Anime- lineart for anime- style line input. Scribble / soft- edge / HED for töötlemata visandid ja doodles. Pose kopeerida keha positsiooni foto. Sügavus säilitada stseeni geomeetria / 3D paigutus. MLSD säilitada sirgeid ridu (arhitektuuri / interjööre). Normaalne säilitada pinna orientatsioon ja maht. Segmenteerimine säilitada piirkondi. Tile täpsustada või suurendada variatsioone olemasoleva pildi.
ControlNet-Union SDXL ProMax (xinsir, Apache 2.0) pakib kõik 12 konditsioneerimisvõrku ühte 2,5 GB kaalu. Vanemad rakendused laadisid alla eraldi ~2.5 GB kaalu tüübi kohta ~ Canne'i vahetamine ja kujutamine tähendas külmkäivitust. Liidu mudel koormused üks kord ja püsib soojas, nii et iga konditsioneeri tüüp on sub-sekundi pärast esimest kõnet.
Jah. ~1200 märgid ühe renderdada (1000 base SDXL + 20% ControlNet konditsioneerimine lisatasu). Allkirjastatud kasutajad saavad 30,000 tasuta märgid iga päev ~ 25 Konditsioneeritud renderdab päevas tasuta. Anonymous: 2500 märgid / päev (~2 renderdab).
Jah ® Control tugevus liugur (vaikimisi 0.7) määrab, kuidas rangelt väljund järgib oma viide. 1. 0 = range (väljund näeb välja nagu re-relender oma viide). 0. 4 = lahti (prompt on rohkem vabadust). Langetada see loominguline variatsioon, tõsta see, kui truudus loeb.
512×512 vaikimisi. SDXL standardsuhted 768×1024 portree, 1024×768 maastik, 1024×1024 ruut ~ kõik tööd. Suuremad väljundid tarbivad rohkem VRAM ja märgid; H200 toetab kuni 1024×1024 mugavalt.
Viitepilte töödeldakse kohe, konditsioneeritakse välja, seejärel kustutatakse viitefail. Ainult kiire + lõplik renderdamine jääb / konto /? tab=ajalugu. Ei kasutata kunagi koolituseks. / privaatsus / kogu poliitika jaoks.
ControlNet-Union SDXL ProMax vabaneb Apache 2.0 all, sealhulgas kaubanduslikul eesmärgil. SDXL baas on OpenRAIL++. Mõlemad võimaldavad kommertskasutust; teie loodud pildid on teie omad, et kasutada ilma litsentsitasudeta.
Sama mudel, sama kvaliteet, sama konditsioneerimine signaale. ComfyUI ja A1111 nõuavad kohaliku GPU 12+ GB VRAM pluss setup. Me käivitada seda jagatud infrastruktuuri helde tasuta bassein ~ ei installida, ei GPU vaja.
Esimene kõne laadib alla liidu kaalu (~2,5 GB) GPU puhvrisse ja soojendab SDXL torujuhet. Oodake 30-60 sekundit esimesel nõudmisel pärast väljatõstmist või LRU väljatõstmist. Järgnevad kõned tüüpilise koormuse tagastamisel 4-7 sekundi jooksul.
Jah POST multipart to /v1/image/generate/ with model=sdxl (or model=controlnet-union-sdxl-promax), spot, control_image (file), control_type=<one of: cany, poss, sügavus, scribble, lineart, anime-lineet, mlsd, hed, soft-ged, normal, segmentation, plaat >, valikuline kontroll_strength (0,1-1.5). Bearer auth, 10K free tokens/ month./api/ has curl examples.