ControlNet — 12 typov kondicionovania v jednom nástroji
Nahrajte referenčný obrázok, vyberte typ kondicionovania, napíšte výzvu. AI si zachováva štruktúru vášho odkazu (čiary, pózu, hĺbku atď.) a vykresľuje nový obsah v ľubovoľnom štýle.Podporované ControlNet-Union SDXL ProMax — Apache 2.0, plne komerčne použiteľné.
Výsledok
Ako funguje ControlNet
ControlNet umožňuje riadiť generovanie obrázkov pomocou štruktúry referenčného obrázka namiesto spoliehania sa len na textovú výzvu. Predspracovanie prečíta referenciu a extrahuje jediný signál podmienenia - jeho okraje, mapu hĺbky, kostru pózy osoby atď. Difúzny model je potom uzamknutý na tento signál, zatiaľ čo výzva rozhoduje o štýle, farbách, osvetlení a objekte. Výsledok si zachováva presnú kompozíciu, ktorú ste zadali, ale vyzerá ako niečo úplne nové.
Tento nástroj je podporovaný ControlNet-Union SDXL ProMax (Apache 2.0) - jediným modelom, ktorý pozná všetkých 12 typov kondicionovania nižšie, takže môžete prepínať medzi nimi z jedného výberu bez načítania inej siete zakaždým.Je plne komerčne použiteľný: ponechajte si, predávajte alebo upravujte čokoľvek, čo vytvoríte.
12 typov kondicionovania
Šikovný.
Najlepšie na zachovanie ostrých obrysov a čistých línií.
Hĺbka
3D hĺbková mapa. Zachováva priestorové rozloženie – čo je blízko a čo ďaleko.
Pozícia
OpenPose body skeleton. Zamkne postavu a polohy končatín.
Čmáranie
Voľné ručne kreslené čmáranice sa zmenili na hotové umenie.
Segmentácia
Farebne označená mapa regiónu. Priraďte každú oblasť scény do triedy.
Normálne
Zachováva jemnú 3D orientáciu povrchu a nerovnosti.
Čiarový grafický prvok
Extrakcia jemných čiar – ideálna na písanie rukou, manga a ilustrácie.
Mäkké hrany
Jemná detekcia hraníc, ktorá sleduje tvary voľnejšie ako Canny.
MLSD
Segmenty s priamymi líniami. Určené pre architektúru, interiéry a zábery produktov.
Dlaždice
Úprava zachovávajúca detaily pre zvýšenie rozlíšenia a bezproblémovú prácu s textúrami.
Inmaint
Maska-aware kondicionovanie na regeneráciu len časť obrazu.
Prelakovanie / outpaint
Rozšírte plátno alebo premaľujte oblasti pri zachovaní okolitej štruktúry.
Tri kroky
- Nahrajte referenčný obrázok – fotografiu, náčrt, snímku obrazovky, čokoľvek so štruktúrou, ktorú chcete zachovať.
- Vyberte typ kondicionovania, ktorý zodpovedá tomu, na čom vám záleží (pozícia pre postavu, hĺbka pre scénu, šikovný alebo lineárny pre čisté obrysy).
- Napíšte výzvu, ktorá popisuje vzhľad, ktorý chcete vytvoriť, a zvýraznite ovládaciu silu, aby ste presnejšie sledovali odkaz, alebo ju znížte, aby ste získali väčšiu kreatívnu slobodu.
ControlNet — 12 typov kondicionovania v jednom nástroji - FAQ
Jeden nástroj, ktorý zobrazuje všetkých 12 typov kondicionovania z modelu ControlNet-Union SDXL ProMax – Vyberte typ kondicionovania, umiestnite referenčný obrázok, napíšte výzvu a SDXL vykreslí nový obrázok, ktorý sleduje štruktúru vášho odkazu.
img2img priamo premaľuje vstupné dáta - farby, hrany a geometriu zmieša s výzvou. ControlNet odhodí farby a ponechá len zvolený štrukturálny signál (čiary, pózový skelet, hĺbkovú mapu atď.). To vám umožní radikálne vymeniť obsah a zároveň zachovať kompozíciu pevnú ako skala.
Canny / lineart pre čisté riadkovanie. Anime- lineart pre riadkovanie v štýle anime. Scribble / soft- edge / HED pre hrubé náčrty a čmáranice. Póza na kopírovanie polohy tela z fotografie. Hĺbka na zachovanie geometrie scény / 3D rozloženia. MLSD na zachovanie rovných čiar (architektúra / interiéry). Normálne na zachovanie orientácie povrchu a objemu. Segmentácia na zachovanie oblastí. Dlaždice na zjemnenie alebo zvýšenie veľkosti variácií existujúceho obrázka.
ControlNet-Union SDXL ProMax (xinsir, Apache 2.0) balí všetkých 12 sietí podmienok do jednej 2,5 GB hmotnosti.Staršie nasadenie stiahlo samostatnú ~ 2,5 GB hmotnosť pre každý typ - prepínanie medzi canny a pose znamenalo studený štart.Union model sa načíta raz a zostáva teplý, takže každý typ podmienky je v sekunde po prvom volaní.
Áno. ~1,200 žetónov za render (1,000 základné SDXL + 20% príplatok za podmienené renderovanie ControlNet). Prihlásení používatelia dostanú 30,000 žetónov zadarmo denne — približne 25 podmienených renderovaní za deň bez poplatku. Anonymní: 2,500 žetónov/deň (~2 renderovania).
Áno — posuvník Control strength (predvolená hodnota 0,7) určuje, ako presne výstup sleduje vašu referenciu. 1,0 = prísny (výstup vyzerá ako prekreslenie vašej referencie). 0,4 = voľný (výzva má väčšiu slobodu). Znížte ho pre kreatívne variácie, zvýšte ho, ak je dôležitá vernosť.
Štandardné pomery strán SDXL – 768 × 1024 na výšku, 1024 × 768 na šírku, 1024 × 1024 na štvorec – fungujú všetky. Väčšie výstupy spotrebúvajú viac pamäte VRAM a tokenov; H200 pohodlne podporuje až 1024 × 1024.
Áno. ControlNet generácia stojí ~ 1 000 tokenov za obrázok, rovnako ako štandardná SDXL generácia. Anonymní používatelia získajú 6 000 tokenov / deň; bezplatný účet poskytuje 30 000 / deň. Žiadna kreditná karta, žiadny vodoznak. Vyššie rozlíšenie alebo viaceré variácie stoja proporcionálne viac z fondu.
ControlNet-Union SDXL ProMax je vydaný pod licenciou Apache 2.0 — plne povolené, vrátane komerčného použitia. SDXL základňa je OpenRAIL++. Obidva umožňujú komerčné použitie; vaše generované obrázky sú vaše na komerčné použitie bez licenčných poplatkov.
Rovnaký model, rovnaká kvalita, rovnaké signály. ComfyUI a A1111 vyžadujú lokálny grafický procesor s 12+ GB VRAM plus inštaláciu.Bežíme na zdieľanej infraštruktúre s veľkorysým voľným bazénom - bez inštalácie, nie je potrebný grafický procesor.
Prvé volanie stiahne hmotnosť Union (~2,5 GB) do vyrovnávacej pamäte GPU a zahreje kanál SDXL. Počkajte 30-60 sekúnd na úplne prvú požiadavku po nasadení alebo vysťahovaní LRU.Nasledujúca volania pri typickom zaťažení sa vrátia za 4-7 sekúnd.
Áno — POST multipart do /v1/image/generate/ s model=sdxl (alebo model=controlnet-union-sdxl-promax), prompt, control_image (súbor), control_type=<jeden z: canny, pose, depth, scribble, lineart, anime-lineart, mlsd, hed, soft-edge, normal, segmentation, tile>, voliteľný control_strength (0.1-1.5). Bearer auth, 10K voľných žetónov/mesiac. /api/ má príklady curl.