ValdiklisNet – 12 kondicionavimo tipų viename įrankyje
Įkelkite atskaitos paveikslėlį, pasirinkite kondicionavimo tipą, rašykite greitį. AI išsaugo jūsų nuorodos struktūrą (eilutės, pozicionavimo, gylio ir t. t.) ir padaro naują turinį bet kokiu stiliumi. Backed by ControlNet-Union SDXL ProMax – Apache 2.0, visiškai komerciniam naudojimui draugiškas.
Rezultatas
Kaip ControlNet veikia
ControlNet leidžia jums valdyti vaizdo generavimą su atskaitos vaizdo struktūrą, o ne pasikliauti tekstu greitai vienas. Preprocesorius skaito jūsų nuorodą ir ištraukia vieną kondicionavimo signalą – jo kraštus, gylio žemėlapį, asmens pozicionavimo skeletą ir pan. Difuzijos modelis tada yra užrakintas prie to signalo, o greitasis sprendžia stilių, spalvas, apšvietimą ir temą. Rezultatas išlaiko tikslią sudėtį, kurią jūs paleidote, bet atrodo kaip kažkas visiškai naujo.
Šis įrankis palaikomas naudojant ControlNet-UnionSDXL ProMax (Apache 2.0) – vieną modelį, kuris supranta visus 12 žemiau nurodytus kondicionavimo tipus, todėl jūs persijungiate iš vieno rinkėjo, kiekvieną kartą nepakraunant kito tinklo.
12 kondicionavimo tipų
Canny
Kraštų aptikimas. Geriausia išsaugoti aštrias kontūrus ir švarios linijos.
Gylis
3D gylio žemėlapis. Išlaiko erdvinį išdėstymą – kas yra netoli ir kas yra toli.
Pose
OpenPose kūno skeletas. Užrakina figūros poziciją ir galūnių pozicijas.
Scribble
Pašalinkite rankomis traukiamus gabalėlius, paverčiamus baigtu menu.
Segmentacija
Spalvotai koduotas regiono žemėlapis. Priskirti kiekvieną scenos sritį klasei.
Normalus
Paviršiaus normalus žemėlapis. Išsaugo smulkią 3D paviršiaus orientaciją ir guzas.
Lineart
Puiki linija ištrauka — idealiai tinka dažyti, manga, ir iliustracija.
Minkštas kraštas
Švelni riba aptinkama taip, kad po jų formuojasi laisviau nei Canny.
MLSD
Tiesios linijos segmentai. Pagaminta architektūrai, interjerui ir produktų kadrams.
Kolonėlė
Detail-secreting kondicionavimas kilimo ir vientisos tekstūros darbą.
Painting
Kaukės-įrangos kondicionavimo regeneruoti tik dalį vaizdo.
Perdažymas / perdegimas
Išplėskite drobę ar perdažytas sritis, gerbiant aplinkinių struktūrą.
Trys etapai
- Įkelkite atskaitos paveikslėlį — nuotrauką, eskizą, ekraną, viską su struktūra, kurią norite išlaikyti.
- Pasirinkite kondicionavimo tipą, kuris atitinka tai, kas jums rūpi (pateikite už paveikslėlį, gylis už sceną, Canny ar tiesinet švarių kontūrų).
- Parašyti greitą apibūdindami išvaizdą, kurį norite ir generuoti. Pakelti kontrolės jėgas, kad sekti nuoroda labiau, sumažinti jį dėl daugiau kūrybinės laisvės.
ValdiklisNet – 12 kondicionavimo tipų viename įrankyje — FAQ
Vienas įrankis, kuris atskleidžia visus 12 Kondicionavimo tipai nuo ControlNet-Union SDXL ProMax modelis – Canny, pozicionuoti, gylis, Scribble, tiesinis, anime-lineart, MLSD, HED, švelnaus krašto, normalus, segmentacija, ir plytelės. Pasirinkite kondicionavimo tipą, lašas atskaitos paveikslėlį, rašyti greitą, ir SDXL sukuria naują vaizdą, kuris atitinka jūsų nuorodos struktūrą.
img2img perdažai per įvesties tiesiogiai — spalvos, kraštai, ir geometrija maišyti su greito. ControlNet išmeta spalvas toli ir išlaiko tik pasirinktą struktūrinį signalą (linijos, pozicionuoti skeletą, gylio žemėlapis ir tt). Tai leidžia jums radikaliai pakeisti turinį, išlaikant kompoziciją roko kietas. Daug stipresnis struktūrinis valdymas nei img2img.
Anime- tiesinė linija anime- style linijai įvesti. Scribble / soft- briage / HED grubiems eskizams ir statuloms. Nukopijuokite kūno padėtį nuo nuotraukos. Gylis, kad išsaugotų scenos geometriją / 3D išdėstymą. MLSD, kad išsaugotų tiesias linijas (architektūra / interjeras). Normalus paviršiaus orientavimasis ir tūris. Segmentacija, kad išsaugotų regionus. Paveikslėlis esamo vaizdo variantams tobulinti ar augti.
ValdymasNet-Union SDXL ProMax (xinsir, Apache 2.0) pakuoja visus 12 kondicionavimo tinklų į vieną 2,5 GB svorį. Senesni įdiegimai parsisiunčia atskirą ~2.5 GB svorį vienam tipui – perėjimas tarp Canny ir pozicinis reiškia šaltą paleidimą. Union modelis apkrauna vieną kartą ir išlieka šiltas, todėl kiekvienas kondicionavimo tipas yra antras po pirmojo skambučio.
Taip. Apie 1200 žetonų per dieną (1000 bazinių SDXL + 20% ControlNet kondicionavimo papildų). Pasirašę vartotojai kasdien gauna 30,000 nemokamų žetonų — apie 25 kondicionuoti per dieną besąlygiškai. Anoniminis: 2500 žetonų per dieną (~2 kondicionuoja).
Taip — Kontrolės stiprumo slankiklį (numatytas 0.7) nulemia, kaip griežtai išvestis seka Jūsų nuorodą. 1.0 = griežtas (išėjimas atrodo kaip jūsų nuorodos pakartotinis paleidimas). 0.4 = laisvas (užsitikrina daugiau laisvės).
SDXL standartiniai koeficientai – 768×1024 portretas, 1024×768 kraštovaizdis, 1024×1024 kvadratas – visi darbai. Didesni rezultatai naudoja daugiau VRAM ir žetonų; H200 palaiko iki 1024×1024 patogiai.
Referenciniai paveikslėliai apdorojami iš karto, kondicionuojama, tada ištrinamas referencinis failas. Liko tik greitas + galutinis atvaizdis / paskyra /?tab=istory. Niekada nenaudojamas mokymui. / privacy/ visai politikai.
ControlNet-Union SDXL ProMax yra išleistas pagal Apache 2.0 — visiškai leidžiamas, įskaitant komercinį naudojimą. SDXL bazė yra OpenRAIL++. Abu leidžia naudoti komerciniais tikslais; jūsų sukurtus vaizdus yra naudoti komerciniais tikslais be autorinio atlyginimo.
Tas pats modelis, tos pačios kokybės, tos pačios kondicionavimo signalai. ComfyUI ir A1111 reikalauja vietos GPU su 12+ GB VRAM plius sąranka. Mes paleisti jį ant bendros infrastruktūros su dosniais laisvu baseinu – nėra įrengimo, ne GPU nereikia.
Pirmasis skambutis parsisiunčia Sąjungos svorį (~2.5 GB) į GPU talpyklą ir šildo SDXL dujotiekį. Pirmą kartą užsakius, numatoma 30-60 sekundžių. Tolesni skambučiai po 4-7 sekundžių.
Taip – po daugelio dalių į /v1/image/generate/ su modeliu=sdxl (arba modelis=controlnet-union-sdxl-promax), greitas, control_image (faile), control_ type=<viena iš: Canny, pozicija, gylis, scribble, tiesinis, anime-linelt, mlsd, hed, minkšta briauna, normalus, segmentas, plytelės>, neprivalomas valdymas_ stiprumas (0,1-1.5).