ControlNet — Karazan-javatra 12 ao anaty fitaovana iray

Akaro sary iray, safidio ny karazana fifehezana, soraty ny fanontaniana. Manaja ny rafitry ny rohy (andalana, fijery, halava, sns.) ny AI ary mamorona votoaty vaovao amin'ny endrika rehetra. Notarihin'ny ControlNet-Union SDXL ProMax — Apache 2.0, azo ampiasaina amin'ny varotra tanteraka.

Canny / lineart ho an'ny sisin-dalana madio. Pose ho an'ny toerana misy ny vatana. Depth ho an'ny famolavolana 3D. Scribble / soft-edge ho an'ny doodles tsy voalamina. MLSD ho an'ny maritrano. Normal / segmentation / tile ho an'ny fizotra avo lenta.
Ny fifehezana dia azo avy amin'izany — tsy ampiasaina intsony ny loko, ny famantarana ny firafitra ihany no arovana (araka ny karazana safidinao).
Looser 0.7 Tena henjana
~1,200 tokens (SDXL × 1.2 ControlNet)
Valiny

Ahoana ny fomba fiasan'ny ControlNet

Ny ControlNet dia mamela anao hifehy ny famoronana sary amin'ny alalan'ny rafitry ny sary fototra fa tsy amin'ny alalan'ny fanontaniana amin'ny soratra fotsiny. Misy mpamokatra aloha mamaky ny resakao ary maka ny famantarana iray tokana - ny sisiny, ny sarintany halavany, ny fijerin'ny olona, sns. Avy eo, mifikitra amin'io famantarana io ny modelin'ny fiparitahana raha toa ka ny fanontaniana no mandray ny fanapahan-kevitra momba ny endrika, ny loko, ny hazavana, ary ny lohahevitra. Ny vokatra dia mitazona ny fitambarana voasoratrao, saingy toy ny zavatra vaovao tanteraka.

Ity fitaovana ity dia tohanan'ny ControlNet-UnionSDXL ProMax (Apache 2.0) — modely tokana izay mahatakatra ireo karazana fifehezana 12 etsy ambany, ka afaka miova eo amin'izy ireo ianao avy amin'ny mpifidy iray tsy mila maka tambajotra hafa isaky ny mandeha. Azo ampiasaina amin'ny varotra tanteraka izy io: tazonina, amidy, na ovaina izay rehetra ataonao.

Ireo karazana fifehezana 12

Canny
Famantarana ny sisiny miloko. Tsara indrindra ho an'ny fiarovana ny sisin-dalana sy ny sisin-dalana madio.
Halava
Sarin'ny halalin'ny 3D. Mitahiry ny firafitra ara-jeografika — izay akaiky sy izay lavitra.
_Pose
Ny skeleton'ny vatana OpenPose. Migeja ny fijerin'ilay sary sy ny toerana misy ny tongony.
Scribble
Ny doodles namboarina tanana dia lasa zavakanto vita.
Fampizarana
Sarin'ny faritra misy loko. Ampidiro anaty sokajy ny faritra tsirairay ao amin'ilay seho.
_Normal
Sarintany ara-pifaneraserana. Mametra ny fihodinana 3D sy ny fihodinana.
Sary an-tsisiny
Ny fivoahana amin'ny tsipika madinika — mety indrindra ho an'ny fanoratana, manga, ary sary.
Soft-edge
Ny fiteny malagasy dia manana fiteny fototra izay miavaka kokoa noho ny fiteny malagasy.
MLSD
Ireo faritra mivadika mivantana. Natao ho an'ny famolavolana, ny anatiny, ary ny sary momba ny vokatra.
Hazo
Ny fiteny dia mifototra amin'ny fiteny fototra sy ny fiteny tsy fototra.
_Soratra
Ny fiteny malagasy dia mampiasa ny fiteny malagasy ho ampahany amin'ny fiteny iray.
Hanova loko / hanova endrika
Mampitombo ny hazo fijaliana na mamerina mamorona faritra amin'ny alalan'ny fanajana ny firafitra manodidina.

Dingana telo

  1. Akaro ny sary fototra — sary, sary an-tsary, pikantsary, na inona na inona misy ny firafitra tianao ho hitazonana.
  2. Misafidiana ny karazana fifehezana mifanaraka amin'izay tianao (fijery ho an'ny sary, halava ho an'ny seho, sarotra na tsotra ho an'ny endrika mazava).
  3. Manoratra fanontaniana iray milaza ny endrika tianao hamoronana. Alefaso ny herin'ny fifehezana mba hanarahana ny rohy amin'ny fomba henjana kokoa, ary esory izany raha te hanana fahalalahana bebe kokoa amin'ny famoronana.

ControlNet — Karazan-javatra 12 ao anaty fitaovana iray — FAQ

Fitaovana iray izay mampiseho ireo karazana fifehezana 12 avy amin'ny modely ControlNet-Union SDXL ProMax — canny, pose, depth, scribble, lineart, anime-lineart, MLSD, HED, soft-edge, normal, segmentation, ary tile. Misafidiana karazana fifehezana iray, esory ny sary famantarana, soraty ny fanontaniana, ary hamoaka sary vaovao manaraka ny rafitry ny sary famantaranao ny SDXL.

Ny img2img dia mamerina mamorona loko eo amin'ny angon-drakitra mivantana — loko, sisiny, ary ny endrika geometrika miaraka amin'ny fanontaniana. Manaisotra ireo loko ny ControlNet ary mitahiry ny marika ara-pirafitra voafaritra ihany (tsipika, endrika, sarintany halava, sns). Izany no ahafahanao mifampitodika amin'ny mpiaty raha toa ka tsy misy fiovana amin'ny famoronana. Fifehezana ny firafitra matanjaka kokoa noho ny img2img.

Canny / lineart ho an'ny fandefasana andalana madio. Anime-lineart ho an'ny fandefasana andalana amin'ny endrika anime. Scribble / soft-edge / HED ho an'ny sary sokitra sy ny doodles. Pose ho an'ny fandikana ny toerana misy ny vatana avy amin'ny sary. Depth ho an'ny fitazonana ny endrika geometrika / ny firafitra 3D. MLSD ho an'ny fitazonana ny tsipika mitsangana (arkitektonika / anatiny). Normal ho an'ny fitazonana ny fihodinana sy ny haben'ny sehatr'asa. Segmentation ho an'ny fitazonana ny faritra. Tile ho an'ny fanatsarana na fanatsarana ny endriky ny sary misy.

Ny ControlNet-Union SDXL ProMax (xinsir, Apache 2.0) dia mametraka ireo tambajotra 12 rehetra amin'ny fifehezana ao anatin'ny lanja tokana 2.5 GB. Ny fampidirana taloha dia nandefa ny lanja ~2.5 GB isaky ny karazana — ny fiovana eo amin'ny canny sy ny pose dia midika fa manomboka amin'ny fiatoana. Ny modelin'ny union dia miakatra indray mandeha ary mijanona mafana, ka ny karazana fifehezana tsirairay dia tsy maintsy miandry segondra vitsy aorian'ny antso voalohany.

Eny. ~1,200 tokens isaky ny render (1,000 base SDXL + 20% ControlNet conditioning surcharge). mahazo tokens 30,000 maimaimpoana isan'andro ireo mpampiasa efa niditra — render 25 isan'andro tsy misy vidiny. Anonymous: 2,500 tokens/andro (~2 render).

Eny — ny tsindry misintona ny hery (0.7 ny sanda tsotra) dia mamaritra ny maha-mafy ny fivoahana manaraka ny fiovam-peo. 1.0 = mafy (miseho toy ny fanehoana indray ny fiovam-peo). 0.4 = malefaka (manana fahalalahana bebe kokoa ny fanontaniana). Ahenao izy io raha te-hamorona, avoavo izy io raha ilaina ny fahamarinana.

512×512 tsotra. Ny tahan'ny SDXL mahazatra — 768×1024 mitsangana, 1024×768 mitsangana, 1024×1024 karetsaka — dia miasa daholo. Ny famoahana lehibe kokoa dia mampiasa VRAM sy tokens bebe kokoa; mandray an-tànana ny 1024×1024 ny H200.

Voakarakara avy hatrany ireo sary fototra, avoaka ny fifehezana, avy eo fafàna ilay rakitra fototra. Ny fanontaniana + ny fanehoana farany ihany no mijanona ao amin'ny /account/?tab=history. Tsy ampiasaina mihitsy ho an'ny fanazarantena. /privacy/ ho an'ny politika feno.

Avy amin'ny Apache 2.0 ny ControlNet-Union SDXL ProMax — azo ampiasaina tanteraka, anisan'izany ny fampiasana ho an'ny varotra. Ny fototra SDXL dia OpenRAIL++. Azo ampiasaina ho an'ny varotra izy roa ireo; ny sary nalainao dia anao ihany no afaka mampiasa azy ho an'ny varotra tsy misy karama.

Modely mitovy, kalitao mitovy, famantarana fanaraha-maso mitovy. Mila GPU ao an-toerana manana VRAM 12+ GB sy ny fametrahana ny ComfyUI sy ny A1111. Alefanay amin'ny fotodrafitrasa iraisana miaraka amin'ny tahiry malalaka izy io — tsy mila fametrahana, tsy mila GPU.

Ny antso voalohany dia maka ny lanja Union (~2.5 GB) ao anatin'ny cache GPU ary mameno ny fantsona SDXL. Andraso 30-60 segondra ny fangatahana voalohany aorian'ny fampidirana na ny fanesorana LRU. Ny antso manaraka eo ambanin'ny sandan'ny entana mahazatra dia miverina ao anatin'ny 4-7 segondra.

Eny — POST multipart ho an'ny /v1/image/generate/ miaraka amin'ny model=sdxl (na model=controlnet-union-sdxl-promax), fanontaniana, control_image (rakitra), control_type=<iray amin'ireo: canny, pose, depth, scribble, lineart, anime-lineart, mlsd, hed, soft-edge, normal, segmentation, tile>, control_strength safidy (0.1-1.5). Bearer auth, 10K tokens maimaimpoana/volana. /api/ manana ohatra curl.

Tianao ve ny Free.ai? Lazao amin'ny namanao!

Manome isa ity pejy ity