ControlNet — 12 պայմանավորվածության տեսակներ մեկ գործիքում
Տեղադրեք հղման պատկեր, ընտրեք պայմանավորվածության տիպի, գրեք հարցում։ Արհեստական բանականությունը պահպանում է ձեր հղման կառուցվածքը (գծեր, դիրք, խորություն և այլն) և ցանկացած ոճով ցուցադրում է նոր բովանդակությունը։ Պահպանված է ControlNet-Union SDXL ProMax-ով — Apache 2.0, ամբողջությամբ հարմար է առևտրային օգտագործման համար։
Արդյունք
Ինչպես է աշխատում ControlNet
ControlNet թույլ է տալիս ձեզ կառավարել պատկերի ստեղծումը հղման պատկերի կառուցվածքով, փոխարենը միայն տեքստական հարցման վրա հիմնվելով։ Համակարգիչը կարդում է ձեր հղումը և դուրս է բերում միակ պայմանավորված ազդանշանը՝ դրա եզրերը, խորության քարտեզը, մարդու դիրքային կմախքը և այլն։ Դիֆուզիայի մոդելը ապա կապվում է այդ ազդանշանին, մինչև հարցումը որոշում է ոճը, գույները, լուսավորությունը և թեման։ Արդյունքը պահպանում է ճիշտ այն համադրությունը, որը դուք ներառել եք, բայց այն ամբողջովին նոր է երևում։
Այս գործիքը աջակցվում է ControlNet-Union SDXL ProMax (Apache 2.0)-ով, որը միակ մոդել է, որը հասկանում է ներքևում նշված բոլոր 12 պայմանավորվածության տեսակները, այնպես որ դուք կարող եք փոխել դրանց միջև մեկ ընտրողից առանց ամեն անգամ տարբեր ցանց բեռնելու։ Այն ամբողջությամբ հարմար է առևտրային օգտագործման համար՝ պահեք, վաճառեք կամ փոխեք այն, ինչ ստեղծում եք։
12 պայմանավորվածության տեսակներ
Խելացի
Ձախ կողմի եզրերի հայտնաբերում. Լավագույնը եզրերի և մաքուր գծերի պահպանման համար։
Առաջին
3D խորության քարտեզ։ Պահպանում է տարածական դասավորությունը՝ ինչն է մոտ, ինչը հեռու։
Ցույց տալ
OpenPose մարմնի կմախք. Լկցվում է կերպարի դիրքորոշումը և անդամների տեղադրությունը։
Գրառում
Ձեռքով նկարված նկարները վերածվել են արվեստի գործերի։
Սգգ
Գույնով կոդավորված տարածքի քարտեզ. Ստեղծեք յուրաքանչյուր վայրի դասակարգ.
Նորմալ
Գործվածքի նորամալ քարտեզ. Պահպանում է 3D գործվածքի ուղղվածությունը և բեկորները։
Գծային
Ֆրանսերեն՝ Le grand livre de la peinture, de la sculpture et de la gravure.
Նյութ
Գերազանց սահմանների հայտնաբերում, որը ավելի լայնորեն հետևում է ձևերին, քան Canny-ն է։
MLSDName
Տարբերակված ուղղահայաց հատվածներ։ Ստեղծված է ճարտարապետության, ներքին տեսքի և արտադրանքի նկարների համար։
Ֆլեշ
Օգտագործվում է մանրամասնության պահպանման և տեքստուրաների անխափան աշխատանքի համար։
Գծել
Ծածկույթի զգացում ունեցող պայմանավորում՝ պատկերի միայն մի մասը վերականգնելու համար։
Նորից նկարել / արտանկարել
Ծավալել կտավը կամ վերանկարել շրջանները՝ պահպանելով շրջապատող կառուցվածքը։
Երեք քայլ
- Բեռնել հղման պատկեր՝ լուսանկար, գծապատկեր, էկրանագրություն, կամ ցանկացած այլ պատկեր, որի կառուցվածքը ցանկանում եք պահպանել։
- Ընտրեք պայմանավորվածության տիպի, որը համապատասխանում է ձեր հետաքրքրություններին (դիրք կերպարի համար, խորություն տեսարանների համար, մանրամասն կամ գծային՝ մաքուր եզրերի համար)։
- Գրեք մի հարց, որը նկարագրում է ձեզ հետաքրքրող տեսքը և գեներացնում է այն։ Ավելացրեք կառավարման ուժը՝ ավելի հստակ հետևելու համար հղմանը, նվազեցրեք այն՝ ստեղծագործական ազատության համար։
ControlNet — 12 պայմանավորվածության տեսակներ մեկ գործիքում - FAQ
Միակ գործիք, որը ցուցադրում է ControlNet-Union SDXL ProMax մոդելի բոլոր 12 պայմանավորվածության տեսակները՝ canny, pose, depth, scribble, lineart, anime-lineart, MLSD, HED, soft-edge, normal, segmentation և tile։ Ընտրեք պայմանավորվածության տեսակ, թողեք հղման նկարը, գրեք հարց, և SDXL-ը կցուցադրի նոր նկար, որը հետևում է ձեր հղման կառուցվածքին։
img2img- ը վերահաստատման համար ուղղակիորեն նկարում է մուտքագրված տվյալները` գույները, եզրերը ԵՎ երկրաչափությունը խառնում է խնդրանքի հետ։ ControlNet- ը ջնջում է գույները և պահում է միայն ընտրված կառուցվածքային ազդանշանը (գծերը, դիրքային կմախքը, խորության քարտեզը և այլն)։ Սա թույլ է տալիս Ձեզ ակտիվ փոխանակել բովանդակությունը՝ պահպանելով կոմպոզիցիան եռանդուն։ Շատ ավելի ուժեղ կառուցվածքային կառավարում, քան img2img- ը։
Canny / lineart` մաքուր գծային աշխատանքի համար. Anime-lineart` անիմե-շարժական գծային աշխատանքի համար. Scribble / soft-edge / HED` խճճված նկարների և խզբզոցների համար: Pose` լուսանկարից մարմնի դիրքը կրկնօրինակելու համար. Depth` տեսարանների երկրաչափությունը / 3D դասավորությունը պահպանելու համար. MLSD` ուղղահայաց գծերը (ճարտարապետություն / ներքին) պահպանելու համար. Normal` մակերեսի ուղղվածությունը և հաստությունը պահպանելու համար. Segmentation` տարածքները պահպանելու համար. Tile` գոյություն ունեցող պատկերի տարբերակները բարելավելու կամ մեծացնելու համար:
ControlNet-Union SDXL ProMax (xinsir, Apache 2.0)-ը բոլոր 12 պայմանավորված ցանցերը միացնում է մեկ 2.5 ԳԲ ծանրության մեջ։ Ավելի հին տեղադրումները ներբեռնում էին առանձին ~2.5 ԳԲ ծանրություն յուրաքանչյուր տիպի համար՝ canny և pose-ի միջև փոխանցումը նշանակում էր սառը սկիզբ։ Union մոդելը բեռնվում է մեկ անգամ և մնում է տաք, այնպես որ յուրաքանչյուր պայմանավորված տիպի համար առաջին զանգից հետո վայրկյաններ են պահանջվում։
Այո. ~1,200 տոկոս մեկ ցուցադրման համար (1,000 հիմնային SDXL + 20% ControlNet պայմանավորվածության հավելավճար)։ Գրանցված օգտատերերը ստանում են 30,000 անվճար տոկոս օրական՝ օրական մոտ 25 պայմանավորված ցուցադրումների համար անվճար։ Անանուն: 2,500 տոկոս/օր (~2 ցուցադրում)։
Այո - Կառավարման ուժգնության սլաքը (լռելյայն 0.7) որոշում է, թե որքան խստորեն է ելքը հետևում ձեր հղմանը: 1.0 = խստորեն (ելքը նման է ձեր հղման վերարտադրությանը): 0.4 = լարված (խնդրումը ավելի ազատ է): իջեցրեք այն ստեղծագործական տարբերակների համար, բարձրացրեք այն, երբ հավատարմությունը կարևոր է:
Լռելյայն 512×512։ SDXL ստանդարտ հարաբերակցությունները՝ 768×1024 կողային, 1024×768 երկայնական, 1024×1024 քառակուսի՝ բոլորը աշխատում են։ Մեծ ելքերը ավելի շատ VRAM և տոկեններ են օգտագործում։ H200-ը հեշտությամբ աջակցում է մինչև 1024×1024։
Այո։ ControlNet սերնդի յուրաքանչյուր պատկերի համար վճարվում է ~1,000 տոկոս, նույնը, ինչ ստանդարտ SDXL սերնդի համար։ Անանուն օգտատերերը ստանում են 6,000 տոկոս/օր, անվճար հաշիվը տալիս է 30,000 տոկոս/օր։ Ոչ վարկային քարտեր, ոչ ջրագիր։ Ավելի բարձր ճանաչողական կարողություններ կամ մի քանի տարբերակներ համապատասխանաբար ավելի շատ են վճարում խումբից։
ControlNet-Union SDXL ProMax-ը թողարկվել է Apache 2.0-ի ներքո՝ լիովին թույլատրելի, ներառյալ առևտրային օգտագործումը։ SDXL-ի հիմքը OpenRAIL++-ն է։ Եվ երկուսն էլ թույլ են տալիս առևտրային օգտագործումը։ Ձեր ստեղծած պատկերները կարող եք օգտագործել առանց որևէ վճարի։
Միևնույն մոդելը, նույն որակը, նույն պայմանավորված ազդանշանները։ ComfyUI-ն և A1111-ը պահանջում են 12+ ԳԲ VRAM և տեղադրված տեղական GPU։ Մենք այն աշխատեցնում ենք կիսավեր ենթակառուցվածքում՝ բացարձակապես անվճար ռեսուրսներով՝ առանց տեղադրման, առանց GPU-ի։
Առաջին կոչը ներբեռնում է Union- ի ծանրությունը (~2.5 ԳԲ) GPU- ի քեշ և տաքացնում է SDXL- ի ջրատարը։ Սկսեք 30- 60 վայրկյան սպասել առաջին խնդրանքին, երբ այն տեղադրված է կամ LRU- ն դուրս է բերվում։ Հաջորդ կոչերը սովորական բեռնման դեպքում վերադառնում են 4- 7 վայրկյանում։
Այո — POST multipart to /v1/image/generate/ with model=sdxl (or model=controlnet-union-sdxl-promax), prompt, control_image (file), control_type=<one of: canny, pose, depth, scribble, lineart, anime-lineart, mlsd, hed, soft-edge, normal, segmentation, tile>, optional control_strength (0.1-1.5). Bearer auth, 10K free tokens/month. /api/ has curl examples.