ControlNet — 12 պայմանավորվածության տեսակներ մեկ գործիքում
Տեղադրեք հղման պատկեր, ընտրեք պայմանավորվածության տիպի, գրեք հարցում։ Արհեստական բանականությունը պահպանում է ձեր հղման կառուցվածքը (գծեր, դիրք, խորություն և այլն) և ցանկացած ոճով ցուցադրում է նոր բովանդակությունը։ Պահպանված է ControlNet-Union SDXL ProMax-ով — Apache 2.0, ամբողջությամբ հարմար է առևտրային օգտագործման համար։
Արդյունք
Ինչպես է աշխատում ControlNet
ControlNet-ը թույլ է տալիս ձեզ կառավարել պատկերի ստեղծումը հղման պատկերի կառուցվածքի միջոցով, փոխարենը միայն տեքստը հարցնելու փոխարեն։ Համակարգիչը կարդում է ձեր հղումը և դուրս է բերում միակ պայմանավորված ազդանշանը՝ դրա եզրերը, խորության քարտեզը, մարդու դիրքորոշման կմախքը և այլն։ Դրանից հետո մոդելը փակվում է այդ ազդանշանի վրա, մինչև հարցումը որոշում է ոճը, գույները, լուսավորությունը և թեման։ Արդյունքը պահպանում է ճիշտ այն համադրությունը, որը դուք ներարկել եք, բայց այն ամբողջովին նոր է թվում։
Այս գործիքը աջակցվում է ControlNet-UnionSDXL ProMax (Apache 2.0)-ով, որը միակ մոդելն է, որը հասկանում է ներքևում նշված բոլոր 12 պայմանավորվածության տեսակները, այնպես որ դուք կարող եք փոխվել դրանց միջև մեկ ընտրողից առանց յուրաքանչյուր անգամ տարբեր ցանց բեռնելու։ Այն ամբողջությամբ հարմար է առևտրային օգտագործման համար՝ պահեք, վաճառեք կամ փոփոխեք այն, ինչ ստեղծում եք։
12 պայմանավորվածության տեսակներ
Խելացի
Ձախ կողմի եզրերի հայտնաբերում. Լավագույնը եզրերի և մաքուր գծերի պահպանման համար։
Առաջին
3D խորության քարտեզ։ Պահպանում է տարածական դասավորությունը՝ ինչն է մոտ, ինչը հեռու։
Ցույց տալ
OpenPose մարմնի կմախք. Լկցվում է կերպարի դիրքորոշումը և անդամների տեղադրությունը։
Գրառում
Ձեռքով նկարված նկարները վերածվել են արվեստի գործերի։
Սգգ
Գույնով կոդավորված տարածքի քարտեզ. Ստեղծեք յուրաքանչյուր վայրի դասակարգ.
Նորմալ
Գործվածքի նորամալ քարտեզ. Պահպանում է 3D գործվածքի ուղղվածությունը և բեկորները։
Գծային
Ֆրանսերեն՝ Le grand livre de la peinture, de la sculpture et de la gravure.
Նյութ
Գերազանց սահմանների հայտնաբերում, որը ավելի լայնորեն հետևում է ձևերին, քան Canny-ն է։
MLSDName
Տարբերակված ուղղահայաց հատվածներ։ Ստեղծված է ճարտարապետության, ներքին տեսքի և արտադրանքի նկարների համար։
Ֆլեշ
Օգտագործվում է մանրամասնության պահպանման և տեքստուրաների անխափան աշխատանքի համար։
Գծել
Ծածկույթի զգացում ունեցող պայմանավորում՝ պատկերի միայն մի մասը վերականգնելու համար։
Նորից նկարել / արտանկարել
Ծավալել կտավը կամ վերանկարել շրջանները՝ պահպանելով շրջապատող կառուցվածքը։
Երեք քայլ
- Բեռնել հղման պատկերը, լուսանկար, գծապատկեր, էկրանագրություն, ցանկացած այլ պատկեր, որի կառուցվածքը ցանկանում եք պահպանել։
- Ընտրեք պայմանավորվածության տիպի, որը համապատասխանում է ձեր հետաքրքրություններին (դիրք կերպարի համար, խորություն տեսարանների համար, մանրամասն կամ գծային՝ մաքուր եզրերի համար)։
- Գրեք մի հարց, որը նկարագրում է ձեզ հետաքրքրող տեսքը և գեներացնում է այն։ Ավելացրեք կառավարման ուժը՝ ավելի հստակ հետևելու համար հղմանը, նվազեցրեք այն՝ ստեղծագործական ազատության համար։
ControlNet — 12 պայմանավորվածության տեսակներ մեկ գործիքում — FAQ
Միակ գործիք, որը ցուցադրում է ControlNet-Union SDXL ProMax մոդելի բոլոր 12 պայմանավորվածության տեսակները՝ canny, pose, depth, scribble, lineart, anime-lineart, MLSD, HED, soft-edge, normal, segmentation և tile։ Ընտրեք պայմանավորվածության տեսակ, թողեք հղման նկարը, գրեք հարց, և SDXL-ը կցուցադրի նոր նկար, որը հետևում է ձեր հղման կառուցվածքին։
img2img- ը վերահաստատման համար ուղղակիորեն նկարում է մուտքագրված տվյալները` գույները, եզրերը ԵՎ երկրաչափությունը խառնում է խնդրանքի հետ։ ControlNet- ը ջնջում է գույները և պահում է միայն ընտրված կառուցվածքային ազդանշանը (գծերը, դիրքային կմախքը, խորության քարտեզը և այլն)։ Սա թույլ է տալիս Ձեզ ակտիվ փոխանակել բովանդակությունը՝ պահպանելով կոմպոզիցիան եռանդուն։ Շատ ավելի ուժեղ կառուցվածքային կառավարում, քան img2img- ը։
Canny / lineart` մաքուր գծային աշխատանքի համար. Anime-lineart` անիմե-շարժական գծային աշխատանքի համար. Scribble / soft-edge / HED` խճճված նկարների և խզբզոցների համար: Pose` լուսանկարից մարմնի դիրքը կրկնօրինակելու համար. Depth` տեսարանների երկրաչափությունը / 3D դասավորությունը պահպանելու համար. MLSD` ուղղահայաց գծերը (ճարտարապետություն / ներքին) պահպանելու համար. Normal` մակերեսի ուղղվածությունը և հաստությունը պահպանելու համար. Segmentation` տարածքները պահպանելու համար. Tile` գոյություն ունեցող պատկերի տարբերակները բարելավելու կամ մեծացնելու համար:
ControlNet-Union SDXL ProMax (xinsir, Apache 2.0)-ը բոլոր 12 պայմանավորված ցանցերը միացնում է մեկ 2.5 ԳԲ ծանրության մեջ։ Ավելի հին տեղադրումները ներբեռնում էին առանձին ~2.5 ԳԲ ծանրություն յուրաքանչյուր տիպի համար՝ canny և pose-ի միջև փոխանցումը նշանակում էր սառը սկիզբ։ Union մոդելը բեռնվում է մեկ անգամ և մնում է տաք, այնպես որ յուրաքանչյուր պայմանավորված տիպի համար առաջին զանգից հետո վայրկյաններ են պահանջվում։
Այո. ~1,200 տոկոս մեկ ցուցադրման համար (1,000 հիմնային SDXL + 20% ControlNet պայմանավորվածության հավելավճար)։ Գրանցված օգտատերերը ստանում են 30,000 անվճար տոկոս օրական՝ օրական մոտ 25 պայմանավորված ցուցադրումների համար անվճար։ Անանուն: 2,500 տոկոս/օր (~2 ցուցադրում)։
Այո - Կառավարման ուժգնության սլաքը (լռելյայն 0.7) որոշում է, թե որքան խստորեն է ելքը հետևում ձեր հղմանը: 1.0 = խստորեն (ելքը նման է ձեր հղման վերարտադրությանը): 0.4 = լարված (խնդրումը ավելի ազատ է): իջեցրեք այն ստեղծագործական տարբերակների համար, բարձրացրեք այն, երբ հավատարմությունը կարևոր է:
Լռելյայն 512×512։ SDXL ստանդարտ հարաբերակցությունները՝ 768×1024 կողային, 1024×768 երկայնական, 1024×1024 քառակուսի՝ բոլորը աշխատում են։ Մեծ ելքերը ավելի շատ VRAM և տոկեններ են օգտագործում։ H200-ը հեշտությամբ աջակցում է մինչև 1024×1024։
Հղումային պատկերները անմիջապես պրոցեսավորվում են, պայմանավորվածությունը դուրս է բերվում, ապա հղման ֆայլը հեռացվում է։ /account/?tab=history-ում մնում է միայն հարցումը + վերջնական ցուցադրումը։ Ոչ մի դեպքում չի օգտագործվում ուսուցման համար։ /privacy/-ը ամբողջական քաղաքականության համար։
ControlNet-Union SDXL ProMax-ը թողարկվել է Apache 2.0-ի ներքո՝ լիովին թույլատրելի, ներառյալ առևտրային օգտագործումը։ SDXL-ի հիմքը OpenRAIL++-ն է։ Եվ երկուսն էլ թույլ են տալիս առևտրային օգտագործումը։ Ձեր ստեղծած պատկերները կարող եք օգտագործել առանց որևէ վճարի։
Միևնույն մոդելը, նույն որակը, նույն պայմանավորված ազդանշանները։ ComfyUI-ն և A1111-ը պահանջում են 12+ ԳԲ VRAM և տեղադրված տեղական GPU։ Մենք այն աշխատեցնում ենք կիսավեր ենթակառուցվածքում՝ բացարձակապես անվճար ռեսուրսներով՝ առանց տեղադրման, առանց GPU-ի։
Առաջին կոչը ներբեռնում է Union- ի ծանրությունը (~2.5 ԳԲ) GPU- ի քեշ և տաքացնում է SDXL- ի ջրատարը։ Սկսեք 30- 60 վայրկյան սպասել առաջին խնդրանքին, երբ այն տեղադրված է կամ LRU- ն դուրս է բերվում։ Հաջորդ կոչերը սովորական բեռնման դեպքում վերադառնում են 4- 7 վայրկյանում։
Այո — POST multipart to /v1/image/generate/ with model=sdxl (or model=controlnet-union-sdxl-promax), prompt, control_image (file), control_type=<one of: canny, pose, depth, scribble, lineart, anime-lineart, mlsd, hed, soft-edge, normal, segmentation, tile>, optional control_strength (0.1-1.5). Bearer auth, 10K free tokens/month. /api/ has curl examples.