ControlNet — 12 კონდიციონერის ტიპი ერთ ინსტრუმენტში
რეფერენტული გამოსახულების ჩატვირთვა, კონდიციონერის ტიპის არჩევა, კითხვის დაწერა. AI ინარჩუნებს რეფერენტის სტრუქტურას (ლინკები, პოზა, სიღრმე და ა.შ.) და აჩვენებს ახალ შინაარსს ნებისმიერი სტილის მიხედვით. მხარდაჭერილი ControlNet-Union SDXL ProMax - Apache 2.0, სრულიად კომერციული გამოყენების მეგობრული.
შედეგი
როგორ მუშაობს ControlNet
ControlNet საშუალებას გაძლევთ მართოთ სურათის გენერაცია რეფერენტული სურათის სტრუქტურის გამოყენებით, მხოლოდ ტექსტურ კითხვაზე დაყრდნობის ნაცვლად. წინაპროცესორი კითხულობს თქვენს რეფერენტს და ამოიღებს ერთ კონდიციონირებულ სიგნალს - მისი საზღვრები, სიღრმის რუკა, ადამიანის პოზა და ა.შ. დიფუზიის მოდელი შემდეგ დაბლოკილია ამ სიგნალზე, როდესაც კითხვა წყვეტს სტილსა, ფერებს, განათებას და საგნებს. შედეგი ტოვებს ზუსტ კომპოზიციას, რომელიც თქვენ ჩაწერეთ, მაგრამ გამოიყურება როგორც რაღაც სრულიად ახალი.
ეს ხელსაწყო მხარდაჭერილია ControlNet-Union SDXL ProMax (Apache 2.0) - ერთი მოდელი, რომელიც ცნობს ყველა 12 ქვემოთ მოცემულ კონდიციონერის ტიპს, ასე რომ თქვენ შეგიძლიათ გადართვა მათ შორის ერთი მომხრედან სხვა ქსელის ჩატვირთვის გარეშე ყოველი შემთხვევისთვის. ის სრულად კომერციული გამოყენებისთვისაა: შეინახეთ, გაყიდეთ ან შეცვალეთ ყველაფერი, რაც თქვენ შექმნით.
12 რთო კონდიციონერი
ჟმვქნჲ.
საზღვრების ნათლად დანახვა. საუკეთესოა ნათელ კონტურების და სუფთა ხაზების შესანახად.
სიღრმე
3D სიღრმის რუკა. იკავებს სივრცის განლაგებას - რა არის ახლოს და რა - შორს.
პოზა
OpenPose სხეულის სკვლავები. ფიგურების პოზიციის და კიდურების პოზიციების დაბლოკვა.
ჭრილობაName
ჟლჲბჲენთ პყფნჲ ნაპვფვნთ ფპრჲკთ ჟვ ოპვგყპნაჳა გ დჲრჲგჲ თჱკსჟრგჲ.
სეგმენტაცია
ფერთა კოდირებით გაფორმებული რეგიონების რუკა. სცენის თითოეული არე კლასს მიენიჭება.
ჩვეულებრივი
ზედაპირის ნორმალური რუკა. 3D ზედაპირის სწორი მიმართულება და ბურთები დაცულია.
ხაზოვანი ხელოვნება
Fine line extraction — იდეალურია ტილოებისთვის, მანგასა და ილუსტრაციებისთვის.
მყარი საზღვრები
ნვზნჲ ჲრკპთგაŒვ ნა დპანთუთრვ, კჲთ ჟლვეარ ჲბლთკთრვ ოჲ-ლჲქჲ ჲე კანთ.
MLSD მოდულიName
ოპაგთ ლთნთთ, ოპთლთფნთ ჱა აპჳთრვკრსპა, თნრვპთჲპ თ ოპჲესკრთ.
ფანჯარა
1996 წელს დაარსდა ქართული ენისა და ლიტერატურის ეროვნული ცენტრის ადმინისტრაცია.
ფერთა პალიტრა
თჱჲბღჲ ნვ ჟვ ჱნავ.
გადახაზვა / გადაჭრა
ქსოვილის გაფართოება ან რეგიონების გადახაზვა გარშემო სტრუქტურის დაცვასთან ერთად.
რპთ ჟრყოკთ.
- ატვირთეთ რეფერენციული სურათი — ფოტო, სქემა, ეკრანის გადაღება, ნებისმიერი სტრუქტურა, რომლის შენახვაც გსურთ.
- აირჩიეთ კონდიციონერის ტიპი, რომელიც შეესაბამება თქვენს მოთხოვნებს (პოზა ფიგურისთვის, სიღრმე სცენისთვის, ჭკვიანი ან მართკუთხა სუფთა კონტურებისთვის).
- დაწერეთ თხოვნა, რომელიც აღწერს თქვენთვის სასურველ გარეგნობას და შექმნის მას. გაზარდეთ კონტროლის ძალა, რომ უფრო ახლოს მიჰყვეთ რეფერენტს, და დააკლოთ, რომ მეტი კრეატიული თავისუფლების მიღება შეძლოთ.
ControlNet — 12 კონდიციონერის ტიპი ერთ ინსტრუმენტში - FAQ
ControlNet საშუალებას გაძლევთ AI სურათის გენერირებას სტრუქტურული რეფერენტული სურათით, მხოლოდ ტექსტურ თხოვნაზე დაყრდნობის ნაცვლად. ჩატვირთეთ რეფერენტი, აირჩიეთ კონდიციონერის ტიპი (პოზა, სიღრმე, საზღვრები, ჭრილობა, სეგმენტაცია და სხვა), დაწერეთ თხოვნა და SDXL გენერირებას ახალი სურათი, რომელიც ემთხვევა თქვენს რეფერენტულ სტრუქტურას, მისი შინაარსის, სტილისა და ფერების მიღებისას თქვენი სიტყვებიდან. მას უჭერს მხარს ControlNet-Union SDXL ProMax - ერთი მოდელი, რომელიც 12 კონდიციონერის ტიპს მართავს ერთ ომინ- არჩევანში.
img2img გადახატავს შეყვანილ მონაცემებს პირდაპირ - ფერები, საზღვრები და გეომეტრია შერეულია კითხვის ნიშნით. ControlNet ტოვებს ფერებს და ტოვებს მხოლოდ არჩეულ სტრუქტურულ სიგნალს (ლინზებს, პოზის skeleton- ს, სიღრმის რუკას და ა.შ.). ეს საშუალებას გაძლევთ რადიკალურად შეცვალოთ შინაარსი, ხოლო კომპოზიცია დარჩება მყარი. img2img- სგან ბევრად უფრო ძლიერი სტრუქტურული კონტროლი.
Canny / lineart - სუფთა ხაზების შესაყვანად. Anime- lineart - ანიმე- სტილის ხაზების შესაყვანად. Scribble / soft- edge / HED - თხელი სკიტებისა და ჭრილობების შესაქმნელად. Pose - ფოტოს სხეულზე პოზიციის კოპირება. Depth - სცენის გეომეტრიის/ 3D განლაგების შენარჩუნება. MLSD - მარჯვენა ხაზების შენარჩუნება (არქიტექტურა/ ინტერიერი). Normal - ზედაპირის მიმართულების და მოცულობის შენარჩუნება. Segmentation - რეგიონების შენარჩუნება. Tile - არსებული გამოსახულების ვარიაციების გაუმჯობესება ან გაზრდა.
ControlNet- Union SDXL ProMax (xinsir, Apache 2. 0) ყველა 12 კონდიციონერ ქსელს ერთ 2. 5 GB წონაში ათავსებს. უფრო ძველი განლაგებები იტვირთებოდა დამოუკიდებლად ~2. 5 GB წონაში თითოეული ტიპისთვის - canny და pose- ს გადართვა ნიშნავდა ცივი დაწყებას. union მოდელი ერთხელ ჩატვირთვა და რჩება ცხელი, ასე რომ ყველა კონდიციონერის ტიპი პირველი გამოძახების შემდეგ მცირე წამშია.
დიახ. ~1,200 ტოკენი რენდერსზე (1,000 ბაზ SDXL + 20% ControlNet- ის პირობების დამატებითი გადასახადი). შესული მომხმარებლები ყოველდღიურად იღებენ 30,000 უფასო ტოკენს — დღეში დაახლოებით 25 პირობების რენდერს უფასოდ. ანონიმი: 2,500 ტოკენი/ დღე (~2 რენდერი).
დიახ - კონტროლის სიმძლავრის სლაიდერი (ნაგულისხმევი 0. 7) განსაზღვრავს რამდენად მკაცრად მოჰყვება გამონატანი თქვენს დაყრდნობას. 1. 0 = მკაცრი (გამონატანი გამოიყურება როგორც თქვენი დაყრდნობის გადარენდერი). 0. 4 = თხელი (შეკითხვას აქვს მეტი თავისუფლება). დაწესეთ ნაკლები კრეატიული ვარიაციებისთვის, დააწესეთ მეტი, როდესაც სიზუსტე მნიშვნელოვანია.
ნაგულისხმევი 512×512. SDXL სტანდარტული ხედვის კოეფიციენტები — 768×1024 პორტრეტი, 1024×768 პეიზაჟი, 1024×1024 კვადრატი — ყველა მუშაობს. უფრო დიდი გამონატანები მოიხმარს უფრო მეტ VRAM- ს და ტოკენს; H200 მხარს უჭერს 1024×1024- ს კომფორტულად.
ControlNet თაობის წარმოება ღირს ~1,000 ტოკენი სურათზე, იგივეა, რაც სტანდარტული SDXL თაობის წარმოება. ანონიმური მომხმარებლები იღებენ 6,000 ტოკენს დღეში; უფასო ანგარიში იღებს 30,000 ტოკენს დღეში. არ არის საჭირო საკრედიტო ბარათი, არ არის საჭირო წყალმჭრელი. უფრო მაღალი განზომილებების ან მრავალი ვარიანტისთვის პროპორციულად მეტი ფასია.
დატოვეთ კონტროლის სურათი სტრუქტურის მფლობელი და დატოვეთ კითხვა ყველა სხვა ელემენტის მფლობელი. აღწერეთ საგანი, სტილი, მასალები, განათება და განწყობა კითხვაში - მაგალითად, საძინებლის სიღრმის რუკა, კითხვა "სკანდინავიური საძინებლის კომფორტული, თბილი საღამოს სინათლე, ხის იატაკი, ფოტორეალისტური". დაუმატეთ უარყოფითი კითხვა, რომ გამორიცხოთ უხერხული ელემენტები. თუ გამონატანი ძალიან მკაცრად მიჰყვება მითითებას, გაამკაცრეთ კონტროლი; თუ ის იგნორირდება, გაამკაცრეთ კონტროლი.
იგივე მოდელი, იგივე ხარისხი, იგივე კონდიციონერი. ComfyUI და A1111 მოითხოვენ ლოკალურ გრაფიკულ პროცესორს 12+ GB VRAM- ით და დაყენებით. ჩვენ ვმუშაობთ საერთო ინფრასტრუქტურაზე, დიდი თავისუფალი რესურსებით - არ არის საჭირო დაყენება, არ არის საჭირო გრაფიკული პროცესორი.
პირველი გამოძახება ატვირთავს Union- ის მასას (~2. 5 GB) GPU- ს კეში და ათბობს SDXL- ის მილსადენს. ელოდეთ 30- 60 წამს პირველი მოთხოვნის შემდეგ განთავსების ან LRU- ს გაძევების შემდეგ. შემდეგი გამოძახებები ტიპიური დატვირთვის დროს 4- 7 წამში დაბრუნდება.
დიახ — POST multipart to /v1/image/generate/ with model=sdxl (or model=controlnet-union-sdxl-promax), prompt, control_image (file), control_type=<one of: canny, pose, depth, scribble, lineart, anime-lineart, mlsd, hed, soft-edge, normal, segmentation, tile>, optional control_strength (0.1-1.5). Bearer auth, 10K free tokens/month. /api/ has curl examples.