Unitate 3 / 12

O privire aprofundată asupra instrumentelor AI vizuale: Prompt, Reference and Style Control

Câștiguri:

  • Abilitatea de a stabili o anatomie vizuală promptă (subiect, material, unghi, lumină, stil, negativ) și de a obține rezultate reproductibile
  • Abilitatea de a direcționa direcția vizuală cu metode de control, cum ar fi imaginea de referință, ControlNet, greutatea semințelor și stilului
  • Abilitatea de a alege instrumentul în funcție de sarcină și de a evalua rezoluția, consistența și limitele drepturilor de utilizare ale rezultatului

În unitatea anterioară, ați văzut cum să poziționați AI în generarea conceptului. În această unitate mergem cu un pas mai adânc: veți învăța să controlați efectiv instrumentele vizuale AI. Frustrarea multor designeri este că instrumentul produce imagini „pe cont propriu”; Cu toate acestea, problema nu este de obicei ambiguitatea instrumentului, ci ambiguitatea instrucțiunilor date. Controlul IA vizuală necesită cunoașterea a trei lucruri: anatomie promptă (setarea corectă a instrucțiunii), controlul referințelor și al compoziției (conducerea vizuală) și reproductibilitatea (obținerea din nou a aceluiași rezultat). Odată ce le înveți pe acestea trei, AI se transformă dintr-o mașină vizuală aleatorie într-un instrument de proiectare orientabil.

Anatomie promptă: șase straturi de descriere a unei imagini

Un prompt vizual bun nu este o propoziție aleatorie, ci o rețetă în straturi. Luați în considerare aceste șase straturi:

  1. Subiect: Ce producem? ("cutie de încărcare pentru căști fără fir")
  2. Forma și detaliu: Siluetă, proporție, colț, distincție de suprafață. ("colțuri rotunjite, din două piese, linie de despărțire subțire în partea de sus")
  3. Material și CMF: Culoare-material-suprafață. ("policarbonat antracit mat, bandă de aluminiu periat")
  4. Unghi și încadrare: Punct de vedere și încadrare. ("3/4 din față, ușor de sus, centrat pe produs")
  5. Lumină și mediu: Iluminare și fundal. („lumină moale de studio, fundal infinit neutru gri deschis”)
  6. Stil și scop: Schiță, randare fotorealistă, desen tehnic. („redarea fotorealistă a produsului”)

La aceasta se adaugă un prompt negativ: lucruri pe care nu le dorești. Multe instrumente oferă o zonă de „prompt negativ”; Aici ștergeți rezultatul tastând ceea ce nu doriți, cum ar fi „mâna umană, text, logo, fundal dezordonat, multi-produs”. Dacă lăsați straturi lipsă, AI va completa acele goluri cu propria medie statistică; Asta înseamnă clișeu.

Sfat: Configurați promptul ca și cum ar fi citit dintr-un model: subiect + formular + CMF + unghi + lumină + stil + negativ. Dacă nu vă place o ieșire, întrebați ce strat lipsește, nu rescrieți întregul prompt.

Control de referință, compoziție și stil

Cuvintele nu pot spune totul; Uneori, o imagine valorează cât o mie de cuvinte. Gadgeturile moderne oferă mai multe mijloace puternice de control:

  • Imagine de referință (prompt pentru imagine/referință pentru imagine): încărcați o imagine și spuneți „fă-o să arate așa”. Setați cât de mult se referă instrumentul la ieșire cu o greutate.
  • ControlNet: În ecosistemul Stable Diffusion, este un strat de control care păstrează structura de margine/linie/adâncime/poziție a unei schițe sau a unei fotografii și produce o nouă imagine deasupra acesteia. Ideal pentru păstrarea compoziției și schimbarea materialului propriei schițe.
  • Referință stil / greutate stil: Pentru a transmite doar atmosfera / senzația de culoare-textură a unei imagini, nu conținutul acesteia.
  • Inpainting (editare regională): Mascarea doar unei părți a imaginii și reproducerea acesteia (de exemplu, schimbarea doar a mânerului).
  • LoRA / antrenament personalizat: La un nivel avansat, reglarea fină a modelului pe baza unui limbaj de brand sau a unui stil specific. Acest lucru necesită confidențialitate și precauție privind drepturile de autor (cu propriile date, cu permisiunea).

Beneficiul comun al acestor instrumente: forțează AI să funcționeze din cadrul pe care i-l oferiți, mai degrabă decât să viseze de la zero. Cele mai valoroase pentru designer sunt adesea ControlNet și inpainting, deoarece vă păstrează propria compoziție a schiței.

Reproductibilitate: sămânță și parametri

Modelele de difuzie încep cu aleatorie. Sămânța este numărul de pornire al acestei aleatorii. Același prompt + aceeași sămânță + aceiași parametri oferă de obicei aceeași/foarte similară imagine. Acest lucru este esențial pentru design: remediați sămânța pentru a reproduce o imagine care vă place sau doar schimbați un cuvânt și vedeți efectul într-un mod controlat. Alți parametri importanți: raportul de aspect, pașii (mai mulți pași, mai rafinați, dar mai lenți) și scara de ghidare (orientare/CFG; cât de bine se potrivește promptului - dacă este prea mare, pare artificial și forțat).

control

Ce face

Când să utilizați

Fixarea semințelor

Reproduce aceeași ieșire

Când dezvoltați o imagine și încercați A/B

Imagine de referință + greutate

Seamănă cu o imagine

Compoziție/transfer atmosferic

ControlNet (margine/adâncime)

Păstrează compoziția, modifică conținutul

Crearea unei randări din propria schiță

inpictura

Actualizează o singură regiune

Schimbați un singur detaliu

prompt negativ

Elimina nedorite

Curățare fundal, mână, text

trei mini cutii

Cazul 1 — Protejarea propriei schițe. Un designer dorește să transforme o schiță desenată manual a unui aspirator de mână într-o redare fotorealistă. Când îl încercați doar cu un mesaj text, AI ​​produce o formă complet diferită. Când încărcați schița utilizând modul înțelept al ControlNet, AI își păstrează liniile și o acoperă cu plastic mat și iluminare de studio. Obține rezultatul dorit în 4 încercări. Lecție: pentru păstrarea compoziției, ControlNet este mult mai puternic decât promptul pur.

Cazul 2 — Pierderea necontrolată a variației. Un designer găsește un concept care îi place, dar nu ia notă de sămânță. A doua zi, când cere un „mâner puțin mai subțire”, nu poate produce din nou aceeași imagine; Un produs complet diferit iese de fiecare dată și pierde ore. Lecție: salvați semințele și promptul complet pentru fiecare rezultat care vă place; acestea sunt punctele tale de „întoarcere”.

Cazul 3 — Curățare cu prompt negativ. Când un designer produce imagini de studio, mâinile umane nedorite, text reflectat și un al doilea produs apar în jumătate din imprimate. Se adaugă „mâini umane, text, filigran, produs duplicat, fundal aglomerat” la promptul negativ, iar calitatea ieșirii crește semnificativ cu doar 8 cuvinte. Lecție: a spune ceea ce nu vrei este la fel de important ca și a spune ceea ce vrei.

Șabloane de prompt copiabile

SCHELET PROMPT STRACTAT „[subiect], [formă și detaliu], [CMF: culoare-material-suprafață],[unghi și încadrare], [lumină și fundal], [stil: schiță/redare/tehnică].--negativ: mână umană, text, logo, filigran, multi-produs, fundal dezordonat."

ȘABLAN DE RENDARE DIN REFERINȚĂ"Păstrează LINIA ȘI COMPOZIȚIA schiței pe care am încărcat-o (mod ControlNetedge). Aplicați următorul material pe el: [corp din plastic mat, detaliu aluminiu]. Lumină: studio moale. Fundal: gri neutru. Nu schimbați forma, adăugați doar material și lumină."

SIMPLU SCHIMBARE DE DETALII (PINTURA) „În această imagine, reproduceți NUMAI zona [zona mascată: mâner]. Versiune nouă: [mai subțire, ergonomică, curbată]. NU atingați restul imaginii, iluminarea și unghiul acesteia."

ȘABLAN DE NOTĂ DE REPRODUCTIBILITATE „Îmi place acest tipărit. Salvați următoarele informații și utilizați-o data viitoare: prompt = [text complet], seed = [număr], aspect = [raport], pas = [număr], orientare = [valoare]. Schimbați doar acest element: [X]."

Prompt slab / Prompt puternic

PROMPT SLAB: „Redare frumoasă a căștilor pe un fundal alb”.

STRONG PROMPT: „Carcasă de încărcare fără fir pentru căști intraauriculare, formă ovală de pastilă, linie subțire de despărțire în partea de sus. CMF: corp din policarbonat mat fildeș, bandă de balamale aurie satinată. Unghi: 3/4 față, ușor sus. Lumină: softbox studio moale, ușoară reflexie superioară. Fundal: gri deschis neutru, redare produs infinit. 4:3 --negativ: mâna umană, text, logo, filigran, al doilea produs, umbră dură."

Promptul slab permite instrumentului să completeze spațiile libere cu clișeu; Promptul puternic identifică fiecare strat, elimină negativele și îl face reproductibil cu sămânța.

Greșeli comune

  • Scrieți un mesaj vag de o propoziție și încărcați rezultatul în instrument. AI umple golurile, nu tu.
  • Nu se salvează semințele și parametrii. Nu veți mai putea obține niciodată rezultatul dorit.
  • Nu utilizați niciodată promptul negativ. Elementele nedorite contaminează ieșirea.
  • Faceți sute de încercări aleatorii în loc de verificarea compoziției. ControlNet/inpainting accelerează lucrarea.
  • Folosind imaginea cu drepturi de autor a altcuiva ca referință. Există riscul imitației stilului și al dreptului de autor (vezi Unitatea 10).
Atenție: Imaginile de referință sau greutățile de stil sunt instrumente puternice, dar prezintă riscuri legale și etice dacă sunt folosite pentru a copia designul proprietar al altcuiva sau stilul semnăturii unui artist. Alegeți referințele din propriul material sau din surse permise/gratuite.

Pe scurt

Controlul AI vizuală necesită trei capabilități: configurarea unui prompt stratificat (subiect, formă, CMF, unghi, lumină, stil, negativ), ghidare cu imaginea (referință, ControlNet, inpainting, greutate stil) și asigurarea reproductibilității (salvarea semințelor și a parametrilor). Cu aceste trei, AI se transformă dintr-o mașină aleatorie într-un instrument de proiectare orientabil. ControlNet și inpainting sunt mult mai puternice decât purul prompt atunci când doriți să vă protejați compoziția. Eliminați-le pe cele pe care nu le doriți cu mesajul negativ și alegeți-vă referințele din surse protejate prin drepturi de autor.

Sarcina de aplicare

Alegeți un produs și desenați (sau găsiți) mai întâi o schiță aproximativă de mână. Scrieți un prompt care descrie acest produs cu un cadru de prompt stratificat, adăugați un prompt negativ și produceți patru rezultate. Salvați semințele și parametrii rezultatului dorit; Apoi, cu logica „Single detail change”, schimbați un singur element (de exemplu, mânerul) și produceți-l din nou cu aceeași sămânță. Comparați cele două rezultate și scrieți cum se modifică controlul.

lista de verificare

  • [ ] Am configurat promptul pentru a acoperi șase straturi (subiect, formă, CMF, unghi, lumină, stil).
  • [ ] Am scris ceea ce nu am vrut în promptul negativ.
  • [ ] Am folosit referință/ControlNet/inpainting când aveam nevoie să mențin compoziția.
  • [ ] Am salvat semințele și parametrii rezultatului care mi-a plăcut.
  • [ ] Am încercat variația controlată prin mutarea unei singure variabile.
  • [ ] Am ales imaginile mele de referință din surse protejate prin drepturi de autor.