מבט מעמיק על כלי בינה מלאכותית חזותית: הנחיה, הפניה ובקרת סגנון

רווחים:

• יכולת לבסס אנטומיה חזותית מיידית (נושא, חומר, זווית, אור, סגנון, שלילי) ולקבל תוצאות ניתנות לשחזור
• יכולת לכוון כיוון ויזואלי עם שיטות בקרה כגון תמונת רפרנס, ControlNet, משקל סיד ומשקל סטייל
• יכולת לבחור את הכלי בהתאם למשימה ולהעריך את הרזולוציה, העקביות וגבולות זכויות השימוש של הפלט

ביחידה הקודמת ראית איך למקם AI ביצירת קונספט. ביחידה זו נלך צעד אחד עמוק יותר: תלמד לשלוט בפועל בכלי AI חזותיים. התסכול של מעצבים רבים הוא שהכלי מייצר תמונות "בכוחות עצמו"; עם זאת, הבעיה בדרך כלל אינה העמימות של הכלי אלא העמימות של ההוראות שניתנו. שליטה בבינה מלאכותית חזותית מחייבת לדעת שלושה דברים: אנטומיה מהירה (הגדרת ההוראה בצורה נכונה), בקרת התייחסות וקומפוזיציה (מובילה עם הוויזואלי), ושחזור (השגת אותה תוצאה שוב). ברגע שאתה לומד את שלושת אלה, AI הופך ממכונה חזותית אקראית לכלי עיצוב ניתן לכיוון.

אנטומיה מהירה: שש שכבות של תיאור תמונה

הנחיה ויזואלית טובה אינה משפט אקראי, אלא מתכון שכבות. שקול את שש השכבות האלה:

1. נושא: מה אנחנו מייצרים? ("תיבת טעינת אוזניות אלחוטיות")
2. צורה ופרטים: צללית, פרופורציה, פינה, הבחנה משטח. ("פינות מעוגלות, שני חלקים, קו הפרדה דק למעלה")
3. חומר ו-CMF: צבע-חומר-משטח. ("פוליקרבונט אנתרציט מאט, פס אלומיניום מוברש")
4. זווית ומסגור: נקודת מבט ומסגור. ("3/4 מלפנים, מעט מלמעלה, מוצר במרכז")
5. אור וסביבה: תאורה ורקע. ("אור סטודיו רך, רקע אינסופי באפור בהיר נייטרלי")
6. סגנון ומטרה: סקיצה, עיבוד פוטוריאליסטי, ציור טכני. ("עיבוד מוצר פוטוריאליסטי")

לכך מתווספת הנחיה שלילית: דברים שאתה לא רוצה. כלים רבים מציעים אזור "הנחיה שלילית"; כאן אתה מנקה את הפלט על ידי הקלדת מה שאתה לא רוצה, כגון "יד אנושית, טקסט, לוגו, רקע מבולגן, ריבוי מוצרים". אם תשאיר שכבות חסרות, AI ישלים את הפערים האלה עם ממוצע סטטיסטי משלה; זה אומר קלישאה.

טיפ: הגדר את ההנחיה כאילו היא קוראת מתבנית: נושא + טופס + CMF + זווית + אור + סגנון + שלילי. אם אתה לא אוהב פלט, שאל איזו שכבה חסרה, אל תכתוב מחדש את כל ההנחיה.

בקרת רפרנס, קומפוזיציה וסגנון

מילים אינן יכולות לומר הכל; לפעמים תמונה שווה אלף מילים. גאדג'טים מודרניים מציעים מספר אמצעי שליטה רבי עוצמה:

• תמונת הפניה (הנחיית תמונה / הפניה לתמונה): אתה מעלה תמונה ואומר "תגרום לזה להיראות כך". אתה מגדיר עד כמה הכלי מתייחס לפלט עם משקל.
• ControlNet: במערכת האקולוגית Stable Diffusion, זוהי שכבת בקרה המשמרת את מבנה הקצה/קו/עומק/פוזה של סקיצה או תמונה ומייצרת תמונה חדשה מעליה. אידיאלי לשימור הקומפוזיציה ולשינוי החומר של הסקיצה שלך.
• התייחסות לסגנון / משקל סגנון: להעביר רק את האווירה / תחושת הטקסטורה של התמונה, לא את התוכן שלה.
• ציור (עריכה אזורית): מיסוך רק חלק מהתמונה ושחזור שלו (לדוגמה, החלפת הידית בלבד).
• LoRA / אימון מותאם אישית: ברמה מתקדמת, כוונון עדין של הדגם לפי שפת מותג או סגנון ספציפי. זה דורש זהירות בפרטיות ובזכויות יוצרים (עם הנתונים שלך, ברשות).

היתרון המשותף של הכלים האלה: הם מאלצים את הבינה המלאכותית לעבוד מהמסגרת שאתה נותן לה, במקום לחלום מאפס. החשובים ביותר עבור המעצב הם לעתים קרובות ControlNet וציור, מכיוון שהם משמרים את הרכב הסקיצות שלך.

יכולת שחזור: זרע ופרמטרים

מודלים של דיפוזיה מתחילים באקראיות. זרע הוא המספר ההתחלתי של האקראיות הזו. אותה הנחיה + אותו סיד + אותם פרמטרים בדרך כלל נותנת תמונה זהה/דומה מאוד. זה קריטי לעיצוב: אתה מתקן את הזרע כדי לשחזר תמונה שאתה אוהב, או פשוט משנה מילה ורואה את האפקט בצורה מבוקרת. פרמטרים חשובים נוספים: יחס גובה-רוחב, צעדים (יותר צעדים, מעודנים יותר אך איטיים יותר), וסולם הדרכה (הנחיה/CFG; עד כמה זה מתאים להנחיה - אם זה גבוה מדי, זה נראה מלאכותי ומאולץ).

שליטה

מה עושה

מתי להשתמש

תיקון זרעים

משחזר את אותו פלט

כאשר מפתחים תמונה ומנסים A/B

תמונת התייחסות + משקל

זה דומה לתמונה

הרכב/העברת אווירה

ControlNet (קצה/עומק)

שומר על קומפוזיציה, משנה תוכן

יצירת עיבוד מהסקיצה שלך

ציור בתוך

מרענן אזור אחד בלבד

שנה פרט בודד

הנחיה שלילית

מבטל לא רצויים

ניקוי רקע, יד, טקסט

שלושה מיני תיקים

מקרה 1 - הגנה על הסקיצה שלך. מעצב רוצה להפוך סקיצה מצוירת ביד של שואב אבק ידני לעיבוד פוטוריאליסטי. כשאתה מנסה את זה רק עם הנחית טקסט, ה-AI מייצר צורה שונה לחלוטין. כשאתה מעלה את הסקיצה שלך באמצעות מצב ה-Cny של ControlNet, ה-AI שומר על הקווים שלו ומכסה אותו בפלסטיק מט ותאורת אולפן. הוא משיג את התוצאה שהוא רוצה ב-4 ניסיונות. לקח: לשימור ההרכב, ControlNet הרבה יותר חזק מהנחיה טהורה.

מקרה 2 - אובדן לא מבוקר של וריאציה. מעצב מוצא קונספט שהוא אוהב, אבל לא שם לב לזרע. למחרת, כשהוא מבקש "ידית קצת יותר דקה", הוא לא יכול לייצר שוב את אותה תמונה; כל פעם יוצא מוצר אחר לגמרי והוא מאבד שעות. שיעור: שמור את המקור ואת ההנחיה המלאה של כל פלט שאתה אוהב; אלו נקודות ה"החזרה" שלך.

מקרה 3 - ניקוי עם הנחיה שלילית. כאשר מעצב מייצר תמונות סטודיו, ידיים אנושיות לא רצויות, טקסט משתקף ומוצר שני מופיעים במחצית מהתדפיסים. הוא מוסיף "ידיים אנושיות, טקסט, סימן מים, מוצר משוכפל, רקע עמוס" להנחיה השלילית ואיכות הפלט עולה משמעותית עם 8 מילים בלבד. לקח: להגיד מה שאתה לא רוצה חשוב לא פחות מאשר להגיד מה שאתה כן רוצה.

תבניות הנחיות הניתנות להעתקה

LAYERED PROMPT SKELETON"[נושא], [צורה ופירוט], [CMF: צבע-חומר-משטח],[זווית ומסגור], [אור ורקע], [סגנון: סקיצה/עיבוד/טכניקה].--שלילי: יד אדם, טקסט, לוגו, סימן מים, ריבוי מוצרים, רקע מבולגן."

render TEMPLATE FROM REFERENCE"שמור על הקו והקומפוזיציה של הסקיצה שהעליתי (מצב ControlNetedge). החל עליו את החומר הבא: [גוף פלסטיק מט, פרט אלומיניום]. אור: סטודיו רך. רקע: אפור ניטרלי. אל תשנה את הצורה, רק הוסף חומר ואור."

תבנית שינוי פרט בודד (ציור) "בתמונה זו, שחזרו רק את אזור [אזור המסיכה: ידית]. גרסה חדשה: [דקה יותר, ארגונומית, מעוקלת]. אל תיגע בשאר התמונה, בתאורה ובזווית שלה."

תבנית הערה לשחזור "אני אוהב את התדפיס הזה. שמור את המידע הבא והשתמש בו בפעם הבאה: prompt = [טקסט מלא], seed = [number], aspect = [ratio], step = [number], כיוון = [value]. פשוט שנה את האלמנט האחד הזה: [X]."

הנחיה חלשה / הנחיה חזקה

הנחיה חלשה: "עיבוד נחמד של אוזניות על רקע לבן."

הנחיה חזקה: "מארז טעינת אוזניות אלחוטיות באוזניים, בצורת גלולה סגלגלה, קו הפרדה דק בחלק העליון. CMF: גוף פוליקרבונט שנהב מט, פס ציר זהב סאטן. זווית: 3/4 קדמית, מעט עליון. אור: softbox סטודיו רך, השתקפות עליונה קלה. רקע: מוצר אפור בהיר נייטרלי: מוצר אפור בהיר: אינסופי צילום אחורי. 4821, היבט 4:3 - שלילי: יד אדם, טקסט, לוגו, סימן מים, מוצר שני, צל קשה."

ההנחיה החלשה מאפשרת לכלי למלא את החסר בקלישאה; ההנחיה העוצמתית מזהה כל שכבה, מבטלת שליליות והופכת אותה לשחזור עם הזרע.

טעויות נפוצות

• כתוב הנחיה מעורפלת של משפט אחד והעלה את התוצאה לכלי. AI ממלא את החסר, לא אתה.
• לא שומר זרעים ופרמטרים. לעולם לא תוכל לקבל שוב את הפלט שאתה אוהב.
• לעולם אל תשתמש בהנחיה השלילית. אלמנטים לא רצויים מזהמים את הפלט.
• עושה מאות ניסויים אקראיים במקום בדיקת הרכב. ControlNet/ציור מזרז את העבודה.
• שימוש בתמונה המוגנת בזכויות יוצרים של מישהו אחר כהפניה. קיים סיכון לחיקוי סגנון וזכויות יוצרים (ראה יחידה 10).

זהירות: תמונות עזר או משקלי סגנון הם כלים רבי עוצמה, אך הם מהווים סיכונים משפטיים ואתיים אם משתמשים בהם כדי להעתיק עיצוב קנייני של מישהו אחר או סגנון חתימה של אמן. בחר את ההפניות שלך מהחומר שלך או ממקורות מורשים/חופשיים.

לסיכום

שליטה בבינה מלאכותית חזותית דורשת שלוש יכולות: הגדרת הנחיה מרובדת (נושא, צורה, CMF, זווית, אור, סגנון, שלילי), הדרכה עם התמונה (רפרנס, ControlNet, ציור, משקל סגנון) ומתן יכולת שחזור (שמירת הזרע והפרמטרים). עם שלושת אלה, AI הופך ממכונה אקראית לכלי עיצוב הניתן לכיוון. ControlNet ו-inpainting הם הרבה יותר חזקים מהנחיה טהורה כאשר אתה רוצה להגן על הקומפוזיציה שלך. הסר את אלה שאינך רוצה עם ההנחיה השלילית ובחר את ההפניות שלך ממקורות מוגנים בזכויות יוצרים.

משימת יישום

בחר מוצר וצייר (או מצא) סקיצה גסה ביד תחילה. כתוב הנחיה המתארת ​​מוצר זה עם מסגרת הנחיה שכבתית, הוסף הנחיה שלילית והפק ארבעה פלטים. שמור את הזרע והפרמטרים של הפלט שאתה אוהב; לאחר מכן, עם ההיגיון של "שינוי פרט בודד", שנה רק אלמנט אחד (לדוגמה, הידית) והפק אותו שוב עם אותו זרע. השווה בין שתי התוצאות וכתוב כיצד הפקד משתנה.

רשימת בדיקה

• [ ] הגדרתי את ההנחיה לכסות שש שכבות (נושא, צורה, CMF, זווית, אור, סגנון).
• [ ] כתבתי את מה שאני לא רוצה בהנחיה השלילית.
• [ ] השתמשתי ברפרנס/ControlNet/inpainting כשהייתי צריך לשמור על קומפוזיציה.
• [ ] שמרתי את הזרעים והפרמטרים של הפלט שאהבתי.
• [ ] ניסיתי וריאציה מבוקרת על ידי הזזת משתנה בודד.
• [ ] בחרתי את תמונות ההפניה שלי ממקורות מוגנים בזכויות יוצרים.