单位 3 / 12

深入探讨视觉 AI 工具:提示、参考和风格控制

收益:

  • 能够建立视觉提示解剖(主题、材料、角度、光线、风格、负片)并获得可重复的结果
  • 能够通过参考图像、ControlNet、种子和样式权重等控制方法来引导视觉方向
  • 能够根据任务选择工具并评估输出的分辨率、一致性和使用权限限制

在上一个单元中,您了解了如何在概念生成中定位人工智能。在本单元中,我们更深入:您将学习实际控制视觉人工智能工具。许多设计师感到沮丧的是,该工具“自行”生成图像;然而,问题通常不是工具的模糊性,而是给出的指令的模糊性。控制视觉人工智能需要了解三件事:提示解剖(正确设置指令)、参考和构图控制(以视觉为主导)以及再现性(再次获得相同的结果)。一旦你学会了这三者,人工智能就会从随机的视觉机器转变为可操纵的设计工具。

快速解剖:描述图像的六层

好的视觉提示不是随意的句子,而是分层的菜谱。考虑这六层:

  1. 主题:我们生产什么? (《无线耳机充电盒》)
  2. 形式和细节:轮廓、比例、角、表面区别。 (“圆角,两部分,顶部有细分割线”)
  3. 材料和 CMF:颜色-材料-表面。 (“哑光无烟煤色聚碳酸酯,拉丝铝条”)
  4. 角度和取景:视角和取景。 (“从前面看 3/4,稍微从上方看,产品居中”)
  5. 光与环境:灯光和背景。 (“柔和的工作室灯光,中性浅灰色无限背景”)
  6. 风格和用途:素描、真实感渲染、技术绘图。 (“逼真的产品渲染”)

除此之外还有一个负面提示:你不想要的东西。许多工具都提供“负面提示”区域;在这里,您可以通过键入不需要的内容来清除输出,例如“人手、文本、徽标、凌乱的背景、多产品”。如果你遗漏了图层,人工智能将用自己的统计平均值来填补这些空白;这意味着陈词滥调。

提示:设置提示就像读取图案一样:主题 + 形式 + CMF + 角度 + 光线 + 风格 + 负片。如果您不喜欢输出,请询问缺少哪一层,不要重写整个提示。

参考、构图和风格控制

言语不能说明一切;有时一张图片胜过一千个文字。现代小工具提供了几种强大的控制手段:

  • 参考图像(图像提示/图像参考):您上传图像并说“使其看起来像这样”。您可以设置工具使用权重引用输出的程度。
  • ControlNet:在稳定扩散生态系统中,它是一个控制层,保留草图或照片的边缘/线条/深度/姿势结构,并在其上生成新图像。非常适合保留构图和更改您自己的草图的材质。
  • 风格参考/风格权重:仅传达图像的氛围/颜色纹理感觉,而不传达其内容。
  • 修复(区域编辑):仅遮盖图像的一部分并再现它(例如,仅更改手柄)。
  • LoRA/定制培训:在高级阶段,根据品牌语言或特定风格对模型进行微调。这需要注意隐私和版权(使用您自己的数据,并获得许可)。

这些工具的共同好处是:它们迫使人工智能按照你提供的框架工作,而不是从头开始做梦。对于设计师来说最有价值的往往是 ControlNet 和修复,因为它们保留了您自己的草图构图。

再现性:种子和参数

扩散模型从随机性开始。种子是这种随机性的起始数。相同的提示+相同的种子+相同的参数通常会给出相同/非常相似的图像。这对于设计至关重要:您可以修复种子以重现您喜欢的图像,或者只是更改一个单词并以受控方式查看效果。其他重要参数:长宽比、步数(步数越多,越精细但速度越慢)和引导比例(引导/CFG;它与提示的契合程度如何——如果太高,则显得做作和强迫)。

控制

什么是

何时使用

种子固定

再现相同的输出

冲洗图像并尝试 A/B 时

参考图+重量

它类似于一个图像

成分/气氛转移

ControlNet(边缘/深度)

保留成分,改变内容

从您自己的草图创建渲染

修复

只刷新一个区域

改变一个细节

负面提示

消除不需要的

清洁背景、手、文字

三个迷你箱子

案例 1 — 保护您自己的草图。设计师想要将手持吸尘器的手绘草图变成逼真的渲染图。当你仅使用文本提示进行尝试时,人工智能会生成完全不同的形式。当您使用 ControlNet 的精明模式上传草图时,AI 会保留其线条并用哑光塑料和工作室灯光覆盖它。他在四次尝试后得到了他想要的结果。教训:对于保留构图,ControlNet 比纯粹的提示功能强大得多。

情况 2 — 不受控制的变异损失。设计师找到了他喜欢的概念,但没有注意到种子。第二天,当他要求“稍微细一点的手柄”时,他无法再次制作出相同的图像;每次都会出现完全不同的产品,他会损失几个小时。课程:保存您喜欢的每个输出的种子和完整提示;这些是你的“返回”点。

情况 3 — 带有负面提示的清洁。当设计师制作工作室图像时,不需要的人手、反射文本和第二个产品出现在一半的打印输出中。它在负面提示中添加了“人手、文字、水印、重复产品、杂乱背景”,仅8个字,输出质量显着提高。教训:说出你不想要的东西与说出你想要的东西同样重要。

可复制的提示模板

分层提示骨架“[主题]、[形式和细节]、[CMF:颜色-材料-表面]、[角度和框架]、[光线和背景]、[风格:草图/渲染/技术]。-负片:人手、文字、徽标、水印、多产品、凌乱的背景。”

参考渲染模板“保留我上传的草图的线条和构图(ControlNetedge 模式)。在其上应用以下材质:[哑光塑料主体,铝制细节]。灯光:柔和的工作室。背景:中性灰色。不要更改形式,只需添加材质和灯光。”

单一细节更改(修补)模板“在此图像中,仅复制[遮蔽区域:手柄]区域。新版本:[更纤薄、符合人体工程学、弯曲]。请勿触摸图像的其余部分、其灯光和角度。”

可重复性注释模板“我喜欢这个打印输出。保存以下信息并在下次使用:提示 = [全文]、种子 = [数字]、方面 = [比率]、步长 = [数字]、方向 = [值]。只需更改这一个元素:[X]。”

弱提示/强提示

弱提示:“耳机在白色背景上的渲染效果很好。”

强烈提示:“无线入耳式耳机充电盒,椭圆形药丸状,顶部细分割线。CMF:哑光象牙色聚碳酸酯机身,缎金铰链条。角度:3/4 前部,稍顶部。光线:柔光工作室柔光箱,顶部轻微反射。背景:中性浅灰色无限背景。风格:逼真的产品渲染。种子:4821,宽高比 4:3。--负片:人手、文字、徽标、水印、第二个产品,硬阴影。”

弱提示允许该工具用陈词滥调来填补空白;强大的提示可识别每一层,消除负面影响,并使其可以用种子重现。

常见错误

  • 编写一句话模糊提示并将结果上传到工具。人工智能填补了空白,而不是你。
  • 不保存种子和参数。你永远无法再得到你喜欢的输出。
  • 切勿使用否定提示。不需要的元素会污染输出。
  • 进行数百次随机试验而不是成分检查。 ControlNet/修复可加快工作速度。
  • 使用他人受版权保护的图像作为参考。存在风格模仿和版权风险(参见第 10 单元)。
注意:参考图像或风格权重是强大的工具,但如果用于复制他人的专有设计或艺术家的签名风格,则会带来法律和道德风险。从您自己的材料或允许/免费的来源中选择您的参考资料。

综上所述

控制视觉AI需要三种能力:设置分层提示(主题、形式、CMF、角度、光线、风格、负片)、图像引导(参考、ControlNet、修复、风格权重)以及提供再现性(保存种子和参数)。有了这三者,人工智能就从一台随机机器变成了一个可操纵的设计工具。当您想要保护您的作品时,ControlNet 和修复比纯粹的提示功能强大得多。通过负面提示消除您不想要的内容,并从版权安全的来源中选择您的参考文献。

应用任务

选择一个产品并首先手绘(或找到)一个粗略的草图。使用分层提示框架编写描述该产品的提示,添加否定提示,并产生四个输出。保存您喜欢的输出的种子和参数;然后,使用“单个细节更改”逻辑,仅更改一个元素(例如句柄)并使用相同的种子再次生成它。比较两个结果并写出控件如何变化。

清单

  • [ ] 我将提示设置为涵盖六层(主题、形式、CMF、角度、光线、风格)。
  • [ ] 我在否定提示中写了我不想要的内容。
  • [ ] 当我需要保持构图时,我使用了reference/ControlNet/inpainting。
  • [ ] 我保存了我喜欢的输出的种子和参数。
  • [ ] 我尝试通过移动单个变量来控制变化。
  • [ ] 我从版权安全的来源中选择了参考图像。