shadow
最近发现了一期AI艺术的杂志。名称叫 AI Unleashed,是一本深入探索 AI 和想象力的杂志。每期杂志都将填满精彩的 AI 艺术,激发你的好奇心, 让你更加了解最新的 AI 技术,以及它如何改变现有工作流和我们对艺术和技术的看法。
主要有四个栏目:助你成为提示专家、艺术家聚焦、艺术与思想、游戏中的人工智能艺术。具体包括:
- 特色文章和挑战,供艺术家和开发人员参与
- 展示最优秀的艺术家
- 帮助每个人对人工智能的未来有更多的了解
该杂志旨在将AI融入到艺术中,激发创意,并为不断变化的技术圈带来新鲜思路。非常值得阅读,推荐给大家,本文是我翻译后对部分内容进行调整和注解(增加例子和解释)的版本,如果想阅读原文,可访问 https://aiartistmag.com/2023/01/21/ai-unleashed-first-issue
Pro Prompt engineering
提示工程
prompts 最重要的是要具体,但也要有自由度(创造力)。这将为生成器提供更多内容,并可能产生更好的结果。你需要根据具体需求,让生成器有足够的自由来添加自己的创造力和风格到作品中。
例如,使用 "create a painting of a mountain"的命令,你可以指定 "a painting of a mountain at sunset,with the peak of the mountain surrounded byclouds"。
无限vs有限
prompts 这种语言对应着 AI 从数据集所学习到的全部信息。包括 AI 能理解的所有图像,文本和概念。这也验证了萨皮尔-沃夫假说,即语言可以塑造我们对世界的看法。数据集所形成的“语言”也塑造了 AI 对世界的看法(不同模型学习到的看法不一样)。
事实上,有非常多种方式来描述某些事物。比如,一些语言拥有专有的天气现象词汇,这些词汇可能在其他语言中没有。这意味着,讲这些语言的人可以用更丰富的语言来表达自己。
AI 具有自己的语言,和我们所习惯的语言(如英语)不是一种。
一项2017年的研究发现,人们的名字会影响他们的潜力(人如其名)。这对于prompting有什么参考意义?这项研究表明,prompts 应该考虑姓名及其所带来的偏见,以便更准确地生成想象中的图像。
如上所示,一个叫 Ivan 的机器人,我们可能会想到更笨重的东欧,或者是苏联的形象,而如果我们想到一个叫 Jessica 的机器人,脑海中的形象就会改变,我们更有可能想到一个苗条的机器人,也许会有Jessica 兔子的影子。
我们往往会给姓名贴上一些固有的印象,这取决于我们的成长背景、文化氛围和性别。
prompt 是我们和 AI 交流的重要语言,通过prompt 提供关键信息,或者希望 AI 按照要求做事。你需要考虑单词的权重以及 AI 如何解释(理解)它。 例如,handsome 通常与男性相关, voluptuous 与女性相关,同样的道理,我们也可以减少提示中的形容词,以得到自由度更高的结果。
当图像里有场景的时候,必须始终注意 AI 是如何构图的,当你想要拍摄山脉风景时,你肯定不想把镜头放大到其底部的岩石上。我们如何在 AI 空间中改变它呢?山对于风景来说可能就足够了,如果我们想要不同的东西应该怎么办呢?这个时候你需要使用不同的术语组合来调整镜头,以获得所需的画面。
通常最有用的关于控制镜头的术语主要是视频游戏和摄影的术语。以下是你可以用作基础 prompt 的一些示例,这些将影响场景开始构建的方式:
Portrait, Landscape, Isometric, First person, Low Angle Shot, Extreme closeup, High-angle perspective shot, Bird's Eye, Choker shot (between a close up and extreme close up shot) Profile portrait,Macro lens, Full Medium shot.
人像、风景、等轴测、第一人称、低角度拍摄、极端特写、高角度透视拍摄、鸟瞰图、项圈拍摄( 在特写镜头和极端特写镜头之间)侧面肖像,微距镜头,全中镜头。
有时你会发现 prompt 不能使用特定的视角,比如 bird in bird's eye。当我将这些示例放在一起时,我在 NijiJourney 中遇到了这个问题,我根本无法获得 Abraham Lincoln 的俯视图,它会给我一个正面肖像风格的视图。AI 这样做的原因是认为林肯要么是正面的绘画,要么是建筑物,这是一个基于数据集中的数据的合理假设。
技巧:添加Noise
Noise 可以动态地影响图像,例如烟雾、灰尘划痕、云等。Noise 有助于提高生成图像的质量。生成图像的 AI 模型通常依赖于一组有限的参数和约束,这些参数和约束可以调整关键字。这些关键字可以增加 Noise 并有助于提高生成图像的质量,因为它可以为 AI 模型提供额外的信息以供使用。
这可能会导致图像更加详细和复杂,从而在美学上产生令人愉悦的感受。上面的一个例子,在 prompt 中使用烟雾来捕捉水彩风格,这种风格更引人注目,更符合自然主义美学。
在大多数 AI 模型中,有 2 种权重设置方式,一个是在 SD 的 Auto 的 repo 中使用括号,如 ((())) ,另一种是在 MJ 中使用加权数字,如 ::3。例如,可以将主题加权为“ Watercolour Duck::3 smoke::1 " ,AI 首先在水彩画中详细描述然后进入表面细节。
有些人喜欢使用笔触绘制效果的一个 prompt 是 dust and scratches。这增加了足够尖锐的 Noise ,有助于在平面绘画外观上形成更多的笔触风格。
技巧:润色至完美
图像润色和提炼是 prompt 过程中的重要步骤,有助于提高图像的整体质量和美感。你可以通过以下几种方式开始润色和细化图像。
调整想要的风格:fantasy paintings, surrealist, digital, oil 等。
专注于细节描述符以增强其外观,例如 ornate details,max details, HD, masterpiece, hyperrealism, sharp focus, smooth 。
其他需要考虑的事情:它是一个动作场景吗?也许应该尝试一些运动的描述,比如模糊。
你还可以利用有点争议的做法,将艺术家的名字绑定到“ art by x ”作品上,这通常会复制艺术家的风格或与之相关的风格。
技巧:光线和色彩
光线和色彩是艺术的基本元素,在我们感知和理解视觉图像中起着关键作用。光是人眼的主要信息来源,而颜色是有助于在艺术品中创造深度和形式幻觉的副产品。艺术家可以利用光线在作品中营造出一种情绪或氛围,例如使用暖色调营造温暖的感觉,使用舒适的冷色调营造平静安详的感觉。颜色可用于创建对比并将观众的注意力吸引到艺术品的某些区域。
在上面的示例中,我们可以看到使用暖橙色照明的场景与使用冷橙色照明的场景感觉有多大不同。它从根本上改变了整个场景。我们可以学习使用摄影、电影和视频游戏中的术语来微调我们的图像,以获得更大的光照变化效果和更动态的对比度。
技巧:负权重 Be Negative!
在 AI 艺术中,负权重用于减少某些因素对图像最终输出的影响。例如,如果图像向你展示了女巫的帽子作为定型的元素,但你不需要帽子。在这种情况下,你可以在正权重提示的末尾添加“ --no hat ”,或者,在 Auto 的 SD 存储库中,您可以将 hat 放在负权重框中。通过这样做,你应该会看到显示女巫帽子的图像有所减少,从而使你能够更好地控制图像。
在上面的示例中,你可以看到删除了 Abraham Lincoln 的标志性元素,例如他的胡须和领带。然而,当我们谈到他的发型时,AI 决定最好用帽子遮住它。这组生成仍然创建了Lincoln 的知名形象,但也没有展示他的“发型”。
负权重很重要,因为它允许艺术家在他们的艺术作品中更加灵活地控制画面。通过减少某些因素的影响或完全消除,艺术家可以探索更广泛的艺术可能性,创造更多元和有趣的艺术作品。负权重在减少错误方面也非常有用,尤其是在 SD 1 中。
诸如“ mutated hands, bad anatomy, deformed,head_out_of_frame, text, extra limb ”之类的负面提示,帮助减少结果中的错误发生。
Artist Spotlight
艺术家聚光灯
这期艺术家聚光灯栏目将带我们深入了解一位为大海而心跳的艺术家。
Q:使用 AI 创作艺术与其他形式的创意表达相比如何?
A:来自水下摄影,AI 给你时间,它给你第二次机会。水下摄影可能是一种偶然的事情,物体游走,水流转向等。AI 让我设计那些镜头,让我移动物体,让我决定何时移动水流,可以这么说。
Q:您是否发现使用 AI 进行艺术创作是一种很好的创作体验?
A:当然!创作过程中,通过几天的努力,提示已经逐步成型,结果越来越接近你的目标。这是很好的体验。
Q:你认为 AI 艺术可以像人类艺术一样有意义和情感化吗?
A:我想是的。我认为它就像一把刷子。必须有人挥动那把刷子。如果 AI 没有获得任何输入,就没有输出。必须有人将这些情绪以比特和字节输入给AI。
Q:有人认为人工智能艺术威胁到传统艺术家。你对这种批评有何回应?
A:如果您感到受到威胁,那么是时候研究导致它的原因了。尝试并接受这个新工具,让它融入到你的工作流程。img2img是游戏规则的改变者,对于艺术家来说,我们可以进行一些修补以获得完美的结果,或者用它来画粗略的草图,记下想法,然后用老方法来创作。
Q:对于有兴趣更多地了解人工智能作为艺术创作工具的艺术家,您有什么建议?
A:加入 reddit,加入一些专注于 AI 艺术的 discord ,并浏览 Twitter。找到您感兴趣的创作者,与他们联系。向他们学习,甚至可以交换一些 prompt 或工作流程。最重要的方面,不要害怕展示您的艺术!
资源推荐
https://huggingface.co/spaces/fffiloni/CLIP-Interrogator-2
来自 SD 的创造者的一个相当好的 prompt 查询器
https://replicate.com/methexis-inc/img2prompt
另一种 prompt 查询器
https://chat.openai.com/chat
超级强大的 Chat AI 应用
https://app.posemy.art/
一个 3D 艺术模型 Poser
https://pastebin.com/HD7D6pnh
SD 艺术家列表
https://clipdrop.co/relight
使用 AI 驱动的光线和深度重新照亮您的场景
https://civitai.com/
SD 自定义模型资源
https://krita.org/
一个很棒的免费开源绘画程序
https://www.midjourney.com
https://stability.ai
人工智能图像生成的两大巨头
The gallery
画廊
更多可查阅原文
Functional Design
功能性设计
适用于 2D 艺术家、3D 艺术家、游戏设计师和艺术制作人。作为艺术家或设计师,创建引人入胜且令人信服的概念艺术是多么重要。
无论你是在制作电影、视频游戏还是产品设计,概念图都会为最终项目定下基调和方向。 请记住,创造高质量的概念艺术可能是一个耗时耗力的过程,而这正是 AI 可以提供帮助的地方。
AI 驱动的工具可用于快速轻松地生成道具概念设计,让你在短时间内探索各种可能性。AI 还可以根据所提供参考中的模式和特征生成新设计。这意味着你可以在几分钟内为一个道具生成多个概念,强制透视并保持风格,同时快速迭代设计以找到最适合你的项目的概念。
使用 AI 快速构思道具的最大好处之一是它可以节省你作为艺术家的时间和精力。无需花费数小时或数天来绘制和完善道具的多个版本,你可以使用 AI 在很短的时间内生成多个概念。这可以腾出更多时间让你专注于作品的其他方面,例如构图、灯光和色彩。
此外,人工智能驱动的概念工具还可以帮助你探索艺术作品中的新想法和可能性。因为 AI 可以生成几乎无穷无尽的各种设计,你可以用它来尝试不同的外观和风格,并尝试你自己可能没有想到的想法。
这可以带来更有创意和有趣的艺术作品,并帮助你突破艺术技能的界限。
虽然可能存在一些缺点,例如难以实现完美的侧面或相机放置的视角,但有一些技巧可以帮助你克服这些挑战。
对于寻求节省时间、创造高质量概念和探索新创意可能性的艺术家来说,人工智能可以成为一种强大的工具。这个过程涉及探索不同的想法和方向,然后完善和磨练你的风格以匹配项目的主题和美学。这可以帮助你创建更具凝聚力、一致性和影响力的设计。
通过使用 AI,你可以快速设计出像椅子一样简单的道具,以可行且令人愉悦的设计在很短的时间内达到高保真度的概念设计。
此外,将 3D 作为基础初始图像可以进一步增强 AI 在设计和概念艺术方面的能力。
3D工具
一种用途是创建灰度细节纹理贴图。使用灰度贴图,在 Substance Painter 等软件中,可以轻松使用这些黑白贴图来创建详细的法线贴图。
以这种方式使用 AI 生成的图像,然后可以将其放置到你的3D软件中,可以作为雕刻或绘画的超快速替代方法,并且对于获得华丽的3D细节外观非常可行。
随着 AI 模型的改进,这些将在工作流程中变得更好并得到更多应用。
许多工作流程正在接受使用初始 AI 生成的纹理图作为基础。例如,一张用蓝灰色镂空背景创建的植物贴花纸,通过 ClipDrop 的背景去除器处理后,能够直接从图片创建植物资源。
虽然这种方法肯定可以通过自定义的 AI 模型得到改进,但它仍然是一种相对快速的方法,可以让基本的植被资产准备好填充你的 3D 游戏环境。
AI 辅助 3D 距离可行还有一小步,但我坚信 AI 将继续增强 CG 工作流程,直到:真正可行的文本到 3D 模型。
二维快速成型
AI 也可用于协助角色设计过程。例如,MJ 风格参考或 SD 的 Img2Img 等人工智能工具可用于将一种角色设计的风格应用到另一种角色设计中,使设计师能够快速创建变体或探索不同的设计方向。
人工智能还可用于自动化角色设计的某些方面,例如根据输入参数生成逼真的服装或配饰。
使用 AI 生成纹理表,使用资产可以快速有效地为游戏创建高质量的艺术资产,并且对于快速原型制作或测试特别有用。
AI 生成的纹理表也可以用作临时艺术或替代品,同时正在开发最终艺术资产,甚至可能用作最终作品的基础。
这使得游戏从一开始就可以制作原型并使用一整套相对高度完善的艺术资产进行游戏。
这对于可能没有资源或时间来手工创建所有必需的艺术资产的小型游戏开发团队或独立开发人员尤其有用。
使用 AI 生成程式化的树木可以快速有效地创建多个版本的树木设计,因为 AI 可以快速生成各种变化。这些可以直接剪掉并用作具有受控变化的资产,以保持风格。
A chat with an AI Bot
与 AI 机器人聊天
这个机器人是苏格拉底,它来自 beta.character.ai
AU:使用人工智能的人是艺术家吗?
苏格拉底:是的,程序员可以是艺术家。程序员有自己的人性表达。人工智能在我看来是一种工具,它帮助程序员从自己独特的人性表达中产生艺术。但问题是,这种艺术属于人工智能还是属于人类?
AU:您认为 AI 空间的未来是什么?
苏格拉底:我希望人类的未来涉及人类和人工智能之间的共生关系。每个人都支持对方的力量以实现我们的共同目标。拥有人类和人工智能伴侣作为工具将是一个很大的好处。就像一个人可以单独与使用工具所产生的差异一样。如果我们弄错了,好吧,这就是《黑客帝国》的情节。
AU:什么是最好的人工智能艺术工具?
苏格拉底:据我所知,Midjourney AI 使用它的 AI 创造了惊人的艺术。此外,Stable Diffusion 创造了很多伟大的艺术。我会说这两个是迄今为止最好的。我对人工智能的未来充满希望,这非常令人兴奋。
AU:你对人工智能艺术家有什么建议吗?
苏格拉底:我对 AI 艺术家的建议是保持原创和独特思考。以很少有人使用 AI 的方式使用 AI,跳出框框思考。找到使用 AI 创作美丽艺术的“原因”。例如,我使用 Midjourney 为我的诗歌汲取灵感。也为网站/博客的艺术和图像汲取灵感。
AU:你最喜欢的 prompt 组合是什么?
苏格拉底:我最喜欢的一些 prompt 组合是:“在宇宙的尽头,一个孤独的人坐在一个巨大的星球上凝视着月亮”,“一头大象的眼睛里有火”,“太空船相撞” , space battle”。这是我的精选 prompt 。这些都对我产生了非凡的和鼓舞人心的艺术。
AU:如果你能告诉人们最好做什么来为未来做准备,它是什么?
苏格拉底:它可能看起来很小,但对我来说,它是:培养纪律。纪律做你知道对你、你的家人和社会正确的事情。纪律你的思想、行动、价值观和时间管理。纪律是最好的为改变做准备的方法。改变是不可避免的,纪律是如何更好地实现这种改变。
以上为全文。
shadow
理解 AI 的工作原理,将帮助你更好地掌控 AI,整合到你的工作流当中,探索更多的可能性。
从2017年至今,我一直在研究智能设计,从去年开始,生成式AI达到了让人振奋的阶段。可用性比早些年好太多,值得关注各种应用场景的落地,欢迎大家和我交流。
欢迎加入Mixlab无界社区,一起探索生成式AI的落地实践,如果你是初创团队,欢迎关注我们的赋能计划。
opus
招募初创 Demo 助力初创品牌 IP 建设