AI仅用32张图“偷学”迪士尼插画师画风！工程师：别总拿维权说事

金磊 明敏 发自 凹非寺

量子位 | 公众号 QbitAI

学废 一位人类插画师，AI只用了32张 作品。

故事的主人公叫做Hollie Mengert （霍姐），她自打2011年从艺校毕业以来就从事着插画相关工作。

11年来的打拼，也让霍姐在插画上有了自己独树一帜的风格。

然鹅……

有天霍姐一觉醒来却收到朋友的来信：“姐~你现在成人家AI的模型了”。

于是乎，毫不知情的霍姐便去Reddit上看了看到底是咋回事，结果——

有位小哥搞了个AI，只用了霍姐32张作品训练，就能模仿她的风格作画！

△左：霍姐作品；右：AI作品

好了，这下子大家都能用这个AI，画出霍姐风格的插画了。

而且更“致命”的是，给AI输入的提示词 必须带上“holliemengert artstyle” （霍姐风）……

（多冒昧啊……）

这波操作也是直接让网友炸了锅，纷纷留言为霍姐抱不平：

人家还活着呢 ……

你可把这位姐妹坑惨了 。

然后随着这事的逐渐发酵，细节也逐渐浮出了水面。

2.5小时炼出新模型，成本不到15块

事情最初只是一位来自加拿大的工程师Ogbogu Kalu（卡哥），出于个人爱好做了个插画AI。

看着效果还不错，他就把模型发到了Reddit上，结果一下子火了！

不少网友看了直呼：这是巨作！

本以为需要成千上万张图才能训练出好的效果，没想到这么点儿也可以。

而且训练成本也很低，卡哥说自己做这个模型，只是在云端租了GPU、花2个半小时就搞定了。

折算成本不到2美元 （人民币约15块）。

不过，卡哥当时做出这个AI也实属意外，在此之前他并不了解 霍姐的作品。选择这一风格，只是因为他在帮别的网友微调模型，那位网友给出的风格和霍姐画风相似。

通过改进数据集，他一晚上便弄出了一个效果更好的新模型，命名为“hollie-mengert-artstyle ”。并把代码也放了出来，人人都能免费试玩。

他用到的AI，主要是Stable Diffusion和DreamBooth 。

后者是模仿风格精髓的关键。

这是谷歌在今年8月发布的新AI。它只需3-5张图片，再加上文字表述，就能让指定物体迁移到其他场景或风格中去。

和Dall-E 2、Imagen等最大的不同是，DreamBooth能对选定对象忠实还原 。

具体方法是给物体加上“特殊标识符”。

原本图像生成模型收到的指令只是一类物体，例如[cat]、[dog]等，但现在DreamBooth会在这类物体前加上一个特殊标识符，变成[V][物体类别]。

以下图为例，将用户上传的三张狗子照片和相应的类名（如“狗”）作为输入信息，得到一个经过微调的文本-图像扩散模型。

该扩散模型用“a [V] dog”来特指用户上传图片中的狗子，再把其带入文字描述中，生成特定的图像，其中[V]就是那个特殊标识符。

而且这种方法不局限于某个模型 ，Dall-E 2、Stable Diffusion等调整后也能实现如上效果。

比如之前亚马逊工程师就发布过一个DreamBooth-Stable-Diffusion。

Hugging Face上这类模型超级多，各种风格都有，如迪士尼、赛博朋克等等。

卡哥的模型也属于其中之一。

实际上，把DreamBooth用在Stable Diffusion不算难，油管就有现成教程。

有人用30张图微调模型，全程不到20分钟，并且效果是杠杠好，他的照片可以毫不违和地融入到各种风格中去。

（不过芝麻街这个很难判断效果到底好不好）

“原作与此无关”

毕竟这事在圈里被讨论得甚是火热，一位叫Andy Baio的吃瓜网友，就直接找到了两位当事人聊了聊。

首先，霍姐谈了谈她的看法：

我得知这件事情的第一反应，就是觉得我名字出现在这个工具里，有被冒犯到 。

我对这件事情一无所知，也没人征求过我的意见。

即便他过来问我“是否可以这么做”，我也不会答应的。

霍姐认为，给AI训练所用到的图像就涉及到了版权问题。

因为当初她是和迪士尼等客户有合作，没有客户的允许，霍姐自己都不能随意在网上传播插画。

除此之外，霍姐还认为这个AI模型跟她的名字挂钩，但并不能完全展现她插画风格的独到之处：

作为一名艺术家，我觉得让我特别自豪的地方，就是作品能有真实的表达、吸睛的设计，并且人物能够产生共鸣。

但AI生成的插画，就挺难做到这些点的。

然后霍姐更细致的对这个观点做展开：

我觉得AI可以模仿笔刷的纹理和渲染、选择一些颜色和形状，但这并不代表就能胜任一个值得被雇佣的插画家或设计师。

因为渲染、笔触和颜色等，都是艺术最表层的部分。我认为人们最终会与艺术联系在一起，是因为一个可爱或让人产生共鸣的角色。

总而言之，霍姐个人觉得AI生成的作品跟自己的艺术水平还是有很大的距离感。

但让她非常无奈的是，自己的名字确确实实就跟AI“捆绑”到了一起，成了工具的一部分。

那么站在工程师的角度，又如何看待这件事呢？

Andy Baio也找到了卡哥聊了聊：

我认为AI的训练和图片的使用都是合法的，即便这事闹到法庭也很可能被判为“合理”，因为你是没法给一种画风申请版权的。

100TB的训练数据压缩成一个4GB的模型，AI作画的方式也不能算“缝合”，更像是从生动记忆中提取并创新。

而且这是技术发展不可避免的事情，像Adobe在PhotoShop里搞AI工具，微软也在自家设计套件里添加了图像生成器。

那这就意味着艺术家们对自己的作品就没有发言权了吗？Andy Baio继续追问道。

卡哥对此表示：

我觉得现在很多的反对意见是无解了AI的运作方式。

AI生成的内容并不是基于艺术家作品的拼贴，而是创造了全新的图像，这是一种变革。

对AI不够了解的人没有真正意义上的发言权。

不过后来，卡哥还是把Hugging Face上模型的名字，从最初的Hollie-mengert-artstyle，改成了更为通用的Illustration-Diffusion。

并且还特意补充、强调了一句：

Hollie与此无关。

而在此数天之后，卡哥又发布了一个新模型。

这次他所采用的是另一位艺术家James Daly III的40张作品来训练：

△左：James Daly III作品；右：AI生成作品

……

那么对于这件事，你怎么看呢？

参考链接：

[1]https://waxy.org/2022/11/invasive-diffusion-how-one-unwilling-illustrator-found-herself-turned-into-an-ai-model/[2]https://www.reddit.com/r/StableDiffusion/comments/yaquby/2d_illustration_styles_are_scarce_on_stable/[3]https://news.ycombinator.com/item?id=33422990[4]https://huggingface.co/ogkalu/Illustration-Diffusion

— 完 —

量子位 QbitAI · 头条号签约

关注我们，第一时间获知前沿科技动态

AI画笔下的“月街美学”

当千年传统盛会遇上数字艺术

当传统摄影的写实镜头

与AI算法的奇幻笔触相遇

大理三月街的喧嚣与诗意被重新解构

呈现出截然不同的视觉叙事

从“人潮涌动”到“诗意韵律”

实景拍摄中，三月街的主干道如奔腾的河流，赶街人、商贩交织成密集的“人海车河”，镜头定格了摩肩接踵的动态瞬间，市井气息扑面而来。插画中原本密集的人群被抽象为色块与动态线条，既保留节庆的欢腾感，又赋予画面如动画般的诗意节奏。

从“细节写实”到“符号美学”

真实镜头下，扎染布上的褶皱、银器锻造的纹理、瓦猫造型的多样，在光影与微距镜头下细节凸显。插画剥离了实物的物理细节，强化了非遗产品的符号性，让非遗成为一眼即识的“民族图腾”，也使传统工艺瞬间跃入“二次元”世界。

从“动态纪实”到“热血漫画”

在真实镜头下，赛马场上骏马飞驰的尘土、骑手紧绷的肌肉，与骏马腾空的姿态被高速快门凝固。插画通过线条拉伸与色块对比，将赛马化为风驰电掣的漫画分镜，强化了力量与动感。

从“舞台叙事”到“色彩交响”

文艺表演舞台上，舞台光影的层次与演员表情的细微张力被捕捉，演员以传神的表演和柔美身姿，引发观众“身临其境”的共鸣。插画将舞台转化为一场色彩爆炸，人物与LED屏画融成“色彩交响”，将民族歌舞转化为“童话场景”。

从“美学实录”到“轮廓之美”

民族服饰展演中，衣物的纹样清晰可辨，立体剪裁与光影质感被真实还原。插画则以极简线条勾勒服饰轮廓，服饰如流体般包裹身形，让观者聚焦于线条与色彩。

从镜头到插画

三月街的视觉转化不仅是一场美学实验

更是一次文化解码

当赛马的尘土化为艺术笔触

当扎染的纹理升华为文化符号

这场千年盛会以更轻盈的姿态

走进数字时代的审美视野

记者：唐恋

编辑：韩玉婷

值周：张辉 胡亚玲

主编：李胜

相关问答

ai怎么添加笔触?

要向添加笔触,可以采取以下步骤。首先,收集具有不同笔触风格的图像样本,包括粗糙、细腻、水彩等。然后,使用这些样本训练一个深度学习模型,如卷积神经网络...

ai怎么把线条变成手绘?

把线条变成手绘风格的图像可以使用AI中的一种称为“手绘风格转换”的技术。以下是使用这种方法把线条转换为手绘风格的步骤:1.导入你想要转换的图像。如果你...

ai画笔工具平滑度怎么调整?

1.我们通过一个例子演示平滑工具的使用,先新建文件,在左侧工具箱中找到平滑工具。2.双击平滑工具的图标可以弹出平滑工具选项框,可以对保真度,平滑度进行设...

psaic4d设计区别?

两者是同一个公司的产品,以前两者是分开来的,BodyPaint3d作为CINEMA4D的一个插件。现在BodyPaint3d整合到CINEMA4D,作为它的一个模块。cinema4d...

AI怎么设置画笔让图案沿着路径走?

要让图案沿着特定路径走,需要在AI中使用画笔(Pen)工具和路径(Path)工具。以下是步骤:1.创建一个路径。使用Pen工具(快捷键为P)或Line工具(快捷键为\)...要...

ai什么面板可以绘制虚线和箭头?

操作方法:打开AI工具,新建一个画布,用左侧工具栏中的直线工具或者钢笔工具绘制一条线段。选择该线段,选择描边工具,有一个“箭头”选项,点击左侧箭头选项的...

ai画笔硬度怎么调?

具体操作方法如下所示:1.首先双击打开ai软件,在左侧魔棒工具处右击。2.接着鼠标点击,切换到快速选择工具。3.然后点击上方画笔处的下拉按钮。4.可...

ai画笔怎么出现黑色描边?

1、在ai软件界面的左上方,即“编辑”选项的下方,有个颜色的选择,默认的颜色是白色。2、点击下白色旁边的三角形箭头,会弹出颜色选择的面板,任意选择一种自...

AI画笔调板中有哪几种画笔?

illustrator中有4中画笔,分别是书法画笔、艺术画笔、散布画笔和图案画笔,点击画笔工具---------然后在菜单栏的下面可以看到它的属性,其中描边的后面有俩个空...

ai怎么调笔头形状?

1,我们打开AI界面,新建一个文件,并且保证工具面板左下角的描边图标是打开的。2,用钢笔工具摁住shift画一条直线,为了效果明显,我这里用了较粗的描边线。3...