看看NovelAI学习画师的能力有多强

NovelAI指南 2年前 (2023) liang
830 0

以FKEY老师的菲奇子和药指人物原画为例

由于没有事先征得画师同意,可能有版权问题,模型均不会公开,出图仅用于学习交流,不可用于商业目的

先放5张FKEY老师的菲奇子和药指原画

看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强

以下是AI生成的菲奇子

看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强

然后是AI生成的药指

看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强 看看NovelAI学习画师的能力有多强

可以看出来由于药指的角色特点比较多,AI学习和绘制起来要比菲奇子更容易一些

AI自己是不会画FKEY老师这种画风和这两个人物的,要想让AI学会必须通过sd-webui提供的embedding和hypernetwork训练接口

首先用大量FKEY老师的原画喂给AI训练一个模仿老师画风的Hypernetwork,用来调整出图的画风接近FKEY老师

然后分别训练两个模仿人物的Embedding,用来还原菲奇子和药指的人物特点

喂给AI的图预处理时先用Deepdanbooru模型跑一遍,提取出每张图的特征标签,例如发型、衣服、姿势、眼睛等等的特征,再喂给NovelAI就可以加上对应的prompt标签一起训练了,效果会更好

Hypernetwork我训练了一万steps,两个角色的Embedding各训练了5000steps,总共花费时长也就两三个小时的时间

将训练得到的Embedding和Hypernetwork结合起来使用就可以有上面的效果了,还是比较惊人的吧,没想到AI对于完全陌生的风格学起来也这么快。

相关文章