当前位置:首页|资讯|AI绘画|LoRA

AI绘画Lora模型测试(二):德克萨斯,能天使,凛冬,菲亚梅塔,缪尔赛斯|附模型链接

作者:素叶锦时发布时间:2023-05-26

写在前面

这里是方舟Lora测试第二期,测试对象为:德克萨斯,能天使,凛冬,菲亚梅塔,缪尔赛斯。Lora使用的基本知识已经在上期讲过了,有不明白的可以回顾一下上期:

有问能不能推荐其他Lora的,画风事物一类的Lora也会出几期推荐的啦,角色的Lora不好说,毕竟其他作品的角色我也不是很熟悉,如果大家有需要的话可以在评论区留言告诉我哦。

测试lora主要从Lora的各项适应性,包括模型适应性,tag适应性等等进行测试,在我看来,只能专门几个模型才有效果的,或者专门几个tag才能出图,出的图还就那几个姿势的,都不算特别好的Lora,似乎在Lora训练里被称作过拟合还是欠拟合。测试的目的也就在这里,一些不大好的Lora需要注意使用技巧。

下面就开始本期的Lora测试了。

arknightsTexasThe_v10

这是在c站上最火的一个德狗模型,相信大家都看过这幅图;

当然,这个Lora这么火也不是没有原因的,这个Lora质量确实很高。其一是无需辅助tag就能出比较完美的德狗,其二是它的模型适配度也很高,在测试的30个模型中基本都完美的画出了德狗,效果也相当不错,也没有出现与原模型画风出现冲突的问题。

什么模型都能驾驭

权重方面作者推荐0.7—0.85使用最佳,实际上拉到1也没什么问题,触发词为head和omertosa,效果未知,作者说能实现不同的效果,我测试了一遍也没看出什么端倪,omertosa指缄默德克萨斯,head指啥?接头霸王吗?从出图效果来看又似乎两个都是异德。我想大概是指其他衣服的意思?

总的来说是个相当优秀的lora,非要挑出一些瑕疵的话,就是只能实现异德一件皮肤让人遗憾。

图例:

明日方舟-德克萨斯-意志

中文lora名的还真是少见,这个lora实现的是德克萨斯的另一件皮肤——意志。

这个lora对模型的适配度也很高,在测试用30个模型中有26个有不错的效果,但是却有一个致命缺点。

这个表情实在是太迷了……

30个模型大多都出现了这个问题,如果仅使用tag,生成的德克萨斯的表情会很奇怪,有一种抓走麻麻的美感,推测原因是因为原先德克萨斯这个皮肤的表情就比较难还原。解决办法是添加expressionless, serious, jitome一类的表情tag,效果会好上很多。

作者推荐权重为0.8—1,触发词为willpower和head,怎么又是head??那基本可以推断head应该就是实现其他皮肤的意思了。测试了一下这个权重是比较适当的,但有时候即使是0.8的权重可能也没办法很好的还原。在添加了一些其他tag后也会出现特征丢失的情况,建议配合适当的辅助tag使用。

图例:

接下来四个德狗的Lora都存在一个问题,不借助辅助tag没有效果,受于篇幅限制我就不详细展开了,会给小伙伴们展示一下不加lora仅辅助tag,不加辅助tag仅Lora,辅助tag加Lora的出图效果,方便小伙伴们做个对比。(辅助tag可以通过tag反推得到)

Texas-000015

左:不加lora仅辅助tag,中:不加辅助tag仅Lora,右:辅助tag加Lora

推荐权重:0.8—1

texasArknights_texas

左:不加lora仅辅助tag,中:不加辅助tag仅Lora,右:辅助tag加Lora

推荐权重:0.7—0.9

Omertosa-loha-000010

左:不加lora仅辅助tag,中:不加辅助tag仅Lora,右:辅助tag加Lora

这个模型比较诡异,从上图可见其加不加lora似乎对图像影响不大,作者在c站上给的示例图却是有比较好的效果,不知道怎么回事。

AKTexasV1.0

左:不加lora仅辅助tag,中:不加辅助tag仅Lora,右:辅助tag加Lora

推荐权重:0.7—0.9

从上面的对比图可以看出,在不使用辅助tag的情况下,四个模型均不能正常画出德狗。但是除第三个lora以外,其余三个在加上辅助tag后均有不错的出图效果,相比于之前两个只需要加上lora就能出德狗的“一站式lora”,这几个lora的作用更像是补上tag做不到的最后10%的细节。

也许有小伙伴会问,是不是触发词不对呢,实际上这几个lora要不就是作者没留触发词,要不就是触发词一长串,基本等于辅助tag。另外,以上例子中我均没有使用作者提供的触发词,而是使用了通过tag反推的辅助tag,一样获得了比较好的出图效果。说明问题并没有出在触发词上。

arknights_exusiai-10

这是一个关于能天使的lora,作者在该lora中提供了能天使的3种皮肤:

通用触发词: exusiai, short hair, red hair, hair over one eye, halo, orange eyes, detached wings

原皮: exusiaidef, pantyhose

野地秘行: exusiaiwo, eyewear on head, military jacket, blue shorts, thigh strap

城市骑手: exusiaicr, headphones, red neckerchief, white shorts, white gloves

推荐权重为:0.8—1,测试过后发现,这个lora对模型有很好的适应性,几乎所有模型都能稳定画出能天使,但是也存在一定问题,作者提到在某些时候原皮和城市骑手的装束有可能发生混乱,测试过程中也发现有时候装束确实会产生变化,建议配合衣服辅助tag食用。

图例:

exusiaiArknightsV1

同样是个能天使的lora,仅支持原皮,触发词为exusiaioriginal,作者提到这个lora有点过拟合,因此推荐权重为0.55—0.65,同时作者也提到可以通过加halo来获得稳定的光环效果,如果翅膀消失,则可以通过添加energy wings来获得翅膀,但后果是会导致精二立绘的背景一部分带进来,也可以通过使用低于0.6的权重实现给能天使换装(就是喜欢这样说明详细的作者!!)。

通过测试发现,确实如作者所说,翅膀有时会丢失,权重过高会出现过拟合情况。另外,由于权重过低,一些其他tag可能会导致特征丢失,建议配合辅助tag食用。

图例:

exusiai

这是一个embeddings模型,由于对embeddings也不甚了解,不知道其运行逻辑是否和lora一样,就不妄加评论了,放几张图例感受一下:

Exusiai

最后一个能天使lora,据作者描述二三次元都能用,这里就不做测试了,触发词为Exusiai,推荐权重为:0.6—0.8.

图例:

z3maArknights_zimaOldMyFirstLora

又是一个在c站找不到信息的lora……

凛冬的lora还就只有这一个……

这个lora的问题其实有很多,但是凛冬lora目前就这一个,也就忍忍了(改天会练lora了自己练一个)

首先是这个lora有一个极长的触发词:1girl,animal ears,solo,bear ears,blue eyes,multicolored hair,brown hair,streaked hair,fur trim,black choker,red hair,sailor collar,choker,long hair,simple background,bangs,jacket,fur-trimmed jacket,neckerchief,red neckerchief,black sailor collar,shirt,earphones,基本等于辅助tag了,这个触发词长到分享lora的老哥都忍不住吐槽:“这触发词是真的长,我透了。作者你是懂触发词的,手动复制很累你懂不懂,还只能一个一个单词复制”(触发词文件原话)。

但是触发词长可以忍,用辅助tag也没关系,只要lora有用就行嘛,你看德狗那几个lora不也要辅助tag,只要能出德狗就无所谓。

对不起,凛冬做不到。

根据上面的测试表可以发现,随着lora权重的提高,人物有变得更像凛冬吗?好像有,又好像没有,由于辅助tag的存在,这个lora带来的提升就变得微乎其微了。

当然你也不能说它一无是处,换一个模型试试:

换成merongmix后,这个lora带来的提升就很明显了。说明对于本来就能靠tag还原凛冬的模型,这个lora可有可无,对于还原不了凛冬的模型,这个lora才显得有用。

但是这时又出现了另一个问题,我们可以清楚地发现,随着权重的提高,模型画风发生了变化,这就是这个lora第二个问题,会污染原模型的画风。

另外对比两个例子也可以看出第三个问题,随着权重的提高,人物都变成大头像了,测试的30个模型中,有23个画了大头像,7个画了半身像,一个全身都没有。而我的tag里,确实写了full body,从前面一个例子的0权重图也可以看出来确实能画全身的,这就说明这个模型只能用于画大头像……

那没办法了,为了防止这个lora的污染,建议权重0.4—0.6,反正有辅助tag打底,也能还原个七八十。将full body的权重提高,也能强行画出全身像。但是由于这个特性,用来画头像或许有奇效?

图例:

arknightsFiammetta_fiAV1

这是一个菲亚梅塔的lora,作者介绍说这个lora是仅仅用了官方的两张立绘炼出来的,因此拟合度很高,推荐权重为0.6,触发词为Fiammetta,经过测试发现确实如作者所说,即使实在0.6的权重下,拟合度依旧相当高,测试的30个模型有好几个都跑出了极其相似的结果。但过拟合也有个好处,就是它真的很像菲亚梅塔。

明显的过拟合

也受益于其拟合度高的特性,这个lora对底模有很强的适应性,也不需要额外的辅助tag帮助出图,总的来说还是相当不错的。

可以明显看到在权重拉满时,基本上就是菲亚梅塔的原立绘了,因此建议权重保持0.6—0.7之间,免得过拟合现象出现。

图例:

Arknights-muelsyse(mumu)ミュルジス(ミュー)

这个缪尔赛斯的lora的作者和第一个德狗lora的作者是同一个人,这个作者还有许多其他优质的方舟lora。

没什么好说的,质量很高,也没什么大问题,对底模没有要求,不需要额外辅助tag,推荐权重为0.8—1,触发词为:mumu,作者说还可以添加 open clothes, open white coat,long sleeves来帮助控制人物。

图例:

Muelsyse_v1.4-000006

关于这个缪缪的lora,作者絮絮叨叨说了很多,比如推荐用lora分层啊,不要用muelsyse的tag啊,负面tag里加一些正常人类描述可能会影响缪缪的特征啊……看得出来作者对这个lora很是上心。

经过测试后发现,这个lora也没有作者说的那么不堪,正常出个缪缪还是可以的,推荐权重0.8—1,触发词为Mumu, long hair, brown hair AND green hair, pointy ears, yellow eyes, hair ornament, mole under eye, small breasts,服装触发词为:open coat, black skirt, white coat, choker,又是一个触发词写的跟辅助tag似的。

但值得一提的是,作者提到由于训练的缪缪图片都是白色实验服,因此想要改变服装有点困难,但我测试后发现,不加服装触发词的情况下,反而更容易出其他服装的缪缪。就如同上面的例子一样。

图例:

MuelsyseArknights

这个缪缪lora的作者就很言简意赅了,推荐权重0.8—1,触发词为:muelsyse, 可以用其他的tag为缪缪换服装和发型,也不需要其他辅助tag。

话是这么说没错,但测试过程中发现这个lora还是有点欠拟合的,建议搭配一定的tag进行食用(其实也不能说是欠拟合,主要是改变了服饰和发型的缪缪不像缪缪了)。

短发缪缪是缪缪吗?

图例:

后话

这次带来的是德克萨斯,能天使,凛冬,菲亚梅塔和缪尔赛斯的lora分享,拖更了一天真是对不起。

大家好像不是很喜欢看长专栏的样子,最近的专栏总是收藏比点赞多,虽然我知道我废话和碎碎念是很多……总之也会出一版废话不多的省流版让大家方便的!!

本次的lora分享链接:

附图版:

链接:https://pan.baidu.com/s/1zpH_8i71RC6vFezN90iKbA?pwd=qgn3 

提取码:qgn3

纯lora版:

链接:https://pan.baidu.com/s/1WKSRR4D4-AHEa7Nk5zL3lg?pwd=cmcl 

提取码:cmcl

上期lora分享:

本期测试所用到的模型分享:

可以的话点个赞支持一下up吧!



Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1