当前位置:首页|资讯|Stable Diffusion|LoRA|数字人

离了个大谱:Stable Diffusion 第一个开源自己lora的女生

作者:铁华团的黄金船发布时间:2023-06-01

《流浪地球2》里有一个关于数字生命的设定,人类可以把自己“数字化”,然后上传到服务器,成为数字生命。而数字化的介质,是一种类似SSD或内存卡的设备。


当时还在思考,要多大的容量才能存储一个人的一生?

随着对AI的熟悉和了解,我突然意识到,数字生命卡里存储的,也许并不是生命的全部,而是一种类似lora的微调模型。通过脑机接口,接收人的思想,然后训练成微调模型,再接入大模型(数字世界)。

或许,这是未来数字世界的运行机制。

先是有人公开了用自己的微信聊天记录和文章训练的“数字人”,又有人在C站开源了自己用数百张照片训练的lora。

之前我曾试图做一个lora的训练教程,结果因为版权问题难以找到合适的照片来训练,用自己的照片又担心掉粉。

这下好了,有个叫奈奈的小姐姐开源了自己。

在C站,她这样介绍自己的lora:

奈奈Lora —— 全球第一个开源女生!这是一个我自己的(本人)的模型,在朋友们的怂恿下发布。谁是奈奈?奈奈是某加州大学的计算机系大三学生,既不是明星也不是偶像。 这个模型就是发布出来好玩的。由于训练使用了本人三百多张近距离自拍照,对远距离照片效果不是很好。你可能会注意到眼睛有一些斗鸡眼,这是因为我本人就是斜视,请轻喷。这个模型不可商用,不可冒充奈奈本人,不可冒充未成年人(长得比较幼)商业使用需要,或者定制LoRa 请联系奈奈本人。

更离谱的是,她还训练了一部分不可描述的模型放在P站... ...

本文就不提不可描述的部分了,用她的lora尝试一下效果。只要不进行商业应用,就无须担心版权问题。

1、先用最真实的真人模型:braBeautifulRealistic_brAV5

不使用lora的情况下。

随机种子:3009770353

提示词:

1girl dressed in a cute, country-style white dress , standing in a rustic farm setting. She has a soft, gentle smile and expressive eyes. The background features a charming barn, Savannah, and a clear blue sky. The composition should be bathed in the warm, golden hour light, with a gentle depth of field and soft bokeh to accentuate the pastoral serenity. Capture the image as if it were taken on an old-school 35mm film for added charm. film portrait photography,medium hair, hair over one eye,

负面提示词:

cartoon, anime, sketches, (worst quality, low quality:1.2), (deformed, distorted, disfigured, bad eyes), wrong nose, weird mouth, strange ears, bad anatomy, wrong anatomy, amputation, extra limb, missing limb, floating limbs, (bad teeth, mutated hands, wrong fingers:1.2), disconnected limbs, mutation, ugly, disgusting,  (negative_hand-neg, bad_pictures:1.2)


bra是一个亚洲面孔为主的真人模型,据说,这个模型深受东亚LSP们喜爱,有趣的是,中国人觉得像韩国人,韩国人觉得像日本人,日本人觉得像中国人。

在提示词增加该lora后,<lora:nanAV6:0.9>,生成的画面有了明显的变化。


画面发生了明显的变化。

Nana小姐姐最大的特点,是有点对眼... ...

换一组提示词,不使用lora:

best quality, (mature:1.3),perfect face, beautiful face,western, sharp focus, solo,beautiful woman,sexy,shiny skin,Navy blouse, beige shorts, soft light,cinematic lighting, sunny, dusk, outdoor,depth of field,


使用lora:


2、换一个二次元模型:breakdro_I1464

提示词:

1girl, shiny skin, slender, blue eyes, colored  eyelashes, gray hair, long hair, standing, holding  flower, hanfu, sad smile, pearl  bracelet, on  the  beach, dusk, HDR,UHD,8K, best quality, masterpiece, Highly detailed, ultra-fine painting, sharp focus, physically-based rendering, extreme detail description,  Professional, Vivid Colors, close-up view, looking at viewer



增加上lora,权重设为0.6,发现变化不大,主要是脸型。


这个lora本身,不算太美,最大的特点,是第一个“数字化”人。

沿着这条路,有很多有趣的事可以尝试。

下载:

https://www.123pan.com/s/ueDeVv-Eo0I.html  提取码:lgyh



Copyright © 2024 aigcdaily.cn  北京智识时代科技有限公司  版权所有  京ICP备2023006237号-1