分享好友 最新动态首页 最新动态分类 切换频道
AI绘画-【StableDiffusion】从入门到放弃--Lora模型
2024-12-26 22:25

大家好,我是AIGC安琪

Stable DiffusionLora模型,作为AI绘画领域的新宠,正引领着一场视觉艺术革命。它不仅继承了StableDiffusion的强大图像生成能力,还通过LoRA技术实现了更精细、更具个性化的图像风格迁移。想要探索这一前沿技术的无限可能吗?本文将带你深入了解StableDiffusionLora模型,助你解锁AI绘画新境界。

01.认识Stable Diffusion的几种模型

在学习之前我们先来简单看一下SD中可以看到的几种模型。

1.嵌入式(TI.Embedding):不常用,字面意思是文字嵌入,在check
point模型的基础上训练来的,特点是文件格式是pt,体积一般只有几十kb,特别小。这类模型要放到embeddings文件夹内。

2.超网络(Hypernetworks):功能和lora类似,但是不如Lora效果好,所以我们也基本放弃这个模型。这类模型要放到modelshypernetworks文件夹内。

3.大模型:这里是我们常用的大模型。是SD运行的基础,没有它SD无法运行。这类模型要放在modelsStable-diffusion文件夹内。

4.Lora:它是我们除大模型外使用最多的模型,这类模型容易训练,对电脑配置要求低,文件安全。这类模型要放到modelslora文件夹内。

简单了解完SD总能看到的几种模式之后我们进入正题。

简单来说Lora的作用是帮我固定认为特征,比如相貌,衣服,动作,风格等。

下面这些都是使用了Lora输出的图片。

这里很多人会有一个疑惑那lora和大模型有什么区别

我们可以这样理解

SD官方有自己的大模型,如:SD1.5,SD2.0。这种我们把他理解为我们毛坯房

我们经常用的被训练过的大模型,比如:墨幽人造人,麦橘写实,二次元类型的这些,我们理解为在官方模型上训练出来的精装房

而Lora模型我们则可以理解为在精装房内进行了**软装,**需要配合适合的大模型来使用。

Lora和大模型一样需要我们自己去下载。常用的网站就是C站 ,但是由于需要科学上网,可能有些同学下载不了。

这边给大家准备了一些常用的Lora模型(可以在文末扫描获取

点击筛选 -点击需要的Lora -点击Download 即可下载。

在下载页面我们还可以看到Trigger Words这一项,这个是Lora的触发词,也要记下来。
需要加入到prompt中才可以触发这个lora。

网上这样Lora都是被人炼制好的,可以直接使用。

后面我们也可以尝试炼制自己的Lora模型。这里就先不讲了,后面我们单独出一期讲如何炼制自己的Lora。

Lora模型如何使用

我们按之前的操作选择大模型和其他参数,然后点击模型中的Lora。

选择一个下要使用的Lora,SD会自动把Lora添加到提示词内。

是Lora的提示词,其中最后的1是表示这个Lora的权重。这个数值最大是1不能超过1,也就是只能往下调。

cshy manakanemumanakanemu,cyan dress,是这个Lora的触发词。有些模型需要搭配触发词才可以使用。

下面是我们生成出来的一组图。可以看到主角的裙子基本是锁定的,这个就是Lora的功劳。

我们还可以尝试多个Lora结合 使用。

在这段提示词中我们使用了两个不同的Lora。

刚才我们说过Lora的权重数值不能超过1。

这个规则在使用多个Lora的时候也是如此

多个Lora的权重数值之和不能大于1

可以看到这两个Lora的权重我分别设置的是0.5。

生成一下看下效果,这两个提示词没有变化。

Lora使用小技巧

在我们模型比较多的时候,可以sd-webui-aki-v4.4modelsLora文件夹下新建文件夹。

更方便我们快捷找到自己常用的Lora模型。

如何给Lora添加预览图

选择一张Lora的预览图“.png格式”放到sd-webui-aki-v4.4modelsLora文件夹下,和Lora模型同名即可。

使用Lora插件

除了上面的方法,再给大家推荐一Lora的插件“Additional Networks ”。

安装方法如下

点击“扩展 ”-点击“可下载 ”-点击“加载扩展列表 ”。

在下面的列表里找到Kohya-ss Additional Networks 点击后面安装 即可。

安装完毕之后需要把Lora文件放到插件的目录下。

也就是把原本在sd-webui-aki-v4.4modelsLora下的文件。复制到sd-webui-aki-v4.4extensionssd-
webui-additional-networksmodelslora这个文件夹下。

然后重启SD应用。就可以使用了。

部分小伙伴安装完了之后,文件也放对位置重启应用之后还是选不了Lora模型,可以点击刷新模型列表解决。

如果你是真正有耐心想花功夫学一门技术去改变现状,我可以把这套AI教程无偿分享给你,包含了AIGC资料包括AIGC入门学习思维导图AIGC工具安装包精品AIGC学习书籍手册AI绘画视频教程AIGC实战学习等。

这份完整版的AIGC资料我已经打包好长按下方二维码,即可免费领取

最新文章
点猫科技:“创客教育解决方案”成功入选 获教育部资源中心认可
点猫科技成立于2015年,是国内资深的编程教育企业,旗下拥有编程教育品牌“编程猫”。近日,教育部教育技术与资源发展中心(中央电化教育馆)公布了2024年“数字校园综合解决方案”第二批测试合格名单,其中点猫科技的“中小学人工智能创客
大智慧大数据终端:开启智能化投资时代
引言:随着互联网技术与金融行业的深度融合,大数据应用在投资决策中的作用日益凸显。大智慧大数据终端作为投资者获取信息、分析数据、进行决策的重要工具,已经成为金融行业的热门话题。本文旨在深入探讨大智慧大数据终端的行业现状与发展
全球首发!眼科大型语言模型Eye GPT在Vision China 2023重磅发布!
5月19日上午,一项眼科领域的颠覆性产品——眼科大型语言模型Eye GPT数字医疗系统在Vision China 2023正式发布,这也是该项科技成果和应用在全球首次正式发布。排版:张颖琪审核:叶小静2023 VISION CHINA关注公众号了解更多相关资讯
超星线上课程平台与PTA(线上编程平台)教师简易使用教程
电脑上打开https://www.xueyinonline.com/或者各个学校自己的超星线上课程网站。登录后点击右上角头像。点击"我教的课"。进入课程后课进行如下操作:点"新建班级",输入班级名称(建议按照"学校-班级名"格式命名)。根据需要选择创建一个大班
如何使用AI工具生成超逼真美女写真?2023最佳工具评测与教程
这款工具特别适合用户生成高度真实的照片。它的AI算法专注于人脸的细节捕捉,非常适合制作高清晰度的美女写真。界面友好,适合各类用户,然而相比于其他工具,定制化选项较少,限制了用户创作的自由度。5. 【搜狐简单AI】最后,我们不得不
用AI绘画神器,轻松生成超逼真美女写真!
在如今这个数字化时代,生成超逼真的美女写真动画似乎成了一种潮流,特别是在社交媒体盛行的影响下,很多人想要通过AI技术制作出个性化、专业感满满的照片,那么哪个AI绘画工具最适合你呢?想象一下,你能坐在家里,随意指尖轻触,便可创造
网站SEO优化:黑帽常用的优化技巧
经常在站长论坛看到,一些站长抱怨他们的网站排名下降了。百度的网站受到惩罚甚至被删除。网站站长觉得很十分无辜,认为搜索引擎没有惩罚的理由。经过深入的研究和分析,人们会发现这些网站受到惩罚的事实恰恰是利用搜索引擎作为欺骗的手段
话题对于热搜的重要性你知道多少
有多少人只是为了而冲着,但那些人却会忽略一些小细节。比如如何设置热搜话题,如何对内容进行策划和编辑,让内容更贴近主题,素材更吸引眼球。我们就来说说主题吧。一个好的话题确实可以起到事半功倍的效果。在整体榜单之前,你是否做过深
百度搜索推广平台
百度搜索推广平台是一个在线广告投放平台,为企业提供精准的营销推广服务。该平台通过关键词竞价、定向投放等方式,将广告展示在用户搜索结果页面中,帮助企业快速提升品牌曝光度和销售业绩。该平台具有灵活的投放策略和精准的定向技术,可
亚马逊业务员和亚马逊运营有什么区别
一.岗位职责:1、管理亚马逊/Ebay/速卖通店铺,负责外贸网店营销优化,提出相关优化方案;2、编辑和翻译产品信息,负责上传产品资料,将产品资料刊登到外贸电子商务平台;3、评估、分析产品的关键词,提升产品关键词的搜索排名;4、修改产品
相关文章
推荐文章
发表评论
0评