【Stable Diffusion】lora的基础使用技巧

2023-11-06

1.用lora配套的大模型效果更好
lora训练是根据大模型作为参考,lora是根据那个大模型来训练参数的
在这里插入图片描述
例如,这里以墨心lora为例,点击示例图片的中的“?”,在Model中就显示出了作者用于训练墨心lora的底模了
2.最好使用和作者相同的参数
还是以墨心lora为例,可以看到示例图片中有Sampler、Model、CFG scale等参数
在这里插入图片描述

(1)Sampler——采样方式,在Stable Diffusion WebUI中的Sampling method中进行选择
(2)Model——作者使用的大模型,在Stable Diffusion WebUI中的Stable Diffusion checkpoint中进行选择
(3)CFG scale——提示词相关性,在Stable Diffusion WebUI中的CFG scale进行调整
(4)Steps——采样迭代步数,在Stable Diffusion WebUI中的Sampling steps中进行调整
(5)Seed——随机种子,在Stable Diffusion WebUI中的Seed中进行调整
Stable Diffusion WebUI中的参数调整位置(除了Stable Diffusion checkpoint在页面最上方)如下:
在这里插入图片描述
值得注意的是,在复制示例图片的Prompt和Negative prompt的提示词时,要注意示例图片的lora词和最后作者发布显示的lora词不一样,例如,这里,示例图片中的使用了两个lora,分别是: lora:shukezouma_v1_1:0.8和lora:shuimobysimV3:0.7
在这里插入图片描述
我们分别下载这两个lora,在页面的上方就显示了这两个lora,点击后进行下载(是的,有时一个页面中可能可以下载多个lora,在Stable Diffusion中配合使用)
在Stable Diffusion WebUI中,我们点击这两个lora,显示的分别是 lora:shukezouma_v1_1:1和 lora:MoXinV1:1,也就是说作者发布的lora名称和示例图片中的lora名称不一样,要注意调整,并将权重值调整为示例图片的权重值

在这里插入图片描述
调整好后,生成图片效果如下:
在这里插入图片描述
可以在示例图片的参数的基础上做进一步尝试和调整,在保证一定质量的基础上,生成更有创意的图片

3.正确地设置lora的使用权重
lora的权重值不要在1以上,不然容易出效果很差的图,权重值最好设置到0.8、0.9能够提高出图质量,如果只想带一点点lora的元素,权重值设置到0.4-0.6就可以了
4.有触发词一定要使用触发词
将Trigger words中的词,选择需要的加入到Prompt中,才能将相应的元素触发出来(有的在Trigger words中的上方有个Tag栏,Tag是lora的标签表示lora大概是什么特征,不是触发词,不需要管tag)
在这里插入图片描述
有的时候,作者并没有给出Trigger Words,此时直接把lora加载进去,也能发挥作用

5.新手尽量不要混用lora
除非lora作者给了非常成熟的建议
因为并不了解每个lora的提示词触发词的训练图集,启用时很容易打架、互相污染,如果一定要多个lora混用,需要学习lora把里面的十几个层分别抽出来单独设置权重,再进行使用,这样的多个lora的混用效果才比较好

本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)

【Stable Diffusion】lora的基础使用技巧 的相关文章

  • Jenkins流水线怎么做?

    问CHAT Jenkins流水线怎么做 CHAT回复 Jenkins流水线是一种创建 测试和部署应用程序的方法 以下是为Jenkins创建流水线的步骤 1 安装Jenkins 首先你需要在你的服务器上安装Jenkins 这个过程可能会根据你
  • 如何利用CHAT做简单的总结体会?

    问CHAT 在测试过程中使用appium python自动化的优点和体会 CHAT回复 使用 Appium 配合 Python 进行自动化测试主要有以下几点优点 1 跨平台性 Appium 支持 iOS 和 Android 平台的应用自动化
  • AAAI 2024 一作讲者招募 | 持续报名中

    点击蓝字 关注我们 AI TIME欢迎每一位AI爱好者的加入 我们诚挚地邀请您来AI TIME分享您发表在AAAI 2024的工作 请您扫码填写以下问卷 如内容合适我们将会与您沟通相关分享事宜 AAAI 2024预讲会计划时间 2024年1
  • 文档扫描与矫正-仿射变换

    图像变换是计算机视觉和图像处理中的关键技术之一 它允许我们对图像进行各种形式的变形 调整和校正 其中 仿射变换是一种常见的变换方式 在文档扫描过程中 由于拍摄角度和畸变等原因 文档图像可能存在一定程度的形变 仿射变换可以用于校正文档图像 使
  • 用通俗易懂的方式讲解:如何用大语言模型构建一个知识问答系统

    传统搜索系统基于关键字匹配 在面向 游戏攻略 技术图谱 知识库等业务场景时 缺少对用户问题理解和答案二次处理能力 本文探索使用大语言模型 Large Language Model LLM 通过其对自然语言理解和生成的能力 揣摩用户意图 并对
  • 【路径规划】基于A*算法路径规划研究(Matlab代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Matlab代码实现
  • 利用CHAT写实验结论

    问CHAT 通过观察放置在玻璃表面上的单个水滴 人们可以观察到水滴充当成像系统 探究这样一个透镜的放大倍数和分辨率 CHAT回复 实验报告标题 利用玻璃表面的单一水滴观察成像系统的放大倍数和分辨率 一 实验目的 通过对比和测量 研究和探索玻
  • 让CHAT介绍下V2ray

    CHAT回复 V2Ray是一个网络工具 主要用于科学上网和保护用户的网络安全 它的名字源自Vmess Ray 光线 通过使用新的网络协议 为用户提供稳定且灵活的代理服务 下面是一些V2Ray的主要特性 1 多协议支持 V2Ray 提供了大量
  • Creator AIGC插件!一句话生成人脸

    近几个月以来 AIGC 一路高歌猛进 让我们见证了一场行业革命 然而 AIGC 在 3D 资产领域却仍是业内的难题 少有突破 小编今天给大家推荐一个 3D 角色 AIGC 利器 ChatAvatar 它可以算是 3D AIGC 领域的一匹黑
  • 多模态、长文本、智能体,智谱AI推出GLM-4模型全家桶,发布即上线!

    点击蓝字 关注我们 AI TIME欢迎每一位AI爱好者的加入 2024年01月16日 智谱AI首届技术开放日 Zhipu DevDay 在北京中关村国家自主创新示范区展示中心成功举办 现场 智谱AI团队全面展示了其投身于大模型事业三年多来所
  • 毕业设计:基于卷积神经网络的验证码识别系统 机器视觉 人工智能

    目录 前言 设计思路 一 课题背景与意义 二 算法理论原理 2 1 字符分割算法 2 2 深度学习 三 检测的实现 3 1 数据集 3 2 实验环境搭建 3 3 实验及结果分析 最后 前言 大四是整个大学期间最忙碌的时光 一边要忙着备考或实
  • 毕业设计:基于深度学习的微博谣言检测系统 人工智能

    目录 前言 设计思路 一 课题背景与意义 二 算法理论原理 三 检测的实现 最后 前言 大四是整个大学期间最忙碌的时光 一边要忙着备考或实习为毕业后面临的就业升学做准备 一边要为毕业设计耗费大量精力 近几年各个学校要求的毕设项目越来越难 有
  • 【毕业设计选题】复杂背景下的无人机(UVA)夜间目标检测系统 python 人工智能 深度学习

    前言 大四是整个大学期间最忙碌的时光 一边要忙着备考或实习为毕业后面临的就业升学做准备 一边要为毕业设计耗费大量精力 近几年各个学校要求的毕设项目越来越难 有不少课题是研究生级别难度的 对本科同学来说是充满挑战 为帮助大家顺利通过和节省时间
  • 强烈推荐收藏!LlamaIndex 官方发布高清大图,纵览高级 RAG技术

    近日 Llamaindex 官方博客重磅发布了一篇博文 A Cheat Sheet and Some Recipes For Building Advanced RAG 通过一张图给开发者总结了当下主流的高级RAG技术 帮助应对复杂的生产场
  • AI帮助终结全球饥饿问题

    全球饥饿问题是牵动人心的头等大事 5月28日是 世界饥饿日 这一问题更值得关注 让人人都能吃饱的想法不仅令人向往 而且很快就会变成现实 与大多数新事物引进一样 对于在控制世界粮食供应这样复杂的任务中AI究竟应该发挥多大的作用 人们还踟蹰不前
  • AI-基于Langchain-Chatchat和chatglm3-6b部署私有本地知识库

    目录 参考 概述 部署安装 环境准备 原理和流程图 一键启动 启动WebAPI 服务 启动WebUI服务 Docker部署
  • 考虑光伏出力利用率的电动汽车充电站能量调度策略研究(Matlab代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Matlab代码 数据
  • 基于节点电价的电网对电动汽车接纳能力评估模型研究(Matlab代码实现)

    欢迎来到本博客 博主优势 博客内容尽量做到思维缜密 逻辑清晰 为了方便读者 座右铭 行百里者 半于九十 本文目录如下 目录 1 概述 2 运行结果 3 参考文献 4 Matlab代码 数据
  • 自动驾驶离不开的仿真!Carla-Autoware联合仿真全栈教程

    随着自动驾驶技术的不断发展 研发技术人员开始面对一系列复杂挑战 特别是在确保系统安全性 处理复杂交通场景以及优化算法性能等方面 这些挑战中 尤其突出的是所谓的 长尾问题 即那些在实际道路测试中难以遇到的罕见或异常驾驶情况 这些问题暴露了实车
  • 两个月进口猛增10倍,买近百台光刻机,难怪ASML不舍中国市场

    据统计数据显示 2023年11月和12月 中国从荷兰进口的光刻机设备同比猛增10倍 进口金额超过19亿美元 让ASML赚得盆满钵满 ASML早前表示中国客户在2023年订购的光刻机全数交付 2023年11月中国进口的光刻机达到42台 进口金

随机推荐

  • 增强现实攻略

    如今比较火爆的增强现实 很多人都不会弄 而且呢 百度上相对的攻略也比较少 于是我在这里吧这两天弄的步骤分享下 首先打开https developer vuforia com这个网站 点击注册账号 注意这个网站的事英文的 不过要是不懂引文可以
  • 第七章:敏捷开发工具方法-part1-敏捷开发基础

    文章目录 一 Scrum基础概念 1 1 传统开发模式与敏捷开发的区别 1 2 传统项目管理与敏捷项目管理的区别 1 3 敏捷宣言 1 4 敏捷开发的特征 1 敏捷的方法 二 角色与职责 2 1 Scrum Team 2 2 角色职责总结
  • Java连接MySQL代码

    运行环境 Idea 2022 1 MySQL 8 0 28 1 导入mysql的jar包 Idea左上角 File 文件 gt Project Structure 项目结构 要导入整个mysql jar包的文件 最后Apply就可以了 2
  • 线性代数系列讲解第六篇 AX=b求解(针对有解情况)

    AX b 各种情况 A A A是mxn的矩阵 秩为 r r r r m r n r leq m r leq n r m r n r n r n r n r n r n r n表示没有自由变量 即零空间 N A 0 N A begin Bma
  • 笔记本win10引用账户当前已锁定,且可能无法登录(已解决)

    问题 win10引用账户当前已锁定 且可能无法登录 解决方案 按Shift 重启 选择 疑难解答 高级选项 启动设置 按 重启 等待出现选择界面后 选 带命令指示符的安全模式 输入命令net user 这里写被锁定的账户名 active y
  • 程序员代码开发的自测素养

    环境达不到 就需要自己开发 自己测试 直接提供客户 老板 审阅 如果不重视开发者自己的测试环节 那么你的苦心积虑 用心良苦在别人看来就是一无是处 毛病处处的产品 而测试过程就得讲究科学方法 1 自己配备耐心细致的芯片 2 发散思维技能的掌握
  • MATLAB自动读取文件夹中的所有文件,并处理文件内容

    读取示波器文件中的数据 并记录其峰值 clc clear all 获取文件夹下某类型数据的所有文件名 Path E 单光子 设置数据存放的文件夹路径 File dir fullfile Path csv 显示文件夹下所有符合后缀名为 csv
  • 量化择时——SVM机器学习量化择时(第1部分—因子测算)

    文章目录 机器学习在量化模型上的应用 机器学习量化应用场景 量化模型有效性的思考 机器学习模型在量化择时中的应用 训练与预测流程 训练数据特征构造 SVM模型与测算 SVM训练与预测 效果测算 效果分析 最近ChatGPT比较火 NLP的同
  • vscode更改快捷键

    对我来说使用vscode必须要修改的一些快捷键 ctrl f修改后居然不能键盘选择上下搜索 太无语 按如下方式改掉 1 首先打开vscode编辑器 点击首页 首选项 键盘快捷方式 2 之后就是右键需要修改的那些快捷键 然后改成自己熟悉的就可
  • 利用GitHub搭建一个酷炫免费的个人博客

    转载自公众号 python shequ 由于公众号的文章不易后续整理阅读 于是小吴昨天上午花了半个小时使用 GitHub Hexo 搭建了一下个人博客 打算将公众号的文章搬过去 支持关键字搜索 分类标签功能 效果是下面这样子的 image
  • 微信小程序和web开发使用过程中的相似与不同

    思考 微信小程序和web开发使用过程中的相似与不同 相似之处 1 二者在构造时都用到了JavaScript语言 2 在设计小程序和网页时 都不可避免的要用到图片文字去丰富内容 使其变得更加充实 因而也就需要设计框架和页面样式 从而达到耐看
  • FuzzBuzz算法问题

    java实现输入一个字符串 5 hogera 3 piyo 2 huga 30 按空格分隔为map 例如 key为数字5 value为字符串hogera 当最后的数字满足 30 532时 按照key的从小到达的顺序拼接字符串输出hugapi
  • scrapy框架的安装与基本使用,scrapy分页数据的抓取

    文章目录 一 scrapy框架简介 二 scrapy的安装 三 scrapy的基本使用 四 scrapy架构流程图 五 汽车之家案例抓取 六extract 和extract first 区别和用法 七 当当网数据抓取 scrapy的分页抓案
  • Redis学习总结

    文章目录 Redis入门 概述 Linux安装 1 下载安装包 redis 6 0 6 tar gz 2 将安装包安装在OPT目录下 3 进入解压后的文件 4 基本的环境安装 5 redis默认安装路径 usr local bin 6 将o
  • ST单片机使用ST Visual Programmer软件烧录程序简易教程

    文章原始地址 http feotech com p 100 ST单片机使用ST Visual Programmer软件烧录程序简易教程 ST Visual Programmer 是ST公司为自家单片机开发的一款程序烧录读取工具软件 该软件简
  • 【DBN分类】基于粒子群算法优化深度置信网络PSO-DBN实现数据分类附matlab代码

    作者简介 热爱科研的Matlab仿真开发者 修心和技术同步精进 matlab项目合作可私信 个人主页 Matlab科研工作室 个人信条 格物致知 更多Matlab仿真内容点击 智能优化算法 神经网络预测 雷达通信 无线传感器 信号处理 图像
  • CWnd与HWND的区别以、转换以及如何获取本窗体对象

    一 CWnd与HWND的区别 HWND是句柄 是Windows系统中对所有窗口的一种标识 即窗口句柄 它是指针的指针 是由操作环境定义的一个唯一的整数值 它被程序用来标识或者切换到对象 如窗体或控件等 CWnd是MFC中所有与窗口有关的基类
  • yarn 错误There appears to be trouble with your network connection. Retrying...

    原因 yarn超时 解决途径 1 安装好后更换淘宝镜像 yarn config set registry https registry npm taobao org 转载于 https www cnblogs com yanglang p
  • 回顾|Streaming Lakehouse Meetup · 北京站(附问题解答 & PPT 下载)

    更多活动现场照片 https live photoplus cn live pc 53265145 7 月 29 日 Streaming Lakehouse Meetup 邀请了来自阿里巴巴 字节跳动的七位技术专家 围绕 CDC 数据入湖实
  • 【Stable Diffusion】lora的基础使用技巧

    1 用lora配套的大模型效果更好 lora训练是根据大模型作为参考 lora是根据那个大模型来训练参数的 例如 这里以墨心lora为例 点击示例图片的中的 在Model中就显示出了作者用于训练墨心lora的底模了 2 最好使用和作者相同的