AI绘画Stable Diffusion 零基础入门 —AI 绘画原理与工具介绍，万字解析AI绘画的使用教程

大家好，我是设计师阿威

想要入门 AI 绘画，首先需要了解它的原理是什么样的。

其实很早就已经有人基于深度学习模型展开了对图像生成的研究了，但在那时，生成的图像分辨率和内容都非常抽象。

直到近两年，AI 产出的图像内容的质量变高、而且有一定的艺术价值，这时它才算正式拥有了理解人类所表达的意思去作画的能力。

虽然把这个过程称之为 “AI 绘画”，但实际上它并不是像人类画图一样，打草稿、勾线描边、上色、细节加工等等、按部就班的去完成一幅画作的。

AI 另辟蹊径地采取了一个人类不曾设想过的途径去画画：Diffusion（扩散）。我们可以先看一下 AI 绘画的过程：

你已经看到了扩散的过程了，但可能很多同学其实还是一知半解。

如何用通俗易懂的方式去理解扩散呢 ？

这是一幅在计算机图像处理界最为传奇的一张照片 —— 莱娜图（莱娜・瑟德贝里）：

如果让你把这幅画用二次元动漫风重新绘制一遍，你会怎么做呢？

现在尝试着把你的眼睛眯到直撑一条缝去看图片，她是不是变得模糊了：

保持这个状态，想象她正在逐渐变的二次元，随后慢慢睁开眼睛：

现在这幅画已经变得完全不同了。

其实这就是一个扩散模型工作的基本流程了：

在这个例子里，你可以把自己代入到执行绘画指令的 AI 角色：

  1. 首先你需要对图像通过增加噪声的方式进行 “扩散”（分散特征信息），也就是让它在你脑海中变得更模糊（就像眯着眼睛的你）

  2. 当内容模糊了以后，你就有更充分的想象空间从原本的图像形态中抽离：

    - 提取你之前看过的二次元图像的特征（深度学习）

    - 和当前图像的特征建立关联、糅合

  3. 对你脑海中加工过的图像进行去噪（逆向扩散），使它在二次元的方向上逐渐变得清晰

  4. 当你睁开眼睛的时候，这副图像就已经被你根据二次元的形象重新绘制过了

这个原理可以为我们在后面 AI 绘画的实操阶段提供理论基础和指导思想。当然这个过程被简化过了，实际上代码层面的实现远比这个复杂得多，但现阶段也并不需要知道得太多。

AI绘画工具SD 的安装

现在是 AI 百花齐放的时代，我相信你之前肯定听过甚至了解过 Midjourney、 Stable-Diffusion （下文简称 SD） 等一些知名的作画工具。

其实目前市面上大多数商业 AI 绘画工具，其实都是基于 SD 开发的，主要是因为在 SD 全面开源之后，在社区出现了大量丰富的模型，而且通过算法迭代，它将 AI 绘画的精细度提上了一个新的台阶，可以在民用级显卡的电脑上、并能在秒级时间内完成图片产出。

现在 SD 已经可以非常轻松地绘制出各种风格的作品，比如动漫风、插画立绘、国风、水墨风、3D 建模，甚至是照片级的拟真图像，而且借助 LoRA、ControlNet 等衍生功能，SD 还可以做到精准控制美术风格、角色细节、姿势动作构图等。

而社区的优势是商业产品很难具备的，而且商业产品需要考虑各种出图限制（费用、网速、内容等），所以我最终选择了 NovelAI —— 它是在以 SD 为底层框架的基础上、兼顾用户体验而产生的一款完全免费的产品，支持图形化管理版本、模型、绘画管理等：

配置要求

  1. 系统: Windows（Win10+） 或 Mac

  2. 显卡: 8G 以上的独显（优先 Nvidia）

显卡是影响出图的最核心因素：

  • 显存：直接影响能否出高分辨率的图片（512x512 都画不出，怎么画高清？）、无法加载太多模型限制出图、甚至可能爆内存中止绘制。后期会影响训练规模。

  • 性能：直接影响出图效率。AI 绘画其实就是抽卡的过程，很多时候不会一次就得到想要的图片的，需要反复尝试去修改参数。效率太低的显卡几分钟才出一张图，会把你的兴趣耗光的

各显卡绘制同一张图片的时间

SD 安装步骤

  1. 预装: CUDA

  2. 预装：python 3.10.X（目前最优版本是 3.10.8）

  3. 预装: Git

  4. 下载 秋葉aaaki 大佬的 novelai-webui-aki-v4.X 整合包（已正式命名为 “绘世”），解压后通过 A启动器.exe 一键启动即可（视频有详细安装指引）。这个 安装包 功能齐备、方便后期更新管理，最适合新手使用。

  5. 安装包下载请扫描获取哦

    - 注意事项：

    - SD 安装路径不要在系统盘，路径尽可能短，绝对不要有中文、空格、特殊字符

    - SD 所在的盘符至少有 50GB 以上的空间（后续放入的模型动辄 2G-7G/个，总大小可能几十上百 GB）

模型安装步骤

假设你的SD 安装位置在 %SD。

你在启动前，需要检查 %SD/models/Stable-diffusion/ 目录是否为空，这个目录是存放 AI 绘画主模型的目录，SD 要求必须至少要有一个主模型才能运行。

所以如果目录为空，可以先去 huggingface（或者看上方扫描）下载这两个热门模型放到目录下：

  • SD 官方基础模型：stable-diffusion-v1-5

  • 二次元风格模型：AbyssOrangeMix3（海外非常受欢迎的，昵称 “深渊橘”）

【模型是什么？】

了解了AI绘画是怎么生成画面的，那么AI 是从哪里学会画出各种绘画风格的呢？

其实 AI 出图的经验，就来自一些使用图片素材训练出来的大模型。

不同的模型可以给你的作品带来完全不同的画面内容和画风，这也是 AI 阅片无数的底气所在。

可以把模型类比成一本字典，AI 拿着汉语字典、英语字典，就能根据你给它的提示词去翻字典，从而画出国风、欧美风的图片。

更多的AI绘画大模型可以看文末扫描获取哦

认识 SD WebUI

A启动器 的界面就不过多介绍了，主要是用于 SD 版本和模型下载/管理器，操作很简单，按钮的功能就是字面的意思，用几次就理解了。

第一次使用如果怕麻烦，直接点击右下角的 一键启动 就好，它会自动运行 SD 程序启动，并在浏览器打开一个 SD WebUI 页面。

如果没有自动打开，可以访问：http://127.0.0.1:7860/

SD WebUI 是我们以后作画的主要操作页面，它集成了许多在代码层面非常繁琐的功能，并将里面的各项参数的条件转化成了非常直观的选项数值与滑块。

目前开源社区里面 90% 以上的拓展插件都是基于 SD Web UI 去研发的，所以很有必要学会怎么使用它。

参考下图，SD WebUI 界面可以大概分为 5 个区域：

  1. 模型选择区: 选择作画的模型

  2. 功能选择区: 选择如何作画

  3. 参数输入区: 根据喜好设置作画的 “命令” 参数

  4. 图像输出区: AI 根据设定的 “命令” 绘图的位置

  5. 异常输出区: 绘图过程中出现异常的显示位置

模型选择区

在界面左上角有一个名为 “stable defusion 模型” 的下拉框，如果你刚刚有下载我所推荐的两个模型，可以从下拉列表找到它们。

前面安装时也提到过了，模型的存储目录在 %SD/models/Stable-diffusion/，现在先记住这个目录就可以了，它是你以后新增更多模型的固有基地。

当有新模型添加到这个目录，点击下拉框旁边的刷新按钮，就可以看到新的模型了。

切换新的模型时需要等待十几秒加载，然后就可以使用了。

功能选择区

【文生图 & 图生图】

  • 文生图：利用提示词生成图片

  • 图生图：利用提示词和参考图片、生成图片

这是两种最基本的绘画基本方式，在后面的系列会展开说明。

【附加功能】

目前主要对图片进行 AI 放大处理，它可以让你生成更清晰的大图。

【图片信息】

查询已生成图片的提示词、模型、参数、随机种子等信息。当别人分享他所绘制的图片给你时，会很有用。

【图库浏览器】

每次 AI 在生成一批图片后，都不需要人工保存，这些图片会自动保存到 %SD/outputs/ 对应的目录下。

但是 SD WebUI 提供了一个更方便的 图库浏览器 功能，在这里面可以按照类目查看到通过不同方式生成出来的图像。

如果想要把它导出来，就像在浏览器里保存一张图片一样右键另存为即可。

而且图库浏览器还有许多妙用，例如可以直接查看图片的生成信息、快速对图片进行图生图局部重绘等等。

【Tag反推（Tagger）】

当我们从网上拿到一张不知来源的图片想用来当图生图的参考素材时，就可以利用这个功能反推提示词，以便把生成的图片限制在一定的范围内。

例如我在开头介绍原理时重回的莱娜图，就是借助反推功能生成了莱娜的提示词

然后再借助二次元模型 深渊橘和 LoRA 插件对她进行重绘。

我们可以看看，如果没有提示词，其他参数保持一致，在单纯图生图的情况下 AI 就会完全放飞自我，很有可能画出来的就是另一个东西了：

【设置】

在这里可以设定各种和绘图过程相关的选项，例如图像的保存路径、采样参数等等。

现阶段刚入门还不熟悉，维持一切默认一般就不会出问题。

在本系列的后面用到时会提及相关的配置项。

【扩展】

这里主要是用来安装和管理一些额外的插件的。

为什么有些大佬的 SD WebUI 和你的长得不太一样，功能也多了许多，就是这里在搞怪。

有些安装到你 SD WebUI 里的插件会在界面添加额外的标签，例如【可选附加网络（LoRA 插件）】就是要安装 sd-webui-additional-networks 这个插件才会出现的。

在本系列的后面用到时会提及相关的插件安装。

感兴趣的小伙伴，赠送全套AIGC学习资料，包含AI绘画、AI人工智能等前沿科技教程和软件工具，具体看这里。

AIGC技术的未来发展前景广阔，随着人工智能技术的不断发展，AIGC技术也将不断提高。未来，AIGC技术将在游戏和计算领域得到更广泛的应用，使游戏和计算系统具有更高效、更智能、更灵活的特性。同时，AIGC技术也将与人工智能技术紧密结合，在更多的领域得到广泛应用，对程序员来说影响至关重要。未来，AIGC技术将继续得到提高，同时也将与人工智能技术紧密结合，在更多的领域得到广泛应用。
 
在这里插入图片描述

一、AIGC所有方向的学习路线

AIGC所有方向的技术点做的整理，形成各个领域的知识点汇总，它的用处就在于，你可以按照下面的知识点去找对应的学习资源，保证自己学得较为全面。

在这里插入图片描述

在这里插入图片描述

二、AIGC必备工具

工具都帮大家整理好了，安装就可直接上手！
在这里插入图片描述

三、最新AIGC学习笔记

当我学到一定基础，有自己的理解能力的时候，会去阅读一些前辈整理的书籍或者手写的笔记资料，这些笔记详细记载了他们对一些技术点的理解，这些理解是比较独到，可以学到不一样的思路。
在这里插入图片描述
在这里插入图片描述

四、AIGC视频教程合集

观看全面零基础学习视频，看视频学习是最快捷也是最有效果的方式，跟着视频中老师的思路，从基础到深入，还是很容易入门的。

在这里插入图片描述

五、实战案例

纸上得来终觉浅，要学会跟着视频一起敲，要动手实操，才能将自己的所学运用到实际当中去，这时候可以搞点实战案例来学习。
在这里插入图片描述

若有侵权，请联系删除

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：/a/801667.html

如若内容造成侵权/违法违规/事实不符，请联系我们进行投诉反馈qq邮箱809451989@qq.com，一经查实，立即删除！

相关文章

AI+折叠屏，荣耀的创新周期论

AI+折叠屏，荣耀的创新周期论

文｜刘俊宏 编｜王一粟 2024年，AI和折叠屏的演进路线，已经成为了手机行业的共识。 首先，手机市场的新增量已经被折叠屏所接管。据Counterpoint Research数据显示，中国2024年第一季度折叠屏手机销量同比增长…
阅读更多...
3、计算机网络通信及其编程：深入Linux内核理解epoll

3、计算机网络通信及其编程：深入Linux内核理解epoll

Linux网络 IO模型 同步和异步，阻塞和非阻塞 同步和异步 同步和异步关注的是调用方是否主动获取结果。 同步：同步的意思就是调用方需要主动等待结果的返回。异步：异步的意思就是不需要主动等待结果的返回，而是通过其他手段比如…
阅读更多...
为什么用ssh连接服务器会出现错误？

为什么用ssh连接服务器会出现错误？

当我们尝试通过 SSH 连接到服务器时可能会发生许多情况，比如出现“连接被拒绝”的错误。虽然导致 SSH 连接错误的原因可能有多种，但以下是其中常见的几种： 1.您的 SSH 服务已关闭。 2.您的凭证有误。 3.您尝试使用的端口已关闭。 4.您的服务器…
阅读更多...
SQL 中的 EXISTS 子句：探究其用途与应用

SQL 中的 EXISTS 子句：探究其用途与应用

目录 EXISTS 子句简介语法 EXISTS 与 NOT EXISTSEXISTS 子句的工作原理实际应用场景场景一：筛选存在关联数据的记录场景二：优化查询性能 EXISTS 与其他 SQL 结构的比较EXISTS vs. JOINEXISTS vs. IN 多重 EXISTS 条件在 UPDATE 语句中使用 EXISTS常见问题…
阅读更多...
部署kafkamanager

部署kafkamanager

1，检查kafka的版本 到lib下查看 libs/kafka-clients-0.11.0.3.jar kafka的版本 0.11 2，下载kafkamanager 链接： https://pan.baidu.com/s/1qYifoa4 密码：el4o 3，解压后更改该conf下conf/application.conf 中zkhosts …
阅读更多...
六、Accelerate + Deepspeed

六、Accelerate + Deepspeed

帮up宣传一下，优质up值得信赖！ B站UP：你可是处女座啊 文章目录 理论知识DP&DDPDeepspeed介绍注意事项多机多卡 实战ddp_accelerate.py原先显存DDP 运行Deepspeed 运行方式一-zero2方式二 -zero2方式一 -zero3方式二 -zero3 ddp_trainer…
阅读更多...
在 Windows 上运行 Linux：WSL2 完整指南（一）

在 Windows 上运行 Linux：WSL2 完整指南（一）

系列文章目录 在 Windows 上运行 Linux：WSL2 完整指南（一）🚪 在 Windows 上运行 Linux：WSL2 完整指南（二） 文章目录 系列文章目录前言一、什么是 WSL？1.1 WSL 的主要特性1.2 WSL 的…
阅读更多...
[WUSTCTF2020]level4题解 入土为安的第三天

[WUSTCTF2020]level4题解 入土为安的第三天

二叉树 Practice my Data Structure code..... Typing....Struct.....char....*left....*right............emmmmm...OK! Traversal! Traversal type 1:2f0t02T{hcsiI_SwA__r7Ee} Traversal type 2:20f0Th{2tsIS_icArE}e7__w Traversal type 3: //type3(&x[22]); No w…
阅读更多...
Schematics，一个牛逼的python库用于数据验证和转换的库

Schematics，一个牛逼的python库用于数据验证和转换的库

目录 什么是Schematics？ 为什么使用Schematics？ 安装Schematics 定义模式 验证数据 自定义验证 转换数据 结语 什么是Schematics？ 在Python的世界中，Schematics是一个用于数据验证和转换的库。它通过定义数据结构的模式(…
阅读更多...
Windows搭建RTMP视频流服务器

Windows搭建RTMP视频流服务器

参考了一篇文章，见文末。 博客中nginx下载地址失效，附上一个有效的地址： Index of /download/ 另外，在搭建过程中，遇到的问题总结如下： 1 两个压缩包下载解压并重命名后，需要 将nginx-rtmp…
阅读更多...
轻松搞定GIS场景编辑，这款免费工具你一定要试试

轻松搞定GIS场景编辑，这款免费工具你一定要试试

如果你正苦恼于如何搞定GIS场景编辑，不妨来试试这款免费可视化工具——山海鲸可视化。经过本人测试，这款软件在GIS场景编辑上完全可以做到“零代码”操作，即使没有任何编程技能也可以在三维GIS世界中如鱼得水。现在，让我们一起来看…
阅读更多...
美团收银Android一面凉经(2024)

美团收银Android一面凉经(2024)

美团收银Android一面凉经(2024) 笔者作为一名双非二本毕业7年老Android, 最近面试了不少公司, 目前已告一段落, 整理一下各家的面试问题, 打算陆续发布出来, 供有缘人参考。今天给大家带来的是《美团收银Android一面凉经(2024)》。 应聘岗位: 美团餐饮PaaS平台Android开发工程师…
阅读更多...
Docker 基本管理及部署

Docker 基本管理及部署

目录 1.Docker概述 1.1 Docker是什么？ 1.2 Docker的宗旨 1.3 容器的优点 1.4 Docker与虚拟机的区别 1.5 容器在内核中支持的两种技术 1.6 namespace的六大类型 2.Docker核心概念 2.1 镜像 2.2 容器 2.3 仓库 3.安装Docker 3.1 查看 docker 版本信息 4.…
阅读更多...
【嵌入式DIY实例-ESP8266篇】-LCD ST7789显示DS1307 RTC时间数据

【嵌入式DIY实例-ESP8266篇】-LCD ST7789显示DS1307 RTC时间数据

LCD ST7789显示DS1307 RTC时间数据 文章目录 LCD ST7789显示DS1307 RTC时间数据1、硬件准备与接线2、代码实现本文将介绍如何使用 ESP8266 NodeMCU 板和 DS1307 RTC 集成电路构建简单的实时时钟和日历 (RTCC)，其中时间和日期打印在 ST7789 TFT 显示模块上。 ST7789 TFT 模块包…
阅读更多...
C# 基于共享内存实现跨进程队列

C# 基于共享内存实现跨进程队列

C# 进程通信系列 第一章 共享内存 第二章 共享队列（本章） 文章目录 C# 进程通信系列前言一、实现原理1、用到的主要对象2、创建共享内存3、头部信息4、入队5、出队6、释放资源 二、完整代码三、使用示例1、传输byte[]数据2、传输字符串3、传输对象 总结…
阅读更多...
持续集成03--Jenkins的安装与配置

持续集成03--Jenkins的安装与配置

前言 在持续集成/持续部署（CI/CD）的实践中，Jenkins作为一个开源的自动化服务器，扮演着至关重要的角色。本篇“持续集成03--Jenkins的安装配置”将带您走进Jenkins的世界，深入了解如何在Linux环境中安装并配置Jenkins。…
阅读更多...
window下安装go环境

window下安装go环境

一、go官网下载安装包 官网地址如下：https://golang.google.cn/dl/ 选择对应系统的安装包，这里是window系统，可以选择zip包，下载完解压就可以使用 二、配置环境变量 这里的截图配置以win11为例 我的文件解压目录是 D:\Software…
阅读更多...
web自动化测试selenium的基本使用

web自动化测试selenium的基本使用

目录 初始化浏览器并打开网页 定位网页元素 定位的方法 模拟键盘操作 模拟鼠标操作 xpath方法 xpath结点 路径表达式 轴 selenium是一个很流行的自动化测试的库，主要用于模拟浏览器的运行，是web应用测试的工具。 在使用selenium时，…
阅读更多...
C++基础篇（2）

C++基础篇（2）

目录 前言 1.缺省参数 2.函数重载 2.1函数重载的基本规则 ​编辑2.2注意事项 2.3 重载解析（Overload Resolution）--补充内容 3.引用 3.1引用的概念和定义 3.2引用的特性 3.3引用的使用 3.4const引用 4.指针和引用的关系 结束语 前言 上节小编…
阅读更多...
16_Shell好用工具：sed

16_Shell好用工具：sed

16_Shell好用工具：sed 零、语法解析 sed [选项参数] [模式匹配/sed命令] 文件 命令说明aadd，新增iinsert，新增cchange，修改ssubstitute，替换ddelete，删除pprint, 打印 通常与 -n 连用 一、增（…
阅读更多...
最新文章

Copyright @ 2022~2023