【AI绘画】全部模型种类总结 / 使用方法 / 简易训练指导——魔导绪论
大家好，我是辉哥。干了25年IT，自己创过业，现在一头扎进AI里折腾。最近好多朋友问我：“辉哥，AI绘画的模型到底咋回事？一堆英文缩写看得我头大。”别急，今天咱们不整那些虚头巴脑的术语，就用大白话把这事儿捋清楚。你就把AI绘画想象成开一家“数字画室”，模型就是里面的画师和工具。搞懂了它们，你也能轻松上手。
一、 模型种类：到底有哪些“画师”？
市面上AI绘画模型五花八门，但核心就分三大类。我用开餐馆的例子给你打个比方，保证秒懂：
- Checkpoint（大模型/底模）：相当于“主厨的拿手菜谱”。它决定了画面的基础风格，比如是写实照片、二次元动漫，还是油画水彩。常见的有SD1.5、SDXL、Flux等。你选错底模，就像让川菜厨师硬做日料，怎么调都差点意思。
- LoRA（小模型/插件）：相当于“特色调料包”。它不能独立干活，必须依附于大模型。比如你想让AI画出“赛博朋克风”或者“你的专属宠物”，就加载对应的LoRA。它体积小、加载快，是现在最流行的玩法。
- 辅助工具（ControlNet/VAE等）：相当于“尺子、调色盘和滤镜”。ControlNet帮你精准控制构图（比如指定人物姿势、线条轮廓）；VAE负责让颜色更鲜艳、细节更清晰。没有它们，AI容易“放飞自我”。
| 模型类型 | 生活比喻 | 核心作用 | 常见代表 |
|---|---|---|---|
| Checkpoint（底模） | 主厨菜谱 | 定风格、定画质 | SD1.5, SDXL, Flux |
| LoRA（插件） | 特色调料 | 加风格、加角色 | 二次元LoRA, 真人写实LoRA |
| ControlNet | 绘图尺子 | 控姿势、控构图 | Canny, OpenPose, Depth |
| VAE | 调色滤镜 | 修颜色、清细节 | vae-ft-mse-840000 |
二、 使用方法：零基础怎么一步步出图？
很多小白卡在第一步：不知道从哪下手。我当年刚接触时也是对着满屏参数发呆。其实只要掌握“四步走”，新手也能一天出几十张图。我习惯把提示词写成结构化格式，这样不容易漏掉关键信息：
主体描述 + 细节特征 + 环境背景 + 光影氛围 + 艺术风格 + 画质词
示例：一个戴眼镜的程序员，坐在堆满代码的电脑前，窗外是下雨的东京夜景，赛博朋克风格，电影级光照，8k分辨率，细节丰富第一步：选对“画室”软件。本地电脑配置好（显卡至少4G显存），装个Stable Diffusion WebUI；嫌麻烦就用在线平台（比如Liblib、吐司），开箱即用，不用折腾环境。
第二步：加载底模。去模型网站下载你喜欢的Checkpoint，放进软件的`models/Stable-diffusion`文件夹。重启软件，下拉菜单里就能选到了。记住，新手先别碰SDXL，先用SD1.5，资源多、教程全。
第三步：写提示词（Prompt）。别怕英文，用中文翻译软件转一下就行。公式很简单：主体 + 细节描述 + 环境/光影 + 风格词。比如：“一个戴眼镜的程序员，坐在堆满代码的电脑前，窗外是下雨的东京夜景，赛博朋克风格，电影级光照”。
第四步：调整参数并生成。采样器选`DPM++ 2M Karras`，步数`20-30`，CFG`7`。点击生成，如果手多、脸崩，别慌，多抽几次卡，或者加个ControlNet锁住姿势。AI绘画就是“调参+玄学”，多试几次手感就来了。
三、 简易训练指导：怎么让AI画出“你的风格”？
大模型再强，也画不出你自家猫的样子，或者你公司独有的IP形象。这时候就需要“训练LoRA”。别被“训练”两个字吓到，现在平台早就傻瓜化了，跟着做就行：
- 1. 准备素材：找20-30张同一主题的高清图（比如你的产品、你的脸、你的画风）。图片要干净、角度多样，别全是自拍大头照。
- 2. 打标签（Caption）：用自动打标工具（如WD1.4 Tagger）跑一遍，把不相关的词删掉，保留核心特征。比如画猫，标签里要有“猫、长毛、蓝眼睛”，去掉“草地、阳光”这种背景词。
- 3. 上传训练：把图片打包上传到训练平台（如Liblib、秋叶整合包自带训练器）。设置基础参数：Epoch（训练轮数）设10-15，Batch size设4，学习率默认即可。点“开始训练”，等个把小时就完事。
- 4. 测试微调：训练完加载LoRA，权重设0.7-0.8。如果太像原图，调低权重；如果特征不明显，调高。记住，训练不是越久越好，过拟合了AI就只会死记硬背。
四、 辉哥的实战心里话
干了这么多年IT和创业，我最大的感悟是：别在工具上内耗，先跑通闭环。AI绘画这行，参数天天变，今天流行SD3，明天可能出新架构。你死磕底层原理，不如先学会用现成的模型把图出出来。我带团队做产品时也是，MVP（最小可行性产品）跑通了，再慢慢优化。技术只是杠杆，撬动的是你的创意。
另外，提示词不是魔法咒语，而是沟通语言。AI不懂你的“意境”，你得把它当成一个听话但死板的实习生。你描述得越具体，它干得越漂亮。遇到翻车，别骂AI，先检查是不是提示词冲突，或者采样步数不够。我刚开始练的时候，一张图抽了50次才出满意的，后来发现是CFG值设太高导致画面过饱和，调回7就顺了。
最后送大家一句话：AI绘画的门槛早就被踩平了，现在拼的是审美和创意。模型只是笔，画什么、怎么画，还得靠你脑子里的点子。多练、多存图、多复盘，三个月后你绝对能甩开90%的跟风者。有问题随时在评论区留言，辉哥看到必回。咱们下期见！
关于我：辉哥，25年IT老兵，8年软件公司创业狗。目前在学AI，欢迎交流。
关注公众号：辉哥学AI