这次我们来看一个基于《明日方舟》角色“迷迭香”的AI图像生成项目。这类项目通常聚焦于利用Stable Diffusion等开源模型结合特定的角色LoRA或Checkpoint实现高质量、风格化的二次元角色图像生成。对于喜欢《明日方舟》或想学习角色定制化AI绘画的开发者来说核心价值在于能否在本地或云端低成本地复现出符合角色设定的精美图片并支持批量创作、风格测试等进阶玩法。本文将围绕“如何部署和使用一个迷迭香主题的AI绘画模型”展开重点拆解从环境准备、模型获取、到生成测试、参数优化的全流程。无论你是想快速体验角色AI绘画还是希望将其集成到自己的工具链中都可以通过以下步骤实现。1. 核心能力速览能力项说明项目类型AI图像生成文生图/图生图角色定制化核心模型基于 Stable Diffusion WebUI 或 ComfyUI搭配迷迭香角色LoRA/模型主要功能生成《明日方舟》迷迭香角色图像、多姿势/多场景变换、风格融合、高清修复推荐硬件支持NVIDIA GPU显存≥4GB可获得较好体验CPU模式可运行但速度慢显存占用根据模型分辨率、参数设置浮动通常基础生成在4-8GB之间支持平台Windows / Linux / macOS (CPU或M系列芯片)启动方式WebUI一键启动脚本、ComfyUI加载工作流、或Python API调用是否支持API是通过WebUI的API模块或自定义gradio服务是否支持批量是WebUI内置批量生成或通过脚本/API实现队列处理适合场景同人创作、头像生成、内容生产、AI绘画学习、工作流集成2. 适用场景与使用边界这个项目主要适合以下几类用户《明日方舟》爱好者与同人创作者希望快速生成迷迭香的高质量二次元图像用于非商业性质的分享、创作。AI绘画初学者/研究者希望通过一个具体的角色案例学习如何应用LoRA模型、调整提示词、控制生成细节。内容生产者需要稳定产出特定主题的配图用于视频、文章、社交媒体等。工具集成开发者希望将角色图像生成能力作为服务通过API接入自己的应用或平台。使用边界与注意事项版权与合规生成的图像基于游戏角色原型应仅用于个人学习、研究和合法的同人创作。严禁用于任何商业侵权、诽谤、色情或非法内容制作。模型来源确保使用的角色模型LoRA/Checkpoint来自可信的开源社区或创作者授权分享尊重模型作者的许可协议。隐私与肖像权本项目生成的是虚拟角色图像不涉及真实人脸。但若在“图生图”中使用他人肖像作为参考必须获得明确授权。技术局限性AI生成存在不稳定性可能产生肢体异常、细节错误等问题需要反复调试参数。3. 环境准备与前置条件在开始部署前请确保你的系统满足以下基础条件。操作系统Windows 10/11 Linux (如Ubuntu 20.04) 或 macOS (建议使用M系列芯片以获得更好性能)。Python环境Python 3.10.x这是目前Stable Diffusion WebUI等工具最兼容的版本。不建议使用3.11或更高版本可能遇到依赖冲突。包管理工具pip需更新至最新版。GPU/驱动如使用N卡NVIDIA显卡推荐GTX 1060 6G及以上。显存越大可设置的分辨率和批量大小越高。CUDA工具包版本需与PyTorch匹配。通常安装CUDA 11.8或12.1。显卡驱动更新至最新版本以确保CUDA兼容性。磁盘空间至少准备15-20GB的可用空间。用于存放基础模型约2-7GB、角色模型LoRA通常100-200MB、依赖库以及生成的图片。网络环境需要能够访问GitHub、Hugging Face等开源平台以下载代码和模型文件。4. 安装部署与启动方式我们将以最流行的Stable Diffusion WebUI (AUTOMATIC1111版)为例演示如何集成迷迭香角色模型并启动服务。4.1 获取WebUI基础框架克隆仓库打开终端Windows可用PowerShell或CMD进入你希望安装的目录。git clone https://github.com/AUTOMATIC1111/stable-diffusion-webui.git cd stable-diffusion-webui运行启动脚本Windows双击目录下的webui-user.bat文件。脚本会自动创建Python虚拟环境并安装依赖。Linux/macOS在终端中执行./webui.sh。首次运行会下载较大的基础模型如sd_xl_base_1.0.safetensors请耐心等待。4.2 获取迷迭香角色模型角色模型通常以LoRA (Low-Rank Adaptation)形式存在文件小易于加载和切换。模型下载前往CivitAI、Hugging Face等模型分享站搜索关键词如 “Arknights Mizuki LoRA” 或 “明日方舟 迷迭香 LoRA”。下载.safetensors格式的文件。放置模型将下载的LoRA文件例如mizuki_lora.safetensors放入WebUI目录下的models/Lora文件夹中。stable-diffusion-webui/ ├── models/ │ ├── Lora/ -- 迷迭香LoRA放这里 │ ├── Stable-diffusion/ -- 基础大模型放这里 │ └── ... └── ...准备基础模型确保models/Stable-diffusion/目录下有一个可用的基础检查点模型如chilloutmix_NiPrunedFp32Fix.safetensors。4.3 启动WebUI服务完成上述步骤后再次运行启动脚本 (webui-user.bat或./webui.sh)。服务启动后默认会在本地7860端口监听。成功标志终端最后出现类似Running on local URL: http://127.0.0.1:7860的日志。访问界面打开浏览器输入http://127.0.0.1:7860即可进入WebUI操作界面。启动参数调整可选 如果遇到显存不足或端口冲突可以编辑启动脚本如webui-user.bat在COMMANDLINE_ARGS变量后添加参数set COMMANDLINE_ARGS--medvram --listen --port 7890--medvram: 为中等显存优化如6-8GB显卡。--lowvram: 为低显存优化如4GB显卡。--listen: 允许局域网内其他设备访问。--port 7890: 指定服务端口为7890。5. 功能测试与效果验证服务启动后我们进入核心的功能测试环节。5.1 基础文生图测试测试目的验证基础模型和LoRA能否正确加载并生成符合迷迭香特征的图像。选择模型在WebUI左上角“Stable Diffusion checkpoint”下拉菜单中选择你的基础模型如chilloutmix。点击下方“Show extra networks”按钮切换到“Lora”标签页。你应该能看到刚才放入的mizuki_lora点击它提示词输入框会自动添加lora:mizuki_lora:1的触发词。编写提示词正向提示词描述你想要的画面。例如masterpiece, best quality, 1girl, Arknights, Mizuki (Arknights), grey hair, long hair, animal ears, cat ears, green eyes, looking at viewer, solo, white background, cute, smile 杰作最佳质量1女孩明日方舟迷迭香灰发长发兽耳猫耳绿瞳看着观众单人白色背景可爱微笑负向提示词排除不想要的元素。例如lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, ugly 低分辨率解剖结构错误手部错误文字错误缺少手指多余手指手指缺失裁剪最差质量低质量普通质量JPEG伪影签名水印用户名模糊丑陋设置生成参数采样方法 (Sampler)选择DPM 2M Karras或Euler a出图速度和质量比较均衡。采样步数 (Steps)设置为20-30。图片宽度/高度 (Width/Height)初次测试建议512x512或512x768。分辨率越高显存消耗越大。提示词引导系数 (CFG Scale)设置为7。生成批次 (Batch count)先设为1。点击生成观察终端日志和WebUI进度条。成功生成后图片会显示在右侧画廊。判断成功生成的图像主体应为灰发、猫耳、绿瞳的少女符合迷迭香的基本特征。如果特征不明显可能需要调整LoRA权重将提示词中的:1改为:0.8或:1.2进行微调。5.2 图生图与风格融合测试测试目的验证模型在参考图基础上的再创作能力以及融合不同风格LoRA的效果。切换到“图生图”标签页。上传一张参考图可以是一张迷迭香的官方立绘或同人图。重绘强度 (Denoising strength)设置为0.5-0.7。值越低越像原图值越高创意空间越大。在提示词中加入风格LoRA例如想生成水彩风格可以同时加载一个水彩风格的LoRA。提示词可能变为lora:mizuki_lora:1, lora:watercolor_style:0.7, masterpiece, best quality, 1girl, Arknights, Mizuki...点击生成观察生成结果是否在保留迷迭香特征的基础上融入了水彩画风。5.3 高清修复 (Hires. fix) 测试测试目的测试从低分辨率草图生成高分辨率细节图的能力这对产出高质量作品至关重要。在“文生图”或“图生图”标签页下方勾选“Hires. fix”选项。设置高清修复参数放大算法 (Upscaler)选择R-ESRGAN 4x或Latent。重绘幅度 (Hires steps)20。放大倍数 (Upscale by)2。放大后宽度/高度系统会根据基础分辨率自动计算。再次点击生成。这个过程会分两步先生成低分辨率图再对其进行放大和细节重绘。显存占用会显著增加。6. 接口API与批量任务WebUI内置了API功能便于集成到自动化脚本或应用中。6.1 启动API服务在启动参数中加入--api例如set COMMANDLINE_ARGS--api --listen重启WebUI后API服务即启用。6.2 调用文生图API以下是一个Python调用示例生成一张迷迭香图片并保存。import requests import json import io from PIL import Image url http://127.0.0.1:7860/sdapi/v1/txt2img payload { prompt: lora:mizuki_lora:1, masterpiece, best quality, 1girl, Arknights, Mizuki, cute cat ears, smile, white background, negative_prompt: lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, steps: 20, cfg_scale: 7, width: 512, height: 768, sampler_name: DPM 2M Karras, seed: -1, # -1表示随机种子 } headers { Content-Type: application/json } response requests.post(url, datajson.dumps(payload), headersheaders) r response.json() # 处理返回的图像base64编码 for i, img_base64 in enumerate(r[images]): image Image.open(io.BytesIO(base64.b64decode(img_base64.split(,,1)[0]))) image.save(f./output/mizuki_{i}.png) print(f图片已保存: mizuki_{i}.png)6.3 实现批量任务利用API可以轻松实现批量生成。核心是循环调用API并可以变化提示词、种子等参数。import requests import json import base64 from PIL import Image import io api_url http://127.0.0.1:7860/sdapi/v1/txt2img # 定义不同的场景或姿势 prompt_list [ ((masterpiece)), best quality, 1girl, Arknights, Mizuki, sitting in a library, reading a book, peaceful, ((masterpiece)), best quality, 1girl, Arknights, Mizuki, on battlefield, casting arts, dynamic pose, glowing eyes, ((masterpiece)), best quality, 1girl, Arknights, Mizuki, wearing casual clothes, in a cafe, smiling, ] common_negative lowres, bad anatomy, bad hands, text, error, missing fingers, extra digit, fewer digits, cropped, worst quality, low quality, normal quality, jpeg artifacts, signature, watermark, username, blurry, ugly for idx, specific_prompt in enumerate(prompt_list): full_prompt flora:mizuki_lora:1, {specific_prompt} payload { prompt: full_prompt, negative_prompt: common_negative, steps: 25, cfg_scale: 7, width: 512, height: 768, sampler_name: Euler a, seed: -1, # 每次使用随机种子获得不同结果 } print(f正在生成第 {idx1} 张图: {specific_prompt[:50]}...) try: response requests.post(api_url, jsonpayload, timeout120) r response.json() if images in r and len(r[images]) 0: img_data base64.b64decode(r[images][0].split(,,1)[0]) image Image.open(io.BytesIO(img_data)) image.save(f./batch_output/mizuki_batch_{idx}.png) print(f 成功保存: mizuki_batch_{idx}.png) else: print(f 生成失败响应: {r}) except Exception as e: print(f 请求异常: {e})7. 资源占用与性能观察了解资源占用情况有助于优化生成体验和排查问题。观察显存占用Windows打开任务管理器 - 性能 - GPU查看“专用GPU内存”。Linux使用nvidia-smi命令。启动WebUI后显存会被基础模型加载占用一部分约1-3GB。生成图片时显存占用会瞬间攀升峰值取决于分辨率、批大小和是否启用高清修复。512x512分辨率生成通常需要4-6GB启用高清修复放大2倍可能超过8GB。性能影响因素分辨率对显存和生成时间影响最大。长边超过1024需谨慎。批处理数量 (Batch size)一次生成多张图会线性增加显存占用但单张图平均时间可能减少。采样步数 (Steps)步数越多细节可能越好但生成时间线性增加。20-30步是常用范围。采样器 (Sampler)Euler a速度快DPM 2M Karras质量高但稍慢。LoRA数量同时加载多个LoRA会轻微增加显存和计算量。降低资源消耗的技巧使用--medvram或--lowvram参数启动。在WebUI设置中启用“模型缓存到GPU”等优化选项。生成时先使用低分辨率如512x512再用“高清修复”或“附加功能”中的“放大”来提升分辨率比直接生成高分辨率图更省显存。对于纯测试可以使用CPU模式启动参数加--use-cpu all但速度极慢。8. 常见问题与排查方法问题现象可能原因排查方式解决方案启动时报错提示缺少模块Python依赖未正确安装或版本冲突。查看终端错误日志通常包含具体的模块名。1. 删除venv文件夹重新运行启动脚本。2. 手动在虚拟环境中pip install缺失的包。WebUI页面打不开服务未成功启动或端口被占用。1. 检查终端是否有Running on local URL日志。2. 执行netstat -ano | findstr :7860(Win) 或lsof -i:7860(Linux/mac) 查看端口占用。1. 根据终端错误修复启动问题。2. 更换端口启动参数加--port 7890。生成图片全黑或全灰模型未正确加载或VAE不匹配。1. 检查终端加载模型时是否有错误。2. 检查“设置”-“Stable Diffusion”-“VAE”是否选择了正确的VAE或“自动”。1. 重新下载并放置模型文件。2. 尝试切换不同的VAE或下载模型对应的VAE文件放入models/VAE目录。生成的图片没有迷迭香特征LoRA未正确触发或权重太低。1. 检查提示词中是否包含lora:mizuki_lora:1。2. 在“生成”按钮下的“额外网络”面板确认LoRA已激活。1. 确保LoRA文件名与提示词中引用的一致。2. 调整LoRA权重如从:1改为:0.8或:1.2。3. 检查基础模型是否与LoRA兼容。生成时显存不足 (OOM)分辨率过高、批大小太大或模型太大。观察任务管理器中的显存峰值。1. 降低生成分辨率。2. 将批大小 (Batch size) 设为1。3. 使用--medvram/--lowvram启动。4. 尝试使用显存需求更小的模型。API调用返回错误请求参数错误、服务未以API模式启动或超时。1. 检查启动参数是否有--api。2. 查看WebUI终端日志中的API错误信息。3. 检查请求的JSON格式和字段名。1. 确保以--api模式重启WebUI。2. 使用curl或 Postman 先测试一个最简单的请求。3. 增加请求超时时间。生成速度非常慢使用了CPU模式、显卡驱动/CUDA问题、或采样器步数过高。1. 检查终端是否显示“Using CPU”。2. 检查nvidia-smi是否显示GPU正在被使用。1. 确保未使用--use-cpu参数且CUDA、PyTorch版本匹配。2. 更换更快的采样器如Euler a。3. 适当降低采样步数。9. 最佳实践与使用建议为了获得更稳定、高效的体验并规避潜在风险建议遵循以下实践环境隔离始终在Python虚拟环境或Docker容器中运行项目避免污染系统环境。模型管理建立清晰的目录结构区分基础模型、LoRA、VAE、Embedding等。定期清理不用的模型以节省磁盘空间。参数标准化为自己常用的风格建立一套参数预设WebUI支持保存预设包括采样器、步数、CFG scale、高清修复参数等提高工作效率。提示词工程分层编写先写主体角色、动作再写细节服装、发型、表情最后是画质和风格词。使用权重用(word:1.2)加强某个概念用[word:0.8]减弱。善用负面提示词一个通用的高质量负面提示词列表能显著提升出图稳定性。迭代生成不要期望一次就得到完美图片。使用“种子”固定住满意的构图然后微调提示词或重绘强度来迭代优化。版权与伦理自查生成的图片若包含可识别的特定画风应确认其是否允许商用。绝对不要生成涉及现实公众人物、侵犯他人肖像权或制作有害内容。在分享作品时如果使用了特定的LoRA模型最好注明模型作者尊重开源社区的贡献。备份与日志对于重要的批量生成任务记录所用的参数、种子和提示词。定期备份你的WebUI配置和自定义脚本。通过以上步骤你应该已经能够在本地成功部署并运行一个专属于“迷迭香”的AI图像生成环境。从基础文生图到API批量调用整个流程的核心在于理解模型、提示词和参数之间的相互作用。遇到问题时多查阅终端日志、社区论坛和模型发布页的说明大部分技术问题都有现成的解决方案。这个项目不仅是一个娱乐工具更是一个学习AIGC技术应用的绝佳切入点。建议从修改提示词、尝试不同LoRA混合开始逐步探索更复杂的ControlNet控制、自定义模型训练等进阶玩法从而真正掌握AI绘画的主动权。