Generative AI for Krita - Krita 生成式 AI 插件
本文翻译整理自：https://github.com/Acly/krita-ai-diffusion
文章目录
- 一、关于 Generative AI for Krita
- 相关链接资源
- 关键功能特性
- 二、安装指南
- 系统要求
- 硬件支持
- 安装步骤
- 可选配置
- 自定义 ComfyUI 服务器
- 对象选区工具（语义分割）
- 三、作品展示
- 四、技术架构
一、关于 Generative AI for Krita
这是一个为 Krita 设计的插件，可在图像绘制和编辑工作流中使用生成式 AI 技术。如需直观介绍，请访问 https://www.interstice.cloud
本项目的主要目标：
- 精确控制：纯文本生成图像具有不可预测性。为实现预期效果，您可以将生成限制在选区范围内，通过不同强度优化现有内容，将文本提示聚焦于图像区域，并使用参考图、草图、线稿、深度图等引导生成过程。
- 工作流整合：多数图像生成工具过度关注 AI 参数。本项目旨在成为无缝集成工具，与 Krita 图像编辑流程协同工作。您可自由绘制、上色、编辑和生成，无需担忧分辨率等技术细节。
- 本地开源：我们致力于开源模型生态。可自定义预设、导入自有模型，全部在本地硬件运行。也提供云端生成选项，无需高配置即可快速体验。
观看视频演示：https://youtu.be/Ly6USRwTHe0
相关链接资源
- github : https://github.com/Acly/krita-ai-diffusion
- 官网：https://www.interstice.cloud
- 官方文档：https://github.com/Acly/krita-ai-diffusion/wiki
- Demo/在线试用：https://youtu.be/Ly6USRwTHe0
- Community : https://discord.gg/pWyzHfHHhU
- Blog : https://www.interstice.cloud
- FAQ : https://github.com/Acly/krita-ai-diffusion/wiki/Common-Issues
- ✨功能特性 | ⭳ 下载 | 🛠️安装指南 | 🎞️ 视频演示 | 🖼️作品集 | 📖Wiki文档 | 💬讨论区 | 🗣️Discord社区
关键功能特性
- 局部重绘：通过选区实现生成填充、扩展、添加或移除对象
- 实时绘画：AI 实时解析画布内容提供即时反馈 观看视频
- 高清修复：支持 4K/8K 级图像放大与增强，避免内存溢出
- 模型支持：兼容 Stable Diffusion 1.5 和 XL 版本，部分支持 SD3
- 控制网络：支持涂鸦、线稿、边缘检测、姿态、深度图、法线图、语义分割等
- 图像适配：参考图风格迁移、构图转移、人脸替换
- 分区控制：通过图层定义图像区域并分配独立文本描述
- 任务队列：在工作时排队或取消生成任务
- 历史记录：随时预览结果并回溯历史生成记录与提示词
- 智能预设：多功能默认风格预设简化操作界面
- 深度定制：创建自定义预设 - 包括模型检查点、LoRA、采样器等
二、安装指南
查看详细 插件安装指南，以下是简明技术版说明：
系统要求
- 支持 Windows、Linux、MacOS
- Linux/Mac 用户：需预装 Python + venv
- 推荐版本：3.11 或 3.10
- 通常可通过包管理器安装，例如
apt install python3-venv
硬件支持
建议使用至少 6GB 显存的 NVIDIA 显卡以获得最佳本地运行效果。硬件不足可能导致生成时间过长或内存错误！
| 设备类型 | 支持情况 |
|---|---|
| NVIDIA GPU | 通过 CUDA 完全支持 |
| AMD GPU | 有限支持，Windows 用 DirectML，Linux 需 ROCm（需手动安装） |
| Apple Silicon | 社区支持，macOS 通过 MPS 运行 |
| CPU | 支持但速度极慢 |
安装步骤
1、首先安装 Krita（要求版本 ≥5.2.0）
2、下载插件
3、启动 Krita 并通过 工具 ▸ 脚本 ▸ 从文件导入 Python 插件… 安装
- 选择下载的 ZIP 文件
- ⚠ 这将删除旧版插件。若从 1.14 或更早版本升级，请阅读 更新指南
- 更多选项参考 Krita 官方文档
4、重启 Krita 并新建或打开图像文件
5、通过 设置 ‣ 面板 ‣ AI 图像生成 调出插件面板
6、在面板点击"配置"开始本地服务器安装或连接
[!NOTE]
遇到问题请查阅 常见问题解答
可通过 讨论区、Discord 或 提交 issue 寻求帮助。注意：官方 Krita 渠道不提供本插件支持！
可选配置
自定义 ComfyUI 服务器
插件使用 ComfyUI 作为后端。除自动安装外，您可手动安装或使用现有环境。若在启动 Krita 前本地服务器已运行，插件将自动尝试连接。此方式也支持远程服务器。
请确认 必备扩展和模型清单 以确保兼容性。
对象选区工具（语义分割）
如需快速选择图像中的对象，可安装 独立插件 获得 AI 辅助分割功能。
三、作品展示
_分区实时绘画
观看视频: https://youtu.be/PPxOE9YH57E
使用真实系模型对照片进行局部重绘
对 AI 生成图像进行内容添加与优化
迭代优化图像局部细节
通过姿态向量层控制角色姿势
点击观看视频
控制层示例：涂鸦/线稿/深度图/姿态
四、技术架构
- 图像生成：基于 Stable Diffusion
- 扩散后端：采用 ComfyUI
- 局部重绘：集成 ControlNet 和 IP-Adapter
伊织 xAI 2025-04-19（六）