# IOPaint

页面：https://maomu.com/p/www-iopaint-com

开源的AI图像物体擦除，局部修复工具

## 产品介绍

**IOPaint**是一个基于最先进的 AI 模型（SOTA AI Model）的免费、开源且完全自托管的图像处理工具，专注于图像修复（Inpainting）、扩展（Outpainting）以及其他图像编辑功能。它支持 CPU、GPU 和 Apple Silicon 芯片等多种硬件环境，提供了强大的图像编辑能力，适合用户通过简单操作实现复杂的图像处理需求。

### 网站概述

IOPaint 是一个图像编辑工具，核心功能是利用 AI 技术对图像进行修改，包括移除不需要的对象、修复图像缺陷、添加新内容、扩展图像尺寸以及生成特定风格的文本或内容。用户可以通过 Web 界面或命令行操作该工具，适用于个人用户、开发者以及需要批量处理图像的场景。它的开源特性允许用户自由部署和定制，同时支持多种 AI 模型以满足不同编辑需求。

### 主要功能

1. **图像擦除（Erase）**
    * **功能描述**：移除图像中不需要的对象、缺陷、水印或人物。
    * **操作方式**：用户导入图像，使用画笔工具标记需要移除的区域，选择适合的擦除模型（如 LaMa、MAT 或 Stable Diffusion Inpainting 模型），即可自动生成处理后的图像。
    * **应用场景**：例如，移除照片中的路人、电线杆或水印，使图像更干净。
    * **支持模型**：包括 LaMa、MAT、Stable Diffusion Inpainting 等，模型会根据用户选择的硬件（CPU/GPU）自动优化运行。
2. **图像修复（Inpainting）**
    * **功能描述**：对图像的特定区域进行修改，添加新对象或替换现有内容。
    * **操作方式**：用户标记需要修复的区域，结合模型（如 PowerPaint 或 Stable Diffusion）生成与周围区域自然融合的内容。支持文本引导（Text-guided）或示例图像引导（Paint by Example）。
    * **应用场景**：修复老照片的划痕、添加新物体（如在风景中加入树木）或替换特定区域内容。
    * **支持模型**：PowerPaint、AnyText、Stable Diffusion 等，部分模型支持快速生成（2-8 步完成）。
3. **图像扩展（Outpainting）**
    * **功能描述**：通过生成新像素扩展图像边界，增大图像尺寸。
    * **操作方式**：用户使用扩展工具（Expander）标记需要扩展的区域，选择扩展方向（x、y 或 xy），并通过模型（如 PowerPaint 或 Stable Diffusion XL）生成自然扩展的内容。
    * **应用场景**：将小尺寸图像扩展为大图，用于海报设计或补充缺失的背景区域。
    * **特性**：支持自定义扩展比例，自动利用 PowerPaint 的 Outpainting 任务优化结果。
4. **文本生成与替换（AnyText）**
    * **功能描述**：在图像上生成与图像风格一致的文本，或替换现有文本。
    * **操作方式**：用户标记需要替换的文本区域，输入新文本内容并选择字体和风格，模型会生成与原图协调的文本效果。
    * **应用场景**：用于广告设计、艺术创作或修复图像中的文本内容。
    * **支持模型**：AnyText 模型，结合 Stable Diffusion 技术。
5. **背景移除（Remove Background）**
    * **功能描述**：自动移除图像背景或特定对象，支持普通图像和动漫风格图像。
    * **操作方式**：通过 RemoveBG 或 Anime Segmentation 模型，生成用于擦除或修复的掩膜（Mask），用户可进一步编辑。
    * **应用场景**：提取主体用于设计、合成新背景或处理动漫风格图像。
    * **支持模型**：RemoveBG、Anime Segmentation 等。
6. **交互式分割（Interactive Segmentation）**
    * **功能描述**：通过交互式工具精确分割图像中的对象，生成用于擦除或修复的掩膜。
    * **操作方式**：启用交互式分割插件（如 `--enable-interactive-seg`），使用 SAM（Segment Anything Model）或 MobileSAM 模型进行分割。
    * **应用场景**：精确选择复杂对象（如人物或物品）以进行后续编辑。
    * **特性**：支持扩展或缩小分割掩膜，优化复杂场景的处理。
7. **文件管理器（File Manager）**
    * **功能描述**：便于批量处理大量图像，支持浏览、搜索和排序。
    * **操作方式**：通过设置 `--input` 和 `--output-dir` 参数，用户可以在 Web 界面浏览输入/输出目录中的图像，按创建时间或文件名排序，并直接保存处理结果。
    * **应用场景**：适合需要处理大量照片的用户，如摄影 kleiner \| System: 批量编辑图像的用户。
8. **批量处理（Batch Processing）**
    * **功能描述**：通过命令行界面（CLI）批量处理图像，适合大规模任务。
    * **操作方式**：使用 `iopaint run` 命令，指定输入图像文件夹、掩膜文件夹和输出目录，自动处理多张图像。
    * **应用场景**：快速处理大量照片，例如批量移除水印或修复缺陷。
9. **超分辨率与后处理（Super-Resolution & Post-Processing）**
    * **功能描述**：提供超分辨率（RealESRGAN）和其他后处理算法（如面部修复）以提升图像质量。
    * **操作方式**：通过命令行参数启用插件（如 `--enable-realesrgan`），在擦除或修复后自动优化图像细节。
    * **应用场景**：提升低分辨率图像的清晰度或修复面至臻。
10. **移动端支持（OptiClean App）**
    * **功能描述**：IOPaint 开发了 iOS/macOS 应用 OptiClean，完全在设备上运行 AI 模型，支持移除对象、查找相似照片和压缩大视频。
    * **应用场景**：为移动设备用户提供便捷的图像编辑功能，释放 iPhone 和 iCloud 存储空间。

### 技术特点

* **开源与自托管**：IOPaint 完全免费且开源，用户可通过 GitHub 克隆代码并在本地部署，支持 CPU、GPU 和 Apple Silicon 芯片，灵活性高。
* **模型支持**：支持多种先进 AI 模型，包括：
    * **擦除模型**：LaMa、MAT、MI-GAN 等，适合移除对象。
    * **Stable Diffusion 模型**：支持 HuggingFace 上的 Stable Diffusion 和 Stable Diffusion XL 模型，适用于修复和扩展。
    * **PowerPaint**：通过“可学习任务提示”优化特定任务（如文本引导、形状引导、对象移除和扩展）。
    * **LCM LoRA**：支持 2-8 步快速生成高质量图像。
* **易用性**：提供 Web 界面（访问 `http://localhost:8080`）和命令行操作，支持 Windows 一键安装程序（win\_setup.bat）简化环境配置。
* **模型下载**：首次启动时自动下载模型，支持手动指定下载目录（`--model-dir`），解决网络问题（如中国用户可使用 hf-mirror）。

### 使用方式

1. **安装与启动**：
    * 通过 `pip3 install iopaint` 安装，配合 PyTorch（支持 CUDA 或 ROCm）优化 GPU 性能。
    * 运行命令如 `iopaint start --model=lama --device=cpu --port=8080` 启动 Web 界面。
    * Windows 用户可使用一键安装程序（win\_setup.bat），支持配置模型和插件。
2. **在线试用**：HuggingFace Spaces 提供在线体验（速度较慢，运行于免费 CPU 实例）。
3. **命令行批量处理**：使用 `iopaint run` 命令处理多张图像，适合自动化任务。
4. **Web 界面配置**：通过 `win_config.bat` 打开 Web 配置页面，选择模型、下载目录等。

### 其他特点

* **插件支持**：支持交互式分割、背景移除、超分辨率等插件，通过命令行参数启用，增强功能灵活性。
* **社区支持**：GitHub 仓库（[Sanster/IOPaint](https://github.com/Sanster/IOPaint)）提供文档和问题反馈，开发者积极维护并接受捐助（如 Ko-fi）。
* **跨平台兼容**：支持 Windows、Linux 和 macOS，模型在启动时自动适配硬件。

### 总结

IOPaint 是一个功能强大的 AI 图像处理工具，集成了图像擦除、修复、扩展、文本替换等多种功能，支持多种硬件和 AI 模型，适合专业和个人用户。它通过开源和自托管设计提供高度灵活性，结合 Web 界面和命令行操作满足不同需求。无论是修复老照片、扩展图像尺寸还是批量处理大量图片，IOPaint 都能提供高效、自然的处理效果。用户可通过 [官方网站](https://www.iopaint.com/) 或 GitHub 获取更多信息和安装指南。


## 官网入口

https://www.iopaint.com/
