ACE++：阿里巴巴开源的新一代 AI 图像生成与编辑框架

ACE++ 是由阿里巴巴开源的新一代 AI 图像生成与编辑框架，旨在通过上下文感知的内容填充技术，实现高质量的图像创作和编辑。它基于先进的扩散模型技术开发，结合了 FLUX.1-Fill-dev 技术，仅需一张输入图像即可生成与角色一致的新图像，无需进行任何训练。ACE++ 支持多种图像生成和编辑任务，包括角色一致性迁移、局部编辑、虚拟试穿等。

ACE++功能特点：

1、零训练生成：

 - 依托 FLUX.1-Fill-dev 基础模型，通过 LoRA 适配实现免训练部署。

 - 用户无需进行复杂的训练过程，即可快速生成高质量图像。

2、多模态编辑：

 - 角色换装：支持服饰、发型、配饰更换。

 - 场景重构：可以进行背景替换、物体增减。

 - 智能修复：实现瑕疵消除、画质增强。

3、语义级理解：

 - 能够解析复杂的复合指令，如“给咖啡杯添加蒸汽，放置在木质桌面”。

4、长上下文条件单元（LCU）：

 - 同时处理图像内容、文本指令和编辑区域，提升模型的通用性和灵活性。

5、动态注意力机制：

 - 在 512×512 分辨率下实现 92.3% 的特征保留率。

6、双阶段优化：

 - 基础学习阶段：使用任务数据和文本到图像模型的 0-ref 任务对模型进行预训练。

 - 微调阶段：对预训练模型进行微调，以支持 ACE 中定义的所有任务的一般指令。

ACE++应用场景：

1、虚拟模特换装：

 - 输入服装平铺图，生成多角度展示，支持肤色、体型、场景动态调整。

2、影视角色设计：

 - 实现跨风格转换（如现实风格到迪士尼或赛博朋克风格），保持角色特征连续性。

3、智能图像修复：

 - 老照片的 4K 级分辨率重建，复杂遮挡物体的无痕移除。

4、品牌 Logo 嵌入：

 - 为图像添加或替换品牌 Logo，满足广告和宣传需求。

5、海报编辑：

 - 快速生成或修改海报，包括文字、图像、背景等元素的添加、删除或调整。

6、体验与资源：

 - 在线体验：ACE++ 提供在线演示，用户可以上传图像并输入指令进行测试。

 - 模型下载：相关的模型文件可在 HuggingFace 或阿里官方 GitHub 仓库下载。

 - ComfyUI 支持：ACE++ 团队提供了与 ComfyUI 结合的 LORA 模型，用户可在 ComfyUI 中体验图像角色一致修改和编辑。

ACE++项目网址：

1、项目主页：https://ali-vilab.github.io/ACE_plus_page/

2、GitHub 仓库：https://github.com/ali-vilab/ACE_plus

3、HuggingFace 模型库：https://huggingface.co/ali-vilab/ACE_Plus

标签：