Paint by Example(CVPR 2023):基于示例的扩散图像编辑
会议:CVPR 2023
发表日期:2022/11/23
资料加入日期:2026-04-14
一句话结论
这篇工作把“给一个参考示例再做编辑”明确推成独立路线,补上了文本指令之外的 exemplar-based image editing 分支。
问题定义
它要解决的是仅靠文本往往不足以精确表达目标外观的问题。对当前知识库来说,它补的是 image-editing 早期从文本指令走向“参考图驱动编辑”的关键节点。
方法概述
Paint by Example 将参考示例图像作为编辑条件输入,让扩散模型根据示例而不是纯文本来完成图像局部或整体修改,强调 exemplar-based image editing。
关键发现
- 它说明图像编辑很早就开始分化成多种控制接口,而不是只有 instruction-based editing 一条线。
- 它补强了统一生成-编辑主线里的一个现实需求:用户往往更容易给示例,而不是写精确 prompt。
- 它也为后续对象级定制、局部控制和多模态编辑接口提供了前史。
局限或疑问
- 示例驱动编辑天然依赖参考图质量与对齐程度。
- 它更适合外观参照明确的场景,不一定覆盖开放式复杂语义编辑。
- 它是接口扩展锚点,不代表统一模型已经吸收这类能力。
原始链接
- https://arxiv.org/abs/2211.13227
- https://arxiv.org/pdf/2211.13227
相关页面
- topics/image-editing
- topics/image-generation
- entities/unified-image-generation-editing
- questions/question-will-unified-image-models-sustain-their-advantage
备注
Paint by Example 在这套库里的作用,是把图像编辑主线中的 exemplar-based control 补成明确分支。