技术文章

Qwen-Image-Edit 发布:精准图像与文字编辑

了解 Qwen-Image-Edit 如何处理语义转换、精准外观编辑、双语文字修改及迭代式图像优化。

Qwen Image Team

预计阅读时间
约 4 分钟
字数
约 709 字

无需重建已有内容即可编辑图像

创意工作很少在第一张图就结束。团队需要移除对象、更改文案、探索新风格,或修正某一细节而不丢失其余构图。Qwen-Image-Edit 将这些修改整合到基于提示词的工作流中,构建于 20B Qwen-Image 模型之上。

不仅如此,Qwen-Image-Edit 通过将输入图像同时馈送到 Qwen2.5-VL 进行视觉语义理解和 VAE Encoder 进行视觉外观控制,集两者之长。这种双管齐下的方法开辟了编辑可能性的新维度,从细微调整到彻底转换。

该模型将用于视觉语义理解的 Qwen2.5-VL 与用于外观控制的 VAE Encoder 相结合,同时支持广泛的创意转换和局部更改。

核心能力

Qwen-Image-Edit 专注于三大实际编辑需求:

  • 语义与外观编辑: 添加或移除元素的同时保留周围图像,或进行更广泛的更改,如风格迁移、物体旋转和角色开发。
  • 精准文字编辑: 添加、删除或修改中英文文字,同时保留原始字体、大小和样式。
  • 迭代优化: 通过链式定向编辑来修正各个区域,无需重新开始整个构图。

查看编辑模式的实际效果

让我们深入了解 Qwen-Image-Edit 的独特之处。以下仅是其强大能力的部分示例。

语义编辑:实现更广泛的转换

语义编辑的核心是在保留图像原始含义和风格的同时修改内容。为了展示这一点,让我们带着我们心爱的吉祥物——水豚,开启一段创意之旅。

Capibara

如您所见,尽管编辑后的图像与原始图像差异巨大,但水豚的角色特征始终保持一致。这种强大的语义编辑能力使得创建多样化且原创的 IP 内容变得轻而易举。

我们甚至基于水豚吉祥物创作了一套 MBTI 主题的表情包,展示了创意表达的无限可能。

MBTI meme series

新视角合成:呈现全新角度

Qwen-Image-Edit 还能生成物体的新视角,让您从不同角度观察它们。它可以将物体旋转 90 度,甚至旋转完整的 180 度,展示物体的背面。

Viewpoint transformation 90 degrees

Viewpoint transformation 180 degrees

风格迁移:探索视觉可能性

借助 Qwen-Image-Edit,您可以轻松将任何人像转换为各种艺术风格,例如标志性的吉卜力工作室风格。这对于创建自定义头像或只是用照片来娱乐都非常适合。

Style transfer

外观编辑:实现局部精准更改

外观编辑的核心是在不影响图像其余部分的情况下,对特定区域进行精准更改。Qwen-Image-Edit 在这方面表现出色,允许您以惊人的细节添加、移除或修改元素。

例如,您可以为场景添加一个招牌,Qwen-Image-Edit 甚至会生成相应的倒影。

Adding a signboard

您还可以移除发丝等精细细节,或更改单个字母的颜色。

Removing fine strands of hair

Modifying text color

从更换背景到替换服装,可能性无穷无尽。

Modifying backgrounds

Modifying clothing

文字编辑:打造双语创意素材

得益于对文字渲染的深度理解,Qwen-Image-Edit 让图像中的文字编辑变得轻而易举。无论您使用英文还是中文,都可以对标题、海报甚至细小复杂的文字元素进行精准修改。

Editing English text 1

Editing English text 2

Editing Chinese posters

链式编辑:逐步优化

有时,获得完美结果需要多次尝试。借助 Qwen-Image-Edit,您可以使用链式编辑方法逐步修正错误并优化图像,直到达到您想要的效果。

以下是我们使用链式编辑来修正 Qwen-Image 生成的书法作品的示例:

Calligraphy artwork

通过绘制边界框并提供具体指令,我们能够逐步修正字符,直到达到最终的完美版本。

Correcting characters

Fine-tuning character

通过这种链式逐步方法,您可以在保留图像中较好部分的同时修正单个字符错误。

Final version 1

开始您的第一次编辑

选择一张清晰的源图像,描述一个主要更改。说明哪些内容应保持不变,检查结果,然后使用第二个定向提示词来处理剩余的细节。访问 Qwen Image Generator 并选择 Image Editing 开始。

相关文章

    Qwen-Image-Edit 发布:精准图像与文字编辑