当前位置: 首页 > news >正文

【阿里拥抱开源】Qwen Image团队开源图像分解模型——Qwen-Image-Layered

简介

我们很高兴推出Qwen-Image-Layered模型,该模型能够将图像分解为多个RGBA图层。这种分层表示解锁了内在可编辑性:每个图层可以独立操作而不影响其他内容。同时,这种分层表示天然支持高保真基础操作——例如调整大小、重新定位和重新着色。通过将语义或结构组件物理隔离到不同图层中,我们的方法实现了高保真且一致的编辑。

快速开始

  1. 确保您的transformers版本≥4.51.3(支持Qwen2.5-VL)
  2. 安装最新版diffusers
pip install git+https://github.com/huggingface/diffusers pip install python-pptx
fromdiffusersimportQwenImageLayeredPipelineimporttorchfromPILimportImage pipeline=QwenImageLayeredPipeline.from_pretrained("Qwen/Qwen-Image-Layered")pipeline=pipeline.to("cuda",torch.bfloat16)pipeline.set_progress_bar_config(disable=None)image=Image.open("asserts/test_images/1.png").convert("RGBA")inputs={"image":image,"generator":torch.Generator(device='cuda').manual_seed(777),"true_cfg_scale":4.0,"negative_prompt":" ","num_inference_steps":50,"num_images_per_prompt":1,"layers":4,"resolution":640,# Using different bucket (640, 1024) to determine the resolution. For this version, 640 is recommended"cfg_normalize":True,# Whether enable cfg normalization."use_en_prompt":True,# Automatic caption language if user does not provide caption}withtorch.inference_mode():output=pipeline(**inputs)output_image=output.images[0]fori,imageinenumerate(output_image):image.save(f"{i}.png")

案例展示

应用中的分层解构

给定一张图像,Qwen-Image-Layered可将其分解为多个RGBA图层:

分解后,编辑操作仅作用于目标图层,使其在物理层面与其他内容隔离,从而从根本上确保编辑的一致性。

例如,我们可以单独对首层重新着色,同时保持其他所有内容不受影响:

我们也可以将第二层从女孩替换为男孩(目标层使用Qwen-Image-Edit进行编辑):

我们将文本修改为“Qwen-Image”(目标图层使用Qwen-Image-Edit进行编辑):

此外,分层结构天然支持基础操作。例如,我们可以彻底删除不需要的对象。

我们也可以在不失真的情况下调整对象大小:

分层解构后,我们可以在画布上自由移动对象:

灵活可迭代的分层

Qwen-Image-Layered 不局限于固定分层数量。该模型支持可变层数分解,例如根据需求可将图像分解为3层或8层:

此外,分解可以递归应用:任何层级本身都可以进一步分解,从而实现无限分解。

许可协议

Qwen-Image-Layered 采用 Apache 2.0 许可证授权。

引用说明

如果您认为我们的工作对您有所帮助,我们诚挚地建议您引用相关成果。

@misc{yin2025qwenimagelayered, title={Qwen-Image-Layered: Towards Inherent Editability via Layer Decomposition}, author={Shengming Yin, Zekai Zhang, Zecheng Tang, Kaiyuan Gao, Xiao Xu, Kun Yan, Jiahao Li, Yilei Chen, Yuxiang Chen, Heung-Yeung Shum, Lionel M. Ni, Jingren Zhou, Junyang Lin, Chenfei Wu}, year={2025}, eprint={2512.15603}, archivePrefix={arXiv}, primaryClass={cs.CV}, url={https://arxiv.org/abs/2512.15603}, }
http://www.cnnetsun.cn/news/180311.html

相关文章:

  • 基于VUE的好利来蛋糕销售网站[VUE]-计算机毕业设计源码+LW文档
  • 拒绝无效加班!免费 RPA 工具合集,轻松搞定数据录入 / 报表整理
  • 【Open-AutoGLM量子协同突破】:揭秘量子计算与大模型融合的5大核心技术
  • 基于YOLOv11的苹果成熟度识别检测系统(YOLOv11深度学习+YOLO数据集+UI界面+登录注册界面+Python项目源码+模型)
  • 5个策略帮助企业充分利用YashanDB数据库
  • 5个策略提升你对YashanDB数据库的掌控力
  • 5个策略助力提升YashanDB数据库的可用性
  • 背调公司怎么选?一份基于核心维度的评估清单
  • 【独家披露】Open-AutoGLM内部训练数据曝光:它是如何学会“人性化”推荐的?
  • 还在手动查账单?Open-AutoGLM让你一键获取所有消费明细!
  • LangFlow内存管理策略:会话历史与状态持久化设置
  • SpringBoot+Vue 扶贫助农系统管理平台源码【适合毕设/课设/学习】Java+MySQL
  • 【验证码逆向专栏】某团验证码逆向分析
  • 华为云国际站代理商的CBR主要有什么作用呢?
  • LangFlow镜像单元测试生成:提高软件质量自动化保障
  • UG NX 2406:高端 CAD/CAE/CAM 一体化工程软件下载安装教程
  • AOP(面向切面编程,Aspect-Oriented Programming)
  • Open-AutoGLM调度性能提升300%?背后你不知道的5个优化秘诀
  • 揭秘Open-AutoGLM背后的技术栈:为何它能成为酒店业AI标杆?
  • 基于STM32的超声波倒车雷达测距报警OLED显示设计
  • LangFlow镜像合同审查助手:识别风险条款提供建议
  • 汽车结构原理VR课:看得见、摸得着的机械世界
  • 基于机器学习的慢性病风险评估与预防系统任务书
  • 基于计算机视觉的钢丝绳缺陷检测算法研究中期检查
  • LLM学习宝典:本质、训练与应用,程序员入门必读
  • 必学!普通人也能创建智能体:抢占AI时代红利
  • 多智能体系统调度难题,Open-AutoGLM是如何破局的?
  • 从零搭建金融账单AI引擎,Open-AutoGLM实战全解析
  • Open-AutoGLM实战指南:5步实现多设备智能联动控制
  • 用Python从0到1跑通12306抢票脚本,只需要3个实操阶段