当前位置:首页 → 电脑软件 → 崩铁椒丘有必要抽吗? → 世界杯微信下注 v8.510.3379.259363 最新版
v6.945.1298.471598 最新版
v4.551 安卓最新版
v6.9.4844.385700 安卓免費版
v7.923 安卓免費版
v5.677.8015.729666 安卓免費版
v9.757.3067.403767 安卓免費版
v1.99.2669 PC版
v8.97.2562 PC版
v9.634 安卓版
v5.478.8128.587005 安卓免費版
v1.234.5860 安卓漢化版
v5.678 安卓漢化版
v3.668.6653.122969 安卓漢化版
v5.268 安卓最新版
v7.618.3458.234272 安卓版
v9.427.393.157477 安卓漢化版
v8.319.6010.788369 安卓漢化版
v6.326.2518.846547 安卓免費版
v4.954.2000.506654 安卓最新版
v8.957 安卓漢化版
v3.726.9195 最新版
v5.58.9977.89264 安卓版
v9.309.9377 安卓版
v3.268.9849 安卓最新版
v6.516 PC版
v3.658.4843.38652 安卓漢化版
v8.5.9950.77385 安卓版
v7.643.5458.422112 最新版
v6.386.1299.846484 IOS版
v7.334.7876 IOS版
v6.969.792.378834 安卓免費版
v2.810.53.514324 安卓版
v6.752.7870 安卓最新版
v1.757 IOS版
v3.339.1056.786131 安卓免費版
v2.353.7351.787512 安卓漢化版
v8.724.2594.923093 安卓最新版
v8.734.1953.148724 安卓最新版
v9.838.5201 PC版
v9.655.1386 最新版
v6.129.106 安卓漢化版
v1.51.2740.42146 IOS版
v8.695.2891 安卓最新版
v9.831.463.164442 IOS版
v2.404.3252 PC版
v1.856.6191.823718 安卓版
v7.987.4139.895997 安卓版
v3.21 安卓版
v2.508.4010.761212 安卓版
v8.559 安卓版
v9.251.3181 安卓版
v7.452 安卓版
v4.612.4643.164672 安卓漢化版
v4.286.6676 安卓免費版
v4.280.6805.907675 最新版
v5.395.9419 最新版
v6.578.190 安卓版
v1.978.7584.120793 安卓免費版
v3.984 IOS版
v2.269.3890.97906 IOS版
v3.186.3886.933419 PC版
v9.181.7959.45018 安卓漢化版
v1.540.1649.445592 PC版
v4.618.9398.865892 安卓免費版
v8.725 IOS版
v8.910.1733.499555 安卓版
v9.918.9866 安卓最新版
v7.656 安卓漢化版
v5.242.7287.994801 PC版
v8.533.3737.855226 安卓免費版
v6.492 安卓版
v5.789.9432.259260 安卓版
v6.538.8589 安卓漢化版
v2.834 安卓漢化版
v7.350 安卓免費版
v5.228.7044.724059 PC版
v8.481.1649 PC版
v5.609 最新版
v3.89.9655 PC版
v9.772.5996.813162 安卓最新版
世界杯微信下注
新智元报道
编辑:LRST
【新智元导读】LayerComposer革新了个性化图像生成,让用户像在Photoshop里一样自由操控元素位置、大小,解决传统方法交互性与多主体扩展难题,实现更自然、高效的创作,推动个性化生成迈向主动交互新阶段。
大型扩散模型(如 Stable Diffusion)让我们能够从文字生成高保真的图像。但当用户希望「生成我和我的朋友们在不同场景中的照片」时,现有的个性化生成方法(如 DreamBooth、IP-Adapter)仍面临两个根本问题:
缺乏交互性:无法自由控制人物的空间位置、大小与关系。
难以扩展到多主体:每多一个人,内存和算力就线性增长。
LayerComposer的目标,就是要打破这两大限制,让用户可以直观地控制在哪里放置什么样的元素,进行可控且高效的个性化生成。
项目地址:https://snap-research.github.io/layercomposer/
论文地址:https://arxiv.org/abs/2510.20820
「一张由雪人和三位女孩组成的合照」—— 你可以像在Photoshop里一样,放置、缩放、锁定角色,然后让模型完成剩下的工作。
LayerComposer的三大设计
分层画布(Layered Canvas)
每个人物、物体或背景都放在独立的RGBA层中(包含透明通道的图片),这样可以:
避免人物遮挡导致的信息丢失;
通过透明裁剪(Transparent Latent Pruning)显著降低计算量;
支持任意数量的主体组合。
类似于在Photoshop里,每一层就是一个独立的角色,随意移动、缩放或删除。
锁定机制(Locking Mechanism)
每一层都可以选择「锁定(Lock)」或「解锁(Unlock)」:
锁定层 → 模型必须高保真地保留该层,仅允许细微的光照调整;
解锁层 → 模型可以根据文字描述自由生成姿态、表情或交互。
你可以锁定背景,让人物随提示变化,也可以锁定一个角色姿势,生成其他人围绕他互动。
这种「可选保真度」让 LayerComposer 比以往方法更接近人类的创作流程。
模型–数据共设计(Model–Data Co-Design)
LayerComposer的锁定机制无需修改网络结构。
研究人员通过「位置嵌入」(positional embedding)与「数据采样策略」共同实现:
锁定层共享相同的空间编码;
解锁层使用独立的编码,以避免重叠混淆。
这种轻量化设计,可以在现有扩散模型(如 FLUX Kontext)上直接适配。
实验结果
多主体、高保真、强可控
四人场景(4P)
在四人同框的任务中,LayerComposer的生成质量显著优于 FLUX Kontext、Qwen-Image-Edit、Gemini 2.5 Flash Image等模型,能在存在遮挡的情况下保持人物结构完整,并忠实地还原每个人物。
双人交互(2P)
在需要两人互动的场景(如「一起吃饭」、「握手」)中,LayerComposer能生成自然的姿态与空间关系,不再出现「复制粘贴」或「少人」的问题,用户偏好达到83.3%,远超OmniGen2等最新模型。
单人个性化(1P)
即使只生成单人肖像,LayerComposer仍展示出优越的表现:
在保持身份一致的同时,能灵活生成不同表情与动作(如笑、闭眼、吃饭等),避免「贴脸」效果。
消融实验
锁定与分层的作用
锁定机制(Locking Mechanism)
为了展示锁定机制的效果,研究人员逐步对每一层输入进行锁定。
被锁定的层会保留该人物的姿态——模型只会在此基础上进行「外延绘制」(outpainting)和轻微的细节光照调整。
需要强调的是,这与「掩膜推理(masked inference)」不同:在掩膜推理中,被遮挡的区域完全不会被更新。
另外,在实验设置中,未锁定的层会根据已锁定的内容和整体场景上下文灵活调整,从而实现自然的协调与融合。
分层画布(Layered Canvas)
如果不使用分层画布,模型就只能在训练中以单张拼贴图像(collage)作为条件输入,如图中 「Inputs」 一列所示。
可以看到,在「w/o layered canvas」(无分层画布)的结果中,由于拼贴重叠造成的遮挡,会导致信息缺失。
例如,左边女子圣诞帽上的球被遮挡后在生成结果中完全消失。
相比之下,提出的分层画布能够显式地处理遮挡问题,从而避免此类伪影(artifacts)和细节丢失。
通过在Layered Cavas中调整每一个subject在各自layer的位置,LayerComposer支持直观的空间布局调控。
总结
LayerComposer让多主体个性化生成从「被动输入」迈向「主动创作」。
用户不再只是输入文本,而是真正参与到构图过程中。
从DreamBooth到LayerComposer,个性化生成,终于有了交互的灵魂。
未来展望
尽管LayerComposer带来了交互式个性化的新范式,但仍存在一些挑战。
在需要「复杂物理推理」(如「坐在输入图片椅子上」)的场景中可能失败。
未来,研究人员计划让LayerComposer支持更强的理解能力和新万博体育:模态,以促进人机协同创作:
结合大语言与视觉模型(VLMs)的理解能力,实现语义级别的自动布局与构图建议;
支持视频级别的分层个性化,让交互式创作从静态图像走向动态场景;
探索生成与编辑的统一界面,让用户在同一画布上无缝地修改、添加与再生成内容。
这种以「分层画布」为核心的交互式个性化范式,将成为下一代生成式创作工具的重要方向。
参考资料:
https://arxiv.org/abs/2510.20820
相关版本
多平台下载
查看所有0条评论>网友评论