SyncNoise
Geometry-guided Multi-view Consistent Noise Editing(AAAI 2025)— 通过几何引导的噪声级多视图同步,解决指令驱动编辑中的纹理流失与视图不一致问题。
Overview
- 发布时间:AAAI 2025
- 核心问题:SDS 策略导致的高频纹理流失与局部不一致
- 代码:SyncNoise
关键创新
1. 几何引导的多视图一致性噪声编辑
基于三维资产精确的深度和几何信息构建像素级对应关系,在执行 2D 扩散编辑时强制对齐 U-Net 解码器在不同视角下的特征层,在噪声预测阶段即保证多视图一致性。
2. 锚定视图与跨视角重投影
- 将处理良好的锚定帧细节直接重投影至相邻帧
- 辅以深度监督网络减少投影伪影
- 在大幅改变材质、重新上色等任务上显著超越迭代方法
效果
在指令编辑的 MUSIQ 评估指标和 CLIP 方向对齐分数上显著超过先前 SDS 迭代模型,做到"无损纹理修改"。
Related
- sds-score-distillation — 对比 SDS 方法
- omni-3dedit — 后续更高效的前馈方案
- conditional-generation-3d — 条件生成与编辑总览
Sources
- 三维点云生成条件控制综述 — 2026