告别重算！LumiTokens让3D重光照秒变“换灯”，还能逐灯叠加！
LumiTokens: 3D Relighting via Token-Space Lighting Transformation
👨💼 主理人解读 · 为什么值得关注
提出LumiTokens，在token空间进行光照变换实现3D重光照，无需重新计算，提升效率并支持新光照条件。
📖 AI 总结
本文提出了一种名为LumiTokens的3D重光照新框架，将重光照问题转化为对潜在场景标记的直接变换，而非依赖显式3D表示、渲染方程或物理分解。其核心创新在于引入场景标记编辑器，通过自注意力机制联合处理场景标记与光线标记，生成可解码为多视角一致重光照图像的更新标记。所有光照信号（环境贴图、点光源、面光源）均统一参数化为Plücker光线标记，支持原生3D交互且无需显式空间结构。该设计还支持渐进式重光照，用户可逐光源叠加编辑，在标记空间中实现光照组合。实验表明，LumiTokens在重光照质量上达到或超越现有方法，并具备渐进式、可组合的光照编辑能力，为3D重光照开辟了新的设计空间。
🔑 关键词速览
| LumiTokens | 本文提出的框架，通过潜在场景令牌的直接变换实现三维重光照。 |
| Scene Token Editor | 模型中的组件，通过自注意力机制联合处理场景令牌和光线令牌，生成更新后的令牌。 |
| Plucker ray tokens | 将光照信号参数化为Plucker坐标的光线令牌，用于统一表示不同类型的光源。 |
| progressive relighting | 渐进式重光照，允许用户逐步添加光源，每次编辑在令牌空间中组合。 |
| latent scene representations | 潜在场景表示，将多视图图像编码为紧凑令牌，无固定物理语义。 |
📱 每天一份 AI 前沿日报
关注公众号，每天 09:00 推送 · 不错过任何重磅