这篇论文提出了一个用于评估生成式图像模型光照理解能力的基准。研究核心思路是:要检验模型是否真正理解光照,只需测试其能否将新物体自然地插入真实照片并保持光照一致。作者利用包含简单物体作为“光照探针”的多光照数据集,让模型对同一物体进行图像修复,再将生成结果与真实光照探针比对,从中估计光照方向、颜色和辐射分布,从而定量衡量光照准确性与光度真实感。该工作建立了一套可扩展的评估协议,为系统评估生成模型捕捉和再现真实世界光照的能力提供了基础,也为未来模型的光度精度评测提供了参照。
| 光照理解 | 指生成模型对场景中光源方向、颜色、强度等物理属性的感知与再现能力。 |
| 光探针 | 放置在场景中的简单物体,用于通过其外观推断光照条件,如方向、颜色和强度。 |
| 图像修复 | 指在图像中填充或替换缺失或指定区域的内容,此处用于将物体插入到原始图像中。 |
| 光度真实感 | 指生成图像在光照效果上符合物理规律,与真实世界的光照表现一致。 |
| 多光照数据集 | 包含同一场景在不同光照条件下拍摄的多张图像的数据集,用于研究光照变化。 |
📱 每天一份 AI 前沿日报
关注公众号,每天 09:00 推送 · 不错过任何重磅