arrow
返回

Learning Lens Blur Fields

delete2025-09-01
delete0
PRE
AI
Z
Zhecheng Wang
R
Rebecca Lin
D
Daniel Miau
F
Florian Kainz
J
Jiawen Chen
D
David B. Lindell
K
Kiriakos N. Kutulakos
DOI:10.1109/TPAMI.2025.3578587delete
delete原文链接
delete原文求助
delete分享
delete收藏
摘要

摘要

En 中文
光学模糊是任何镜头系统的固有属性,由于现代相机具有复杂的光学元件,因此对其进行建模具有挑战性。为应对这一挑战,我们引入了一种高维神经模糊表示——**lens blur field**,并提出了一种获取该表示的实用方法。**lens blur field**是一种多层感知器(MLP),其设计目的是:(1)精确捕捉镜头2D点扩散函数随图像平面位置、对焦设置以及可选的深度变化的差异;(2)将这些变化以参数化形式表示为单个、传感器特定的函数。该表示模型结合了散焦、衍射、像差的综合效应,并考虑了传感器特征,如像素颜色滤波器和像素特定的微透镜。为学习特定设备的真实世界模糊场,我们提出了一种广义非盲去卷积问题,该问题直接使用一组较小的焦栈作为唯一输入来优化MLP权重。我们还提供了一种前所未有的5D模糊场数据集——适用于智能手机相机、配备各种镜头的相机机身等。最后,我们证明所获取的5D模糊场具有足够的表达力和准确性,能够首次揭示同品牌同型号智能手机设备之间的光学行为差异。
Keyword:
Modeling point spread functions
computational photography
neural representations

期刊

IEEE Transactions on Pattern Analysis and Machine Intelligence 封面图
IEEE Transactions on Pattern Analysis and Machine Intelligence
IF:
18.6
论文数:
864
被引数:
9.8W

机构

M
Massachusetts Institute of Technology
学者数:
2.4K
论文数: 1.1K
被引数: 8
A
adobe, inc., san jose, ca, usa
学者数:
4
论文数: 1
被引数: 0
U
university of toronto
学者数:
14.8W
论文数: 12.0W
被引数: 165
学者 查看更多机构
引用论文

引用论文

Neural Blind Deconvolution Using Deep Priors
err2020-06-01
err0
errOAAI
errDongwei Ren; Kai Zhang; Qilong Wang; Qinghua Hu; Wangmeng Zuo
err分享
err收藏
Image Enhancement Using Calibrated Lens Simulations
err2012-01-01
err0
errOAAI
errYichang Shih; Brian Guenter; Neel Joshi
err分享
err收藏
err分享
err收藏
Differentiable Compound Optics and Processing Pipeline Optimization for End-to-end Camera Design用于端到端相机设计的可区分复合光学和处理管道优化
err2021-06-21
err66
PREAI
errTseng, Ethan; Mosleh, Ali; Mannan, Fahim; St-Arnaud, Karl; Sharma, Avinash; Peng, Yifan; Braun, Alexander; Nowrouzezahrai, Derek; Lalonde, Jean-Francois; Heide, Felix
err分享
err收藏
err分享
err收藏
err分享
err收藏
学者 查看更多内容