Distortionless condition for microlens images in light field imaging

YANG Shang-peng; XU Cheng-cai; JIE Yi-fan; ZHOU Guang-quan; ZHOU Ping

doi:10.37188/CJLCD.2023-0021

Your Location：

Home >

Browse articles >

Distortionless condition for microlens images in light field imaging

Intelligent Displays | Updated：2023-06-12

- Distortionless condition for microlens images in light field imaging
- role： First author , 第一作者 ,
  
  Affiliation：
  School of Biological Sciences and Medical Engineering， Southeast University， Nanjing 210096， China
  
  Email： yang_sp@seu.edu.cn
  
  Introduction： [ "杨尚鹏（2000—），男，山东滕州人，硕士研究生，2022年于东南大学获得学士学位，主要从事图像处理与计算机视觉方面的研究。E-mail：yang_sp@seu.edu.cn" ]
  
  No information about the author is available
  YANG Shang-peng
  ,
  role：
  
  Affiliation：
  School of Biological Sciences and Medical Engineering， Southeast University， Nanjing 210096， China
  
  Email：
  
  No information about the author is available
  XU Cheng-cai
  ,
  role：
  
  Affiliation：
  School of Biological Sciences and Medical Engineering， Southeast University， Nanjing 210096， China
  
  Email：
  
  No information about the author is available
  JIE Yi-fan
  ,
  role：
  
  Affiliation：
  School of Biological Sciences and Medical Engineering， Southeast University， Nanjing 210096， China
  
  Email：
  
  No information about the author is available
  ZHOU Guang-quan
  ,
  role： Corresponding author , 通讯作者 ,
  
  Affiliation：
  School of Biological Sciences and Medical Engineering， Southeast University， Nanjing 210096， China
  
  Email： capzhou@163.com
  
  Introduction： [ "周平（1980—），男，辽宁凌源人，博士，副教授，2007年于中国科学技术大学获得博士学位，主要从事三维成像、信号与图像处理方面的研究。E-mail：capzhou@163.com" ]
  
  No information about the author is available
  ZHOU Ping
  ,
- Chinese Journal of Liquid Crystals and Displays Vol. 38, Issue 6, Pages: 829-834(2023)
- Affiliations：
  
  School of Biological Sciences and Medical Engineering， Southeast University， Nanjing 210096， China
- Author bio：
- Funds：
  
  National Natural Science Foundation of China(52071075)
- DOI：10.37188/CJLCD.2023-0021
  CLC： O436.1
- Received：27 January 2023，
  
  Revised：11 April 2023，
  
  Published：05 June 2023
- Accepted：
Scan QR Code
Cite this article

PDF
YANG Shang-peng, XU Cheng-cai, JIE Yi-fan, et al. Distortionless condition for microlens images in light field imaging[J]. Chinese journal of liquid crystals and displays, 2023, 38(6): 829-834.
DOI：

YANG Shang-peng, XU Cheng-cai, JIE Yi-fan, et al. Distortionless condition for microlens images in light field imaging[J]. Chinese journal of liquid crystals and displays, 2023, 38(6): 829-834. DOI： 10.37188/CJLCD.2023-0021.

Distortionless condition for microlens images in light field imaging

YANG Shang-peng ; XU Cheng-cai ; JIE Yi-fan ; ZHOU Guang-quan ; ZHOU Ping ;

PDF Download

Abstract

The microlens image may serve deviations from the true projected centers and shape irregularities when the light field imaging system is used in narrow space. This paper analyzed and proposed the distortionless condition for microlens images. The narrow space is modeled as an additional aperture in the light field imaging system， whose pupil size and position in the light field imaging system were related to the distortionless condition. The distortionless condition was studied from three aspects and the experiments were designed including microlens image deviation and arithmetic aperture-shift. Experimental results show the correlation coefficient between the experimental and theoretical result is more than 99%， and aperture-shift measurement is （9.97±1.5） mm. The distortionless condition is proved by experimental results， which can be used to guide the design of light field imaging system and analyze the microlens image distortion parameters quantitatively.

transl

Keywords

light field imaging; stop aperture; microlens image distortion; microlens image deviation

transl

1 引言

与传统二维成像不同，光场成像可以同时记录光线的方向与位置信息，在工业、医疗等领域存在巨大的应用潜力^［

1-4］。通常情况下，基于Levoy等^{［Reference 5

Baidu Scholar

5］}提出的双平行平面模型（Two parallel plane， TPP），光场图像采用二维方向平面

(s, t)

与二维位置平面

(x, y)

所构成的四维函数

I (s, t, x, y)

进行描述。

transl

四维光场成像系统的构建具有多种方式。2005年，斯坦福大学的Wilburn等^［

6］使用约100台CMOS相机构建了大规模光场相机阵列。2008年，清华大学戴琼海等^{［Reference 7

Baidu Scholar

7］}使用60个相机阵列和800多个LED灯搭建了一个大型的光场系统。基于相机阵列模式的光场成像系统具有高分辨率、高动态范围等优点，但相机阵列存在硬件成本高昂、体积大等缺点。2006年，吴义仁等^{［Reference 8

Baidu Scholar

8］}将一片微透镜阵列（Microlens Array， MLA）置于主透镜与二维成像传感器之间，在二维成像传感器上实现了四维光场的记录。因基于MLA的光场成像系统具有结构紧凑、便携、高性价比等优点，故受到了各界的广泛关注、研究与应用^{［Reference 9-10

9-10］}。对基于MLA的光场成像系统（以下简称为光场成像系统），通常认为元素图像记录了光线的方向信息

(s, t)

，子孔径图像记录了从不同视角采样的位置信息

(x, y)

。如何从二维成像传感器记录的二维原始数据中解码四维光场数据，是光场成像系统深度估计、三维成像等应用的基础问题。2013年，Dansereau等人^{［Reference 11

Baidu Scholar

11］}通过高斯滤波、峰值检测定位圆心等技术实现了图像解码。2014年，张旭等人^{［Reference 12

Baidu Scholar

12］}通过拍摄多频相移图像来定位图像中心，进而解码四维光场数据。2020年，Hahne等人^{［Reference 13

Baidu Scholar

13］}提出了独立于镜头规格的通用相机微图像尺度空间分析，得到了更高质量的图像。基于TPP模型，上述解码算法均以主透镜所在平面作为方向平面，以主透镜光心所在位置为成像坐标系中心，默认主透镜平面与孔阑平面重合，默认主透镜物、像空间的光线在成像过程中不受约束，采用白图像计算元素图像的圆心，并将其作为方向信息的（0，0）坐标。然而，在工业、医学等应用中，部分方向的光线因受实际工作环境的约束，存在可能无法被成像传感器记录到的情况，进而出现元素图像偏移与部分缺失等失真问题。类似问题在Schambach等人^{［Reference 14

Baidu Scholar

14］}的工作中有所提及，其将失真理解为自然和机械的渐晕效应。若物体的绝对空间位置没有变化，仅因光场成像系统受工作环境约束而出现元素图像偏移，将使解码算法得到错误的方向信息（0，0）坐标，进而影响深度估计、三维成像等应用，此问题尚未见量化的理论分析。

transl

本文将光线受实际工作环境的约束抽象为主透镜物空间存在额外孔阑，并定量地分析了孔阑尺寸、位置与元素图像之间的关系，提出了光场成像中元素图像不失真条件，并设计了实验加以验证。

transl

2 元素图像不失真条件

图1为元素图像失真示意图，可以明显观察到在某些情况下，元素图像出现的偏移和部分缺失等失真现象。

transl

图1 元素图像失真示意图。（a）成像传感器中心位置的元素图像；（b）~（d）左上、右下、左下位置的光场元素图像。

Fig.1 Schematic diagram of microlens image distortion. （a） Microlens image in the center of picture sensor；（b）~（d） Microlens images in the upper left， lower right and lower left.

Download: Full-size image | High-res image | Low-res image

基于TPP模型，本文对光场成像系统做如下定义：如图2所示，与以往的分析相似^［

15］，以主透镜光心为成像坐标系原点，定义成像坐标系为O_c-XY；以主透镜光轴与MLA平面的交点为原点，定义微透镜坐标系O_m-xy；以光轴与图像传感器的交点为原点，定义图像坐标系O_p-uv。定义主透镜的通光孔阑尺寸为

D

，对焦平面与主透镜平面之间的距离为

h_{m}

，主透镜与MLA之间的距离为

h_{m}^{'}

，MLA与图像传感器之间的距离为

b

。为分析光线方向受实际应用环境的约束，本文将此约束抽象为主透镜物空间的额外孔阑（以下简称孔阑），即将光线受空间约束无法到达成像平面的原因，等效为因孔阑的阻碍而无法到达成像平面。相应地，本文定义孔阑所在平面为孔阑平面，孔阑平面的光轴与主透镜平面光轴重合，定义孔阑尺寸为

D_{a s}

，孔阑与主透镜之间的距离为

d_{a s}

。

transl

图2 添加额外孔阑的光场成像模型

Fig.2 Light field imaging model with additional aperture

Download: Full-size image | High-res image | Low-res image

由于位置信息的两个维度之间为正交关系，本文只分析其中一个维度。如图2所示，对于主透镜物空间中的一点 $P_{0} (X, Y)$ ，若 $P_{0}$ 点能够在MLA平面成像，则无论是否存在元素图像失真问题，根据光场成像原理， $P_{0}$ 在MLA平面上成像于 $(x_{m}, y_{m})$ ，满足式（1）所述关系：

transl

\frac{X}{x_{m}} = \frac{h_{m}}{h_{m}^{'}}

（1）

根据孔阑尺寸及其与主透镜平面所在位置的距离，本文分3种情况研究元素图像的失真问题。

transl

情况1：对于主透镜物空间中的一点 $P_{0}$ ，若以到达主透镜为目标，孔阑对点 $P_{0}$ 发出的光线没有约束，如图3所示。

transl

图3 孔阑对光线没有约束

Fig.3 Aperture has no constraint on light

Download: Full-size image | High-res image | Low-res image

设 $P_{0}$ 点发出的光线经孔阑到达主透镜平面正负半轴的最大距离分别为 $l_{1}$ 与 $l_{2}$ ，当 $P_{0}$ 位于负半轴时，明显有 $l_{1} < l_{2}$ 。根据三角形相似原理分析负半轴成像关系有：

transl

\frac{1}{2} D_{a s} = \frac{d_{a s}}{h_{m}} X + \frac{h_{m} - d_{a s}}{h_{m}} l_{1}

（2）

当 $l_{1} \geq 0.5 D$ 时，孔阑对 $P_{0}$ 点发出的光线没有约束。联立式（1）与（2），根据是否考虑MLA尺寸，得式（3）：

transl

\{\begin{array}{l} (1) 2 X \leq \frac{h_{m}}{d_{a s}} (D_{a s} - D) + D \\ (2) D_{m} \leq \frac{h_{m}^{'}}{d_{a s}} (D_{a s} - D) + M D \end{array}

，

（3）

其中： $M = \frac{h_{m}^{'}}{h_{m}}$ ，为传统成像的放大率； $D_{m}$ 为MLA的边长，是物体在MLA平面可以成像的最大坐标，在光场成像系统参数确定的条件下，该条件限制了成像视野。当式（3.1）成立时，从 $P_{0}$ 点发出的光线经孔阑可以无约束地到达主透镜与MLA。在此情况下，光场成像系统得到的元素图像与传统光场图像相同，即虽然有额外的孔阑，但孔阑的尺寸与位置对光场成像的影响尚不足以产生失真现象，或可认为此情况下，元素图像无失真。

transl

情况2：对于主透镜物空间中的一点 $P_{0}$ ，孔阑约束了部分光线不能到达主透镜，如图4所示，通过主透镜后的光线可以无约束地到达MLA。

transl

图4 孔阑约束部分光线

Fig.4 Aperture has part of constraints on light

Download: Full-size image | High-res image | Low-res image

因负半轴的光线受约束较大，此时分析正半轴情况，有

transl

\frac{1}{2} D_{a s} = - \frac{d_{a s}}{h_{m}} X + \frac{h_{m} - d_{a s}}{h_{m}} l_{2}

（4）

当 $l_{2} \leq 0.5 D$ 时，孔阑对主透镜物空间的光线有约束作用，主透镜像空间的光线可以无约束地到达MLA。联立式（4）与（1），得式（5）：

transl

\{\begin{array}{l} (1) 2 X \leq \frac{h_{m}}{d_{a s}} (D - D_{a s}) - D \\ (2) D_{m} \leq \frac{h_{m}^{'}}{d_{a s}} (D - D_{a s}) - M D \end{array}

（5）

主透镜物空间的孔阑对 $P_{0}$ 点发出的光线有明显约束，即不是所有光线都能到达主透镜。此情况类似于在工业、医疗等具体应用中，受到狭小环境空间的限制，物点 $P_{0}$ 发出的部分光线可以到达主透镜，而有部分光线受狭小环境空间（孔阑）约束，不能到达主透镜。当式（5.2）被满足时，经主透镜后的光线可以全部到达MLA，此时的元素图像是完整的圆，但相对于情况1的元素图像，直径减小。此外，可以观察到元素图像的中心将发生偏移^［

14］，相当于光场成像系统的方向平面发生了改变。假设元素图像中心的偏移量为

Δ u

，如图2所示，根据小孔成像模型与光场成像原理有：

transl

\frac{X}{h_{m} - d_{a s}} = \frac{Δ S}{d_{a s}}

，

（6）

\frac{Δ S}{q Δ u} = \frac{h_{m}^{'}}{b}

，

（7）

其中： $q$ 为图像传感器的像素尺寸； $Δ S$ 为增加孔阑前后，物体主光线在主透镜平面的位置差。联立式（1）、（6）与（7），可得：

transl

Δ u = \frac{b h_{m} d_{a s} x_{m}}{q {h_{m}^{'}}^{2} (h_{m} - d_{a s})}

，

（8）

从式（8）可得，元素图像中心偏移量与孔阑尺寸无关，与物体在MLA平面成像位置与光轴距离 $x_{m}$ 、孔阑与主透镜之间的距离 $d_{a s}$ 正相关。此外，如将放大率 $M$ 引入公式（8），可知在主透镜焦距固定的情况下，元素图像中心偏移量与光场成像系统的放大率负相关。

transl

情况3：对于主透镜物空间中的一点 $P_{0}$ ，受孔阑约束，其光线到达主透镜正负半轴的情况不同，如图5所示。在主透镜正半轴，不是所有的光线都能通过主透镜，即主透镜对光线存在二次约束。因主透镜正负半轴对光线的约束情况不同，故分别分析得式（9）：

transl

\{\begin{array}{l} (1) \frac{1}{2} D_{a s} = \frac{d_{a s}}{h_{m}} X + \frac{h_{m} - d_{a s}}{h_{m}} l_{1} \\ (2) \frac{1}{2} D_{a s} = - \frac{d_{a s}}{h_{m}} X + \frac{h_{m} - d_{a s}}{h_{m}} l_{2} \end{array}

（9）

图5 孔阑和主透镜均对光线有约束

Fig.5 Both the aperture and the main lens have constraints on light

Download: Full-size image | High-res image | Low-res image

物点发出的光线同时受孔阑与主透镜约束的条件为 $l_{1} < 0.5 D$ 且 $l_{2} > 0.5 D$ ，分别将约束条件与式（9）与（1）联立并化简，得式（10）：

transl

\{\begin{array}{l} (1) 2 X > |\frac{h_{m}}{d_{a s}} (D_{a s} - D) + D| \\ (2) D_{m} > |\frac{h_{m}^{'}}{d_{a s}} (D_{a s} - D) + M D| \end{array}

（10）

由于物点发出的光线在主透镜正负半轴的约束情况存在差异，因此元素图像将出现明显的失真现象，光场成像系统得到椭圆形元素图像，如图1（b）~（d）和图6所示。

transl

图6 元素图像偏移。（a）二维光场图像右上角图；（b）二维光场图像左下角图。

Fig.6 Microlens image deviation. （a） Upper right of the 2D light field image；（b） Lower left of the 2D light field image.

Download: Full-size image | High-res image | Low-res image

综上，当孔阑的尺寸、位置不同时，代表了光场成像系统受到环境的不同约束。当式（10）成立时，元素图像形状产生失真，呈椭圆形状；若式（10）不成立而式（5）成立时，元素图像仍保持圆形但直径减小，且中心发生偏移；若式（3）成立，则元素图像不失真。此外，从式（3）、（5）与（10）可以发现，元素图像失真问题与物体位置同样相关，随着物体与光轴距离 $X$ 的增加，元素图像从不失真到失真，且元素图像圆心位置发生偏移，从保持圆形到呈椭圆形，且 $X$ 愈大失真情况愈严重。

transl

3 实验结果与讨论

为验证本文提出的元素图像不失真条件，本文使用Illum光场相机开展实验并采用我们以往提出的两步标定法计算得到光场相机的系统参数^［

15］。在光场相机主透镜的物空间设置一个孔阑，以白板为被测物，在不改变光场相机焦距、对焦位置等参数的条件下，拍摄有无孔阑以及孔阑位置改变时的白图像，用以观察元素图像失真情况，计算元素图像中心。

transl

3.1　元素图像中心偏移量与位置的关系

根据式（8）可知，元素图像中心偏移量 $Δ u$ 与物体在图像传感器上的成像位置成正相关。分别在元素图像失真前后计算其中心位置，可得偏移量 $Δ u$ 。考虑到实际系统中含两个正交方向的分量，故在两个方向分别计算。通常情况下，元素图像的偏移与形变同时存在。实验中，本文选择远离中心的元素图像，经处理得到其中心偏移，如图6所示。

transl

图6（a）和（b）分别为二维光场图像右上角与左下角的失真元素图像，蓝色点为无孔阑时无失真元素图像的中心，红色点为增加孔阑后失真元素图像的中心。元素图像中心偏移量与物体在图像传感器上的成像位置关系如图7所示。

transl

图7 元素图像中心偏移定量分析图

Fig.7 Quantitative analysis of microlens image deviation

Download: Full-size image | High-res image | Low-res image

从图7可知， $(x_{m}, Δ u)$ 与 $(y_{m}, Δ v)$ 分别成线性关系，与公式（8）的理论结果相同。

transl

3.2　元素图像中心偏移量与 $d_{a s}$ 的关系

根据式（8）可知，元素图像中心偏移量 $Δ u$ 与 $d_{a s}$ 成正相关。如上述实验结果所示，当计算得到 $(x_{m}, Δ u)$ 的线性关系后，根据线性拟合系数，由式（8）可计算得到 $d_{a s}$ 。为进一步验证本文工作，我们使用电动平移台移动孔阑位置，每次移动距离为10 mm，共采集6个位置的白图像进行实验，并计算两个孔阑位置之差 $Δ d_{a s}$ ，实验结果如表1所示。

transl

表1 孔阑等差移动实验结果

Tab.1 Results of the arithmetic aperture-shift ( mm )

孔阑位置	$Δ d_{a s}$
1	-
2	8.85
3	7.71
4	11.90
5	10.36
6	11.03

Download: CSV

Download: Table Images

实验得到的 $Δ d_{a s}$ =（9.97±1.5） mm， $Δ d_{a s}$ 的平均值与电动平移台的移动距离10 mm间相对误差为0.3%。此实验进一步验证了本文理论的正确性。

transl

4 结论

在实际应用中，因应用环境狭小空间的限制，物点发出的光线可能存在被环境约束而不能到达光场成像系统的情况。此时，元素图像可能出现中心偏移与形状改变等现象，影响光场图像的解码与后续应用。本文将环境约束抽象为主透镜物空间的额外孔阑约束，定量地分析了孔阑尺寸、位置与光场成像间的关系，提出了光场成像的元素图像不失真条件，并设计实验加以验证。实验结果表明，元素图像中心偏移的实验结果与理论分析的相关性高于99%，孔阑等差移动测量值为（9.97±1.5） mm。在光场成像系统设计中，若应用环境属于狭小空间时，受环境约束的成像物体尺寸与成像系统参数之间的量化关系应满足元素图像不失真条件。因此，元素图像不失真条件有助于光场成像系统的设计，在实际应用中避免因元素图像失真而导致错误结论。

transl

参考文献

TIAN L， WALLER L. 3D intensity and phase imaging from light field measurements in an LED array microscope ［J］. Optica， 2015， 2（2）： 104-111. doi: 10.1364/optica.2.000104 [Baidu Scholar]

XIONG B， ZHU T Y， XIANG Y H， et al. Mirror-enhanced scanning light-field microscopy for long-term high-speed 3D imaging with isotropic resolution ［J］. Light： Science & Applications， 2021， 10： 227. doi: 10.1038/s41377-021-00665-9 [Baidu Scholar]

翟家振，施汝恒，孔令杰.光场显微镜及其在三维生物成像中的应用［J］.物理与工程，2022，32（2）：147-150． doi: 10.3969/j.issn.1009-7104.2022.02.025 [Baidu Scholar]

ZHAI J Z， SHI R H， KONG L J. Light field microscope and its applications in 3D biomedical imaging ［J］. Physics and Engineering， 2022， 32（2）： 147-150. （in Chinese）. doi: 10.3969/j.issn.1009-7104.2022.02.025 [Baidu Scholar]

张石磊，崔宇，邢慕增，等.光场成像目标测距技术［J］.中国光学，2020，13（6）：1332-1342． doi: 10.37188/co.2020-0043 [Baidu Scholar]

ZHANG S L， CUI Y， XING M Z， et al. Light field imaging target ranging technology ［J］. Chinese Optics， 2020， 13（6）： 1332-1342. （in Chinese）. doi: 10.37188/co.2020-0043 [Baidu Scholar]

LEVOY M， HANRAHAN P. Light field rendering ［C］//Proceedings of the 23rd Annual Conference on Computer Graphics and Interactive Techniques. New Orleans， USA： ACM， 1996： 31-42. doi: 10.1145/237170.237199 [Baidu Scholar]

WILBURN B， JOSHI N， VAISH V， et al. High performance imaging using large camera arrays ［J］. ACM Transactions on Graphics， 2005， 24（3）： 765-776. doi: 10.1145/1073204.1073259 [Baidu Scholar]

LI K， DAI Q H， XU W L， et al. Temporal-dense dynamic 3-D reconstruction with low frame rate cameras ［J］. IEEE Journal of Selected Topics in Signal Processing， 2012， 6（5）： 447-459. doi: 10.1109/jstsp.2012.2194475 [Baidu Scholar]

NG R. Digital light field photography ［D］. Stanford： Stanford University， 2006. doi: 10.1364/iodc.2006.wb2 [Baidu Scholar]

LEVOY M， ZHANG Z， MCDOWALL I. Recording and controlling the 4D light field in a microscope using microlens arrays ［J］. Journal of Microscopy， 2009， 235（2）： 144-162. doi: 10.1111/j.1365-2818.2009.03195.x [Baidu Scholar]

郭正华.基于微透镜阵列光场成像的深度反演技术研究［D］.成都：中国科学院大学（中国科学院光电技术研究所），2020． [Baidu Scholar]

GUO Z H. Research on depth retrieval for lenslet based light field imaging ［D］. Chengdu： Institute of Optics and Electronics， Chinese Academy of Sciences， 2020. （in Chinese） [Baidu Scholar]

DANSEREAU D G， PIZARRO O， WILLIAMS S B. Decoding， calibration and rectification for lenselet-based plenoptic cameras ［C］//Proceedings of 2013 IEEE Conference on Computer Vision and Pattern Recognition. Portland： IEEE， 2013. doi: 10.1109/cvpr.2013.137 [Baidu Scholar]

张旭，李晨.微透镜阵列式光场成像模型及其标定方法［J］.光学学报，2014，34（12）：1211005． doi: 10.3788/aos201434.1211005 [Baidu Scholar]

ZHANG X， LI C. Calibration and imaging model of light field camera with microlens array ［J］. Acta Optica Sinica， 2014， 34（12）： 1211005. （in Chinese）. doi: 10.3788/aos201434.1211005 [Baidu Scholar]

HAHNE C， AGGOUN A. PlenoptiCam v1.0： a light-field imaging framework ［J］. IEEE Transactions on Image Processing， 2021， 30： 6757-6771. doi: 10.1109/tip.2021.3095671 [Baidu Scholar]

SCHAMBACH M， LEÓN F P. Microlens array grid estimation， light field decoding， and calibration ［J］. IEEE Transactions on Computational Imaging， 2020， 6： 591-603. doi: 10.1109/tci.2020.2964257 [Baidu Scholar]

蔡维嘉.光场相机标定算法研究［D］.南京：东南大学，2020． [Baidu Scholar]

CAI W J. Research on calibration method for light field camera ［D］. Nanjing： Southeast University， 2020. （in Chinese） [Baidu Scholar]

摘要

在实际应用中，受应用环境狭小空间的限制，可能出现元素图像偏移与部分缺失等失真问题，进而影响光场图像的解码、深度估计与三维成像等应用。为了研究该问题，本文分析并提出了元素图像不失真条件。将环境空间的约束抽象为主透镜物空间的孔阑，根据孔阑尺寸、位置与元素图像之间的关系，将光场成像分为3种情况分别进行理论研究，并设计了元素图像中心偏移、孔阑等差移动10 mm实验进行验证。实验结果表明，元素图像中心偏移的实验结果与理论分析的相关性高于99%，孔阑等差移动测量值为（9.97±1.5） mm，验证了本文元素图像不失真条件的正确性。该不失真条件可用于指导光场成像系统设计，定量分析元素图像失真参数。

Abstract

关键词

Keywords

references

TIAN L ， WALLER L . 3D intensity and phase imaging from light field measurements in an LED array microscope ［J］. Optica ， 2015 ， 2 （ 2 ）： 104 - 111 . doi: 10.1364/optica.2.000104 http://dx.doi.org/10.1364/optica.2.000104

XIONG B ， ZHU T Y ， XIANG Y H ， et al . Mirror-enhanced scanning light-field microscopy for long-term high-speed 3D imaging with isotropic resolution ［J］. Light： Science & Applications ， 2021 ， 10 ： 227 . doi: 10.1038/s41377-021-00665-9 http://dx.doi.org/10.1038/s41377-021-00665-9

翟家振，施汝恒，孔令杰 . 光场显微镜及其在三维生物成像中的应用［J］. 物理与工程， 2022 ， 32 （ 2 ）： 147 - 150 ． doi: 10.3969/j.issn.1009-7104.2022.02.025 http://dx.doi.org/10.3969/j.issn.1009-7104.2022.02.025

ZHAI J Z ， SHI R H ， KONG L J . Light field microscope and its applications in 3D biomedical imaging ［J］. Physics and Engineering ， 2022 ， 32 （ 2 ）： 147 - 150 . （in Chinese） . doi: 10.3969/j.issn.1009-7104.2022.02.025 http://dx.doi.org/10.3969/j.issn.1009-7104.2022.02.025

张石磊，崔宇，邢慕增，等 . 光场成像目标测距技术［J］. 中国光学， 2020 ， 13 （ 6 ）： 1332 - 1342 ． doi: 10.37188/co.2020-0043 http://dx.doi.org/10.37188/co.2020-0043

ZHANG S L ， CUI Y ， XING M Z ， et al . Light field imaging target ranging technology ［J］. Chinese Optics ， 2020 ， 13 （ 6 ）： 1332 - 1342 . （in Chinese） . doi: 10.37188/co.2020-0043 http://dx.doi.org/10.37188/co.2020-0043

LEVOY M ， HANRAHAN P . Light field rendering ［C］// Proceedings of the 23rd Annual Conference on Computer Graphics and Interactive Techniques . New Orleans， USA ： ACM ， 1996 ： 31 - 42 . doi: 10.1145/237170.237199 http://dx.doi.org/10.1145/237170.237199

WILBURN B ， JOSHI N ， VAISH V ， et al . High performance imaging using large camera arrays ［J］. ACM Transactions on Graphics ， 2005 ， 24 （ 3 ）： 765 - 776 . doi: 10.1145/1073204.1073259 http://dx.doi.org/10.1145/1073204.1073259

LI K ， DAI Q H ， XU W L ， et al . Temporal-dense dynamic 3-D reconstruction with low frame rate cameras ［J］. IEEE Journal of Selected Topics in Signal Processing ， 2012 ， 6 （ 5 ）： 447 - 459 . doi: 10.1109/jstsp.2012.2194475 http://dx.doi.org/10.1109/jstsp.2012.2194475

NG R . Digital light field photography ［D］. Stanford ： Stanford University ， 2006 . doi: 10.1364/iodc.2006.wb2 http://dx.doi.org/10.1364/iodc.2006.wb2

LEVOY M ， ZHANG Z ， MCDOWALL I . Recording and controlling the 4D light field in a microscope using microlens arrays ［J］. Journal of Microscopy ， 2009 ， 235 （ 2 ）： 144 - 162 . doi: 10.1111/j.1365-2818.2009.03195.x http://dx.doi.org/10.1111/j.1365-2818.2009.03195.x

郭正华 . 基于微透镜阵列光场成像的深度反演技术研究［D］. 成都：中国科学院大学（中国科学院光电技术研究所）， 2020 ．

GUO Z H . Research on depth retrieval for lenslet based light field imaging ［D］. Chengdu ： Institute of Optics and Electronics， Chinese Academy of Sciences ， 2020 . （in Chinese）

DANSEREAU D G ， PIZARRO O ， WILLIAMS S B . Decoding， calibration and rectification for lenselet-based plenoptic cameras ［C］// Proceedings of 2013 IEEE Conference on Computer Vision and Pattern Recognition . Portland ： IEEE ， 2013 . doi: 10.1109/cvpr.2013.137 http://dx.doi.org/10.1109/cvpr.2013.137

张旭，李晨 . 微透镜阵列式光场成像模型及其标定方法［J］. 光学学报， 2014 ， 34 （ 12 ）： 1211005 ． doi: 10.3788/aos201434.1211005 http://dx.doi.org/10.3788/aos201434.1211005

ZHANG X ， LI C . Calibration and imaging model of light field camera with microlens array ［J］. Acta Optica Sinica ， 2014 ， 34 （ 12 ）： 1211005 . （in Chinese） . doi: 10.3788/aos201434.1211005 http://dx.doi.org/10.3788/aos201434.1211005

HAHNE C ， AGGOUN A . PlenoptiCam v1.0： a light-field imaging framework ［J］. IEEE Transactions on Image Processing ， 2021 ， 30 ： 6757 - 6771 . doi: 10.1109/tip.2021.3095671 http://dx.doi.org/10.1109/tip.2021.3095671

SCHAMBACH M ， LEÓN F P . Microlens array grid estimation， light field decoding， and calibration ［J］. IEEE Transactions on Computational Imaging ， 2020 ， 6 ： 591 - 603 . doi: 10.1109/tci.2020.2964257 http://dx.doi.org/10.1109/tci.2020.2964257

蔡维嘉 . 光场相机标定算法研究［D］. 南京：东南大学， 2020 ．

CAI W J . Research on calibration method for light field camera ［D］. Nanjing ： Southeast University ， 2020 . （in Chinese）

364

Views

148

Downloads

CSCD

Alert me when the article has been cited

Submit

Tools

Publicity Resources

No data

Related Author

XU Cheng-cai

JIE Yi-fan

ZHOU Guang-quan

Related Institution

No data

Address：No.3888 Dong Nanhu Road, Changchun, Jilin, China 130033 Postal code：130033
Tel：0431-86176059 Email：yjxs@ciomp.ac.cn
Technical support is provided by Beijing Founder electronics co., LTD 吉ICP备11002662号-17 京公网安备11010802024621
It is recommended to read the content of this site in Chrome&IE9+. Please switch to extreme mode in browser 360.
Cookies We use cookies to help provide and enhance our service and tailor content. By continuing, you agree to the use of cookies.

⁰