Research progress of retinal projection displays

Xu ZHANG; Zi WANG; Ke-feng TU; Tao CHEN; Yu-jian PANG; Guo-qiang LYU; Qi-bin FENG

doi:10.37188/CJLCD.2022-0040

您当前的位置：

首页 >

文章列表页 >

Research progress of retinal projection displays

Near-eye Display and 3D Interaction | 更新时间：2022-06-22

- Research progress of retinal projection displays
- Chinese Journal of Liquid Crystals and Displays Vol. 37, Issue 5, Pages: 639-646(2022)
- 作者机构：
  
  1.合肥工业大学仪器科学与光电工程学院，安徽合肥 230009
  2.合肥工业大学特种显示国家工程实验室，光电技术研究院，安徽合肥 230009
- 作者简介：
- 基金信息：
  
  National Natural Science Foundation of China(61805065)
- DOI：10.37188/CJLCD.2022-0040
  CLC： TN27
- Received：30 January 2022，
  
  Revised：21 February 2022，
  
  Published：05 May 2022
- 稿件说明：
移动端阅览
Xu ZHANG, Zi WANG, Ke-feng TU, et al. Research progress of retinal projection displays[J]. Chinese journal of liquid crystals and displays, 2022, 37(5): 639-646.
DOI：

Xu ZHANG, Zi WANG, Ke-feng TU, et al. Research progress of retinal projection displays[J]. Chinese journal of liquid crystals and displays, 2022, 37(5): 639-646. DOI： 10.37188/CJLCD.2022-0040.

摘要

近眼显示器可将数字世界与物理世界无缝融合，有望成为下一代增强现实显示终端。视网膜投影显示（Retinal projection displays，RPD）技术因其具有无辐辏-聚焦冲突、高光效、大视场等优点，是近眼显示领域的研究热点之一。本文回顾了RPD技术的发展，阐述了RPD的基本工作原理，综述了RPD及其出瞳拓展方面的最新进展，并对其未来的前景进行了展望。未来通过结合全息波前调控与全息光学元件（HOE）的优点，有望实现大出瞳、高系统自由度的轻薄化RPD近眼显示。

Abstract

Near-eye displays， which seamlessly integrate the digital and physical worlds， are expected to become the next generation of augmented reality display terminals. Retinal projection displays （RPD） technology is one of the research hotspots in the field of near-eye display due to its advantages of convergence-conflict free， high light efficiency and large field of view. In this paper， the development of RPD technology is reviewed， the basic working principle of RPD is described， the latest progresses of RPD and its eyebox expansion are reviewed， and the future prospect of RPD is forecasted. In the future， by combining the advantages of holographic wavefront control and holographic optical element （HOE）， it is expected to realize a lightweight RPD near eye display with large eyebox and high system freedom.

关键词

Keywords

references

CHENG D W ， WANG Q W ， LIU Y ， et al . Design and manufacture AR head-mounted displays： a review and outlook ［J］. Light： Advanced Manufacturing ， 2121 ， 2 （ 3 ）： 350 - 369 .

HE Z H ， SUI X M ， JIN G F ， et al . Progress in virtual reality and augmented reality based on holographic display ［J］. Applied Optics ， 2019 ， 58 （ 5 ）： A74 - A81 . doi: 10.1364/ao.58.000a74 http://dx.doi.org/10.1364/ao.58.000a74

何泽浩，隋晓萌，赵燕，等．基于全息光学的虚拟现实与增强现实技术进展［J］．科技导报， 2018 ， 36 （ 9 ）： 8 - 17 ． doi: 10.3981/j.issn.1000-7857.2018.09.001 http://dx.doi.org/10.3981/j.issn.1000-7857.2018.09.001

HE Z H ， SUI X M ， ZHAO Y ， et al . The development trend of virtual reality and augmented reality technology based on holographic optics ［J］. Science & Technology Review ， 2018 ， 36 （ 9 ）： 8 - 17 . （in Chinese） . doi: 10.3981/j.issn.1000-7857.2018.09.001 http://dx.doi.org/10.3981/j.issn.1000-7857.2018.09.001

WANG Y Q ， LIU W Q ， MENG X X ， et al . Development of an immersive virtual reality head-mounted display with high performance ［J］. Applied Optics ， 2016 ， 55 （ 25 ）： 6969 - 6977 . doi: 10.1364/ao.55.006969 http://dx.doi.org/10.1364/ao.55.006969

史晓刚，薛正辉，李会会，等．增强现实显示技术综述［J］．中国光学， 2021 ， 14 （ 5 ）： 1146 - 1161 ． doi: 10.37188/CO.2021-0032 http://dx.doi.org/10.37188/CO.2021-0032

SHI X G ， XUE Z H ， LI H H ， et al . Review of augmented reality display technology ［J］. China Optics ， 2021 ， 14 （ 5 ）： 1146 - 1161 . （in Chinese） . doi: 10.37188/CO.2021-0032 http://dx.doi.org/10.37188/CO.2021-0032

CHEN Y Q ， WANG Q ， CHEN H ， et al . An overview of augmented reality technology ［J］. Journal of Physics： Conference Series ， 2019 ， 1237 （ 2 ）： 022082 . doi: 10.1088/1742-6596/1237/2/022082 http://dx.doi.org/10.1088/1742-6596/1237/2/022082

HOFFMAN D M ， GIRSHICK A R ， AKELEY K ， et al . Vergence–accommodation conflicts hinder visual performance and cause visual fatigue ［J］. Journal of Vision ， 2008 ， 8 （ 3 ）： 33 . doi: 10.1167/8.3.33 http://dx.doi.org/10.1167/8.3.33

WESTHEIMER G . The maxwellian view ［J］. Vision Research ， 1966 ， 6 （ 11/12 ）： 669 - 682 . doi: 10.1016/0042-6989(66)90078-2 http://dx.doi.org/10.1016/0042-6989(66)90078-2

WEBB R H ， HUGHES G W ， POMERANTZEFF O . Flying spot TV ophthalmoscope ［J］. Applied Optics ， 1980 ， 19 （ 17 ）： 2991 - 2997 . doi: 10.1364/ao.19.002991 http://dx.doi.org/10.1364/ao.19.002991

KOLLIN J S . A retinal display for virtual-environment applications ［C］// Proceedings of Society for Information Display . 1993 ： 827 .

WATANABE M ， TAKAYAMA H ， ASAI N ， et al . A retinal scanning display with a wavefront curvature modulator ［J］. Journal of the Society for Information Display ， 2003 ， 11 （ 3 ）： 511 - 515 . doi: 10.1889/1.1821288 http://dx.doi.org/10.1889/1.1821288

DEWALD D S ， EVANS A T ， WELCH N ， et al . The avegant glyph： optical design considerations and approach to near-eye display ［J］. SID Symposium Digest of Technical Papers ， 2016 ， 47 （ 1 ）： 69 - 71 . doi: 10.1002/sdtp.10609 http://dx.doi.org/10.1002/sdtp.10609

MAIMONE A ， GEORGIOU A ， KOLLIN J S . Holographic near-eye displays for virtual and augmented reality ［J］. ACM Transactions on Graphics ， 2017 ， 36 （ 4 ）： 85 . doi: 10.1145/3072959.3073624 http://dx.doi.org/10.1145/3072959.3073624

TAKAKI Y ， FUJIMOTO N . Flexible retinal image formation by holographic Maxwellian-view display ［J］. Optics Express ， 2018 ， 26 （ 18 ）： 22985 - 22999 . doi: 10.1364/oe.26.022985 http://dx.doi.org/10.1364/oe.26.022985

丁意桐，高震宇，彭旭，等．激光扫描头戴式增强现实系统中带斑抑制与中继光路设计［J］．激光与光电子学进展， 2020 ， 57 （ 13 ）： 130801 ． doi: 10.3788/LOP57.130801 http://dx.doi.org/10.3788/LOP57.130801

DING Y T ， GAO Z Y ， PENG X ， et al . Banding suppression and relay optical path design for laser scanning head-mounted augmented reality system ［J］. Laser & Optoelectronics Progress ， 2020 ， 57 （ 13 ）： 130801 . （in Chinese） . doi: 10.3788/LOP57.130801 http://dx.doi.org/10.3788/LOP57.130801

呼新荣，刘英，王健，等．基于视网膜扫描的头戴显示器研究现状［J］．红外与激光工程， 2014 ， 43 （ 3 ）： 871 - 878 ． doi: 10.3969/j.issn.1007-2276.2014.03.037 http://dx.doi.org/10.3969/j.issn.1007-2276.2014.03.037

HU X R ， LIU Y ， WANG J ， et al . Current progress in head-mounted display based on retinal scanning ［J］. Infrared and Laser Engineering ， 2014 ， 43 （ 3 ）： 871 - 878 . （in Chinese） . doi: 10.3969/j.issn.1007-2276.2014.03.037 http://dx.doi.org/10.3969/j.issn.1007-2276.2014.03.037

孙路通，王灵杰，王蔚松，等．基于单图像生成单元的双焦面头盔显示光学系统设计［J］．光学学报， 2020 ， 40 （ 13 ）： 1322004 ． doi: 10.3788/AOS202040.1322004 http://dx.doi.org/10.3788/AOS202040.1322004

SUN L T ， WANG L J ， WANG W S ， et al . Design of dual-focal-plane helmet mounted display based on single picture generation unit ［J］. Acta Optica Sinica ， 2020 ， 40 （ 13 ）： 1322004 . （in Chinese） . doi: 10.3788/AOS202040.1322004 http://dx.doi.org/10.3788/AOS202040.1322004

杨敏娜，郭忠达，阳志强．基于视网膜投影显示的头盔显示器设计［J］．应用光学， 2012 ， 33 （ 2 ）： 370 - 373 ．

YANG M N ， GUO Z D ， YANG Z Q . Helmet-mounted displays based on retinal projection display ［J］. Journal of Applied Optics ， 2012 ， 33 （ 2 ）： 370 - 373 . （in Chinese）

杨震，郭忠达，阳志强．视网膜投影显示系统设计［J］．应用光学， 2011 ， 32 （ 2 ）： 222 - 225 ． doi: 10.3969/j.issn.1002-2082.2011.02.007 http://dx.doi.org/10.3969/j.issn.1002-2082.2011.02.007

YANG Z ， GUO Z D ， YANG Z Q . Design of retinal projection display system ［J］. Journal of Applied Optics ， 2011 ， 32 （ 2 ）： 222 - 225 . （in Chinese） . doi: 10.3969/j.issn.1002-2082.2011.02.007 http://dx.doi.org/10.3969/j.issn.1002-2082.2011.02.007

林俊国，丛强，许晨，等． MEMS激光扫描视网膜投影显示系统设计［J］．光学学报， 2017 ， 37 （ 12 ）： 1222001 ． doi: 10.3788/AOS201737.1222001 http://dx.doi.org/10.3788/AOS201737.1222001

LIN J G ， CONG Q ， XU C ， et al . Design of MEMS laser scanning retinal projection display system ［J］. Acta Optica Sinica ， 2017 ， 37 （ 12 ）： 1222001 . （in Chinese） . doi: 10.3788/AOS201737.1222001 http://dx.doi.org/10.3788/AOS201737.1222001

ZHANG Q ， SONG W ， LIU Y ， et al . Design and implementation of an optical see-through near-eye display combining Maxwellian-view and light-field methods ［J］. Optics Communications ， 2022 ， 510 ： 127833 . doi: 10.1016/j.optcom.2021.127833 http://dx.doi.org/10.1016/j.optcom.2021.127833

DO H ， KIM Y M ， MIN S W . Focus-free head-mounted display based on Maxwellian view using retroreflector film ［J］. Applied Optics ， 2019 ， 58 （ 11 ）： 2882 - 2889 . doi: 10.1364/ao.58.002882 http://dx.doi.org/10.1364/ao.58.002882

XIA J ， ZHU W L ， HEYNDERICKX I . Three-dimensional electro-holographic retinal display ［J］. SID Symposium Digest of Technical Papers ， 2011 ， 42 （ 1 ）： 591 - 594 . doi: 10.1889/1.3621389 http://dx.doi.org/10.1889/1.3621389

SONG W T ， LI X ， ZHENG Y J ， et al . Full-color retinal-projection near-eye display using a multiplexing-encoding holographic method ［J］. Optics Express ， 2021 ， 29 （ 6 ）： 8098 - 8107 . doi: 10.1364/oe.421439 http://dx.doi.org/10.1364/oe.421439

祁怡君，张秀敏，闫晓密，等．基于复振幅调制的全息视网膜显示［J］．光电子技术， 2018 ， 38 （ 1 ）： 19 - 22.2018.01.003 .

QI Y J ， ZHANG X M ， YAN X M ， et al . Electro-holographic retina display based on complex modulation ［J］. Optoelectronic Technology ， 2018 ， 38 （ 1 ）： 19 - 22 . （in Chinese）

SHRESTHA P K ， PRYN M J ， JIA J ， et al . Accommodation-free head mounted display with comfortable 3D perception and an enlarged eye-box ［J］. Research ， 2019 ， 2019 ： 9273723 . doi: 10.34133/2019/9273723 http://dx.doi.org/10.34133/2019/9273723

JANG C ， BANG K ， MOON S ， et al . Retinal 3D： augmented reality near-eye display via pupil-tracked light field projection on retina ［J］. ACM Transactions on Graphics ， 2017 ， 36 （ 6 ）： 190 . doi: 10.1145/3130800.3130889 http://dx.doi.org/10.1145/3130800.3130889

HEDILI M K ， SONER B ， ULUSOY E ， et al . Light-efficient augmented reality display with steerable eyebox ［J］. Optics Express ， 2019 ， 27 （ 9 ）： 12572 - 12581 . doi: 10.1364/oe.27.012572 http://dx.doi.org/10.1364/oe.27.012572

UENO T ， TAKAKI Y . Super multi-view near-eye display to solve vergence–accommodation conflict ［J］. Optics Express ， 2018 ， 26 （ 23 ）： 30703 - 30715 . doi: 10.1364/oe.26.030703 http://dx.doi.org/10.1364/oe.26.030703

JANG C ， LEE C K ， JEONG J ， et al . Recent progress in see-through three-dimensional displays using holographic optical elements ［J］. Applied Optics ， 2016 ， 55 （ 3 ）： A71 - A85 . doi: 10.1364/ao.55.000a71 http://dx.doi.org/10.1364/ao.55.000a71

XIA X X ， GUAN Y Q ， YANG F R ， et al . Eyeglasses-style Maxwellian-view near-eye display with lens‐array‐based holographic optical element ［J］. SID Symposium Digest of Technical Papers ， 2021 ， 52 （ 1 ）： 394 - 397 . doi: 10.1002/sdtp.14699 http://dx.doi.org/10.1002/sdtp.14699

王崝，曹良才，张浩，等．基于体全息的三维显示方法［J］．中国激光， 2015 ， 42 （ 9 ）： 0909003 ． doi: 10.3788/cjl201542.0909003 http://dx.doi.org/10.3788/cjl201542.0909003

WANG Z ， CAO L C ， ZHANG H ， et al . Three-dimensional display based on volume holography ［J］. Chinese Journal of Lasers ， 2015 ， 42 （ 9 ）： 0909003 . （in Chinese） . doi: 10.3788/cjl201542.0909003 http://dx.doi.org/10.3788/cjl201542.0909003

MI L T ， CHEN C P ， LU Y F ， et al . Design of lensless retinal scanning display with diffractive optical element ［J］. Optics Express ， 2019 ， 27 （ 15 ）： 20493 - 20507 . doi: 10.1364/oe.27.020493 http://dx.doi.org/10.1364/oe.27.020493

ZHOU P C ， LI Y ， LIU S X ， et al . Compact design for optical-see-through holographic displays employing holographic optical elements ［J］. Optics Express ， 2018 ， 26 （ 18 ）： 22866 - 22876 . doi: 10.1364/oe.26.022866 http://dx.doi.org/10.1364/oe.26.022866

LEE J S ， KIM Y K ， WON Y H . See-through display combined with holographic display and Maxwellian display using switchable holographic optical element based on liquid lens ［J］. Optics Express ， 2018 ， 26 （ 15 ）： 19341 - 19355 . doi: 10.1364/oe.26.019341 http://dx.doi.org/10.1364/oe.26.019341

JANG C ， BANG K ， LI G ， et al . Holographic near-eye display with expanded eye-box ［J］. ACM Transactions on Graphics ， 2018 ， 37 （ 6 ）： 195 . doi: 10.1145/3272127.3275069 http://dx.doi.org/10.1145/3272127.3275069

KIM J ， JEONG Y ， STENGEL M ， et al . Foveated AR： dynamically-foveated augmented reality display ［J］. ACM Transactions on Graphics ， 2019 ， 38 （ 4 ）： 99 . doi: 10.1145/3306346.3322987 http://dx.doi.org/10.1145/3306346.3322987

KIM S B ， PARK J H . Optical see-through Maxwellian near-to-eye display with an enlarged eyebox ［J］. Optics Letters ， 2018 ， 43 （ 4 ）： 767 - 770 . doi: 10.1364/ol.43.000767 http://dx.doi.org/10.1364/ol.43.000767

JO Y ， YOO C ， BANG K ， et al . Eye-box extended retinal projection type near-eye display with multiple independent viewpoints ［J］. Applied Optics ， 2021 ， 60 （ 4 ）： A268 - A276 . doi: 10.1364/ao.408707 http://dx.doi.org/10.1364/ao.408707

CHOI M H ， SHIN K S ， JANG J ， et al . Waveguide-type Maxwellian near-eye display using a pin-mirror holographic optical element array ［J］. Optics Letters ， 2022 ， 47 （ 2 ）： 405 - 408 . doi: 10.1364/ol.443004 http://dx.doi.org/10.1364/ol.443004

WANG L ， LI Y ， LIU S X ， et al . Maxwellian-viewing-super-multi-view near eye display using a Pancharatnam‐Berry optical element ［J］. SID Symposium Digest of Technical Papers ， 2021 ， 52 （ S2 ）： 533 - 536 . doi: 10.1002/sdtp.15187 http://dx.doi.org/10.1002/sdtp.15187

XIONG J H ， WU S T . Planar liquid crystal polarization optics for augmented reality and virtual reality： from fundamentals to applications ［J］. eLight ， 2021 ， 1 （ 1 ）： 3 . doi: 10.1186/s43593-021-00003-x http://dx.doi.org/10.1186/s43593-021-00003-x

XIONG J H ， LI Y N Q ， LI K ， et al . Aberration-free pupil steerable Maxwellian display for augmented reality with cholesteric liquid crystal holographic lenses ［J］. Optics Letters ， 2021 ， 46 （ 7 ）： 1760 - 1763 . doi: 10.1364/ol.422559 http://dx.doi.org/10.1364/ol.422559

YOO C ， CHAE M ， MOON S ， et al . Retinal projection type lightguide-based near-eye display with switchable viewpoints ［J］. Optics Express ， 2020 ， 28 （ 3 ）： 3116 - 3135 . doi: 10.1364/oe.383386 http://dx.doi.org/10.1364/oe.383386

SHI X L ， LIU J ， ZHANG Z Q ， et al . Extending eyebox with tunable viewpoints for see-through near-eye display ［J］. Optics Express ， 2021 ， 29 （ 8 ）： 11613 - 11626 . doi: 10.1364/oe.421158 http://dx.doi.org/10.1364/oe.421158

LIN T G ， ZHAN T ， ZOU J Y ， et al . Maxwellian near-eye display with an expanded eyebox ［J］. Optics Express ， 2020 ， 28 （ 26 ）： 38616 - 38625 . doi: 10.1364/oe.413471 http://dx.doi.org/10.1364/oe.413471

HE Z Q ， YIN K ， FAN-CHIANG K H ， et al . Enlarging the eyebox of Maxwellian displays with a customized liquid crystal Dammann grating ［J］. Crystals ， 2021 ， 11 （ 2 ）： 195 . doi: 10.3390/cryst11020195 http://dx.doi.org/10.3390/cryst11020195

WANG Z ， ZHANG X ， LV G Q ， et al . Hybrid holographic Maxwellian near-eye display based on spherical wave and plane wave reconstruction for augmented reality display ［J］. Optics Express ， 2021 ， 29 （ 4 ）： 4927 - 4935 . doi: 10.1364/oe.418329 http://dx.doi.org/10.1364/oe.418329

CHANG C L ， CUI W ， PARK J ， et al . Computational holographic Maxwellian near-eye display with an expanded eyebox ［J］. Scientific Reports ， 2019 ， 9 （ 1 ）： 18749 . doi: 10.1038/s41598-019-55346-w http://dx.doi.org/10.1038/s41598-019-55346-w

ZHANG S J ， ZHANG Z Q ， LIU J . Adjustable and continuous eyebox replication for a holographic Maxwellian near-eye display ［J］. Optics Letters ， 2022 ， 47 （ 3 ）： 445 - 448 . doi: 10.1364/ol.438855 http://dx.doi.org/10.1364/ol.438855

WANG Z ， ZHANG X ， LV G Q ， et al . Conjugate wavefront encoding： an efficient eyebox extension approach for holographic Maxwellian near-eye display ［J］. Optics Letters ， 2021 ， 46 （ 22 ）： 5623 - 5626 . doi: 10.1364/ol.444594 http://dx.doi.org/10.1364/ol.444594

WANG Z ， ZHANG X ， TU K F ， et al . Lensless full-color holographic Maxwellian near-eye display with a horizontal eyebox expansion ［J］. Optics Letters ， 2021 ， 46 （ 17 ）： 4112 - 4115 . doi: 10.1364/ol.437384 http://dx.doi.org/10.1364/ol.437384

Views

641

下载量

CSCD

Alert me when the article has been cited

提交

Tools

Publicity Resources

CJLCD | Retinal projection: Augmented reality near-eye display technology with panoramic focusing

No data

Related Author

ZHANG Xu

WANG Zi

TU Ke-feng

CHEN Tao

PANG Yu-jian

LV Guo-qiang

FENG Qi-bin

Related Institution

No data

AI问答

Address：No.3888 Dong Nanhu Road, Changchun, Jilin, China 130033 Postal code：130033
Tel：0431-86176059 Email：yjxs@ciomp.ac.cn
Technical support is provided by Beijing Founder electronics co., LTD 吉ICP备11002662号-17 京公网安备11010802024621
It is recommended to read the content of this site in Chrome&IE9+. Please switch to extreme mode in browser 360.
Cookies We use cookies to help provide and enhance our service and tailor content. By continuing, you agree to the use of cookies.

⁰