论文引用格式:Xu J T, Wang X Y, Wang T D, Chen X, Song Z X, Lei H, Liu G and Wen D S. 2023. Review on optical visual sensor technology. Journal of Image and Graphics, 28(06):1630-1661(引用格式:徐江涛, 王欣洋, 王廷栋, 陈忻, 宋宗玺, 雷浩, 刘罡, 汶德胜. 2023. 光学视觉传感器技术研究进展. 中国图象图形学报, 28(06):1630-1661)[所有作者为共同一作; * 通信作者:汶德胜 ven@opt.ac.cn0 引言光学视觉传感器作为视觉成像装备中的核心光电元器件,使装备可以像人眼一样捕获图像信息,在工业、医疗和天文等专业影像领域中都扮演着极为重要的角色。本文从CCD图像传感器、CMOS图像传感器、智能视觉传感器以及红外图像传感器方向介绍光学视觉传感器领域的发展历史、研究现状、前沿动态、热点问题和趋势。电荷耦合器件(charge-coupled devices,CCD)是一种以电荷包形式存贮和转移电子的半导体光电器件,是重要的图像传感器之一。作为图像传感器领域的一次革命性突破,相对于CCD出现前已经较为成熟的传统摄像器件(如真空摄像管、热释电管和硅摄像管等),具有小体积、轻重量、小功耗、长寿命、高灵敏度以及大动态范围等诸多优点。由于其优异的性能,CCD在星载对地遥感成像、高光谱及微光成像等领域得到广泛应用。本文从多光谱TDICCD、高光谱CCD和EMCCD三方面对CCD的最新发展进行了叙述。20世纪70年代初,CMOS图像传感器在NASA的喷气推进实验室(Jet Propulsion Laboratory, JPL)制造成功;80年代末,英国爱丁堡大学成功试制出了世界第一块单片CMOS型图像传感器件;2000年日本东芝公司(TOSHIBA)和美国斯坦福大学采用0.35 μm技术开发的CMOS有源像素传感器(active pixel sensor, APS)已成为开发超微型CMOS摄像机的主流产品。2012年,索尼发布了“堆叠式结构”的CMOS图像传感器芯片,将其命名为Exmor RS。2013年,三星电子首次发布ISOCELL技术,在像素单元之间加入物理屏障,能够降低约30%的光线串扰,并通过更广泛的视角来捕捉斜射光线。2017年,索尼又推出了3层堆栈式的CMOS图像传感器芯片,该芯片在两层电路中间新加入了DRAM层,使得数据的读取更加快速。2019年,三星宣布推出全球首款硬件直出的1亿像素超清CMOS图像传感器。2021年,索尼公司宣布其已成功开发出全球首个双层晶体管像素堆叠式CMOS图像传感器技术,饱和信号量约提升至2倍,增大动态范围的同时降低了噪声。CMOS图像传感器技术基于传感器工艺架构的不同,主要分为正照式、背照式和堆栈式图像传感器。早期的光学视觉传感器都是正照式结构,其组成结构由上到下依次是:微透镜、Bayer阵列、金属排线(电路层)、光电二极管以及衬底,由于金属排线(电路层)位于感光二极管上方,导致入射到芯片表面的光线不能完全入射到感光二极管。2008年索尼通过将传统晶圆绑定支撑硅片后进行晶圆翻转和减薄,推出了背照式CMOS架构的图像传感器,采用背照式架构,可以有效规避金属排线(电路层)对感光二极管的遮挡,使入射光线可以100%的入射到感光二极管,进一步提升了图像传感器的灵敏度。2012年索尼发布了世界第一款堆栈式图像传感器,堆栈式架构将原本在一个晶圆上的像素区域和电路区域,分别做在了两个晶圆上,并将两块晶圆绑定在一起,堆栈式架构在继承了背照式架构全部优势的基础上,进一步释放电路部分的设计优化空间,比如电路部分可以较像素部分采用更高制程的工艺,使电路部分可以更快、更高质的处理像素输出的数据。此外堆栈式架构的出现,使图像传感器的集成度得到进一步的提升,让各种强大而快速地片上图像处理功能成为可能。CMOS图像传感器技术与性能对比如图1和表1所示。10.11834/jig.230039.F001图 1不同架构的CMOS图像传感器技术Fig.1CMOS image sensor technology with different architectures10.11834/jig.230039.T001表 1不同架构的CMOS图像传感器技术性能对比Table 1Performance comparison of CMOS image sensor technology with different architectures序号主要性能正照式背照式堆栈式1填充系数一般100%100%2量子效率50%~70%85%85%3满阱一般一般高4成像速度一般一般快5集成度一般一般高随着图像传感器技术的快速发展,背照式及堆栈式架构已逐渐成为图像传感器的主流架构。目前手机摄像头是CMOS图像传感器的最大终端市场,但在汽车电子、医疗、安防、工业和物联网等领域的应用也在快速增长。手机领域追求高像素以及多功能化,像素从200、800万发展为目前的4 800万、6 400万,并且进一步向上提升。近年来手机摄像头由双摄像向多摄像过渡发展,功能上除了传统拍照,还有虚化、广角和长焦等差异化要求。安防领域对夜视、红外等要求较高,产品分辨率目前基本在200万像素(1 080 P),后续有望进一步提升至2 K/4 K。汽车领域目前对CMOS图像传感器芯片的像素要求不高,但追求芯片的可靠性与稳定性,受益于ADAS(advanced driving assistance system)、自动驾驶等技术发展趋势,汽车有望接力智能手机,为CMOS图像传感器发展贡献新动能。就工业设备而言,可以预测CMOS图像传感器在机器视觉方面的应用未来还会继续加速发展。红外线(波长0.75~1 000 μm)是自然界中存在最为广泛的辐射,在物理学中凡是高于绝对零度的物质都可以产生红外线。通过对红外辐射的探测可以实现对物质的探测定位、温度测量和构成分析。红外探测由于无接触、全天候、抗干扰以及作用距离远等优势,广泛应用于航空航天、生物医学、工业制造、国防军事、环境监测、光通信以及天文观测等领域。在军事上,包括对军事目标的搜索、观瞄、侦察、探测、识别与跟踪;对远、中、近程军事目标的监视、告警、预警与跟踪;在天文遥感上,用于对天体活动、水土资源进行观测;在民用领域,在工业、医学、消费电子、测试计量和科学研究等许多方面也得到广泛应用。随着智能化技术的发展,红外探测技术在自动驾驶、精准医疗等领域的应用将更广泛,地位更重要。红外探测器是将探测到的红外辐射转换为便于计量的物理量的器件,是红外探测系统的核心。在过去的几十年里,红外探测器技术发展迅速,大量的新型材料、器件不断涌现,红外光电探测器完成了第1代(1970s—1980s)的单元、多元光导器件进行光机串/并扫描成像向第2代(1990s—2000s)扫描型红外焦平面器件、第3代(2000s—2010s)凝视型红外焦平面器件的跨越,目前正朝着以大面阵、高分辨率、宽谱段、高灵敏、多波段和系统级芯片为特征的第4代红外焦平面技术的方向发展。在红外焦平面上集成具有高性能数字信号处理功能,甚至单芯片实现多波段融合探测与识别能力。本文按照近年来红外探测器重点发展的技术方向展开介绍,包括发展情况、主要研究机构以及技术水平。1 国际研究现状1.1 CCD图像传感器1.1.1 多光谱TDI CCDTDI CCD(time delay integration CCD)在扫描成像时,利用TDI CCD行频与扫描速度同步的关系,实现光生信号的累加,达到提高器件响应灵敏度和信噪比的目的。TDI CCD最为典型的应用是作为成像器件应用于卫星遥感对地成像。通过在多个TDI CCD上方的增加带通的滤光片实现不同波长范围的探测,最终采用图像融合方式便可获取彩色影像。目前国际上只有Teledyne DALSA公司(美国Teledyne下属公司,位于加拿大)提供星用多光谱TDI CCD产品。目前最新的多光谱TDI CCD产品如表2所示。10.11834/jig.230039.T002表 2Teledyne DALSA公司多光谱TDI CCD产品Table 2Teledyne DALSA multispectral TDI CCD products型号性能概要IC-33-04096分辨率:4 096 × 96像素(全色)5谱段像素尺寸:7 μm × 7 μm背照IC-27-12288分辨率:12 288 × 128像素(全色)5谱段像素尺寸:7 μm × 7 μm正照IC-50-12288分辨率:12 288 × 128像素(全色)5谱段像素尺寸:7 μm × 7 μm正照双向TDI扫描可以看出,目前国际上最新的多光谱TDI CCD发展水平为12 288像素分辨率、7 μm像素尺寸、5谱段光谱分辨分辨率。国际上目前发展了一些以欧洲微电子中心(Interuniversity Microelectronics Centre, IMEC)的CCD-in-CMOS工艺制作的 单片式多光谱TDI CCD(Bello等,2017)为代表的新型多光谱TDI CCD(图2和图3)。通常CCD采用专用的工艺线制造,而其驱动电路采用常规的板级电路实现,因而体积大、功耗高。IMEC采用通用的CMOS工艺,将驱动电路与CCD在单片实现,因而大大改善了器件的驱动复杂度同时降低了功耗,还可以实现片上输出信号的处理,极大改善了后续的应用复杂度。10.11834/jig.230039.F002图2IMEC的CCD-in-CMOS技术(Bello等,2017)Fig.2CCD-in-CMOS technology of IMEC (Bello et al.,2017)10.11834/jig.230039.F003图3IMEC研制的7谱段单片式多光谱TDICCD(Bello等,2017)Fig.37-BAND monolithic multispectral TDICCD developed by IMEC(Bello et al.,2017)1.1.2 高光谱CCD高光谱技术是利用分光棱镜或光栅等将入射光光谱分为几十个谱段甚至上百个谱段投射到图像传感器芯片上,以精细光谱分辨力获取目标信息, 从而在得到目标的图像的同时,还可获取目标的光谱信息,实现“图谱合一”的技术。由于CCD高均匀性、高动态和介质膜系等简单的特性,在高帧频保证下,目前星用高光谱探测器芯片大多采用CCD。国际上高光谱CCD的主要供应商为Sarnoff公司。Sarnoff公司开发了系列高光谱用CCD产品(表3)。10.11834/jig.230039.T003表 3Sarnoff公司高光谱CCDTable 3Sarnoff hyperspectral CCD型号CCD180-512-SFTCCD180-1M-SFTCCD160-256-SFT(NSX1.0)CCD160-256-SFT(NSX1.5)CCD160-256-SFT(NSX2.0)阵列规模512 × 5121 024 × 1 0242 048 × 2562 048 × 2564 096 × 256像素尺寸18 μm × 18 μm18 μm × 18 μm16 μm × 16 μm16 μm × 16 μm16 μm × 16 μm最高帧频500 帧/s150 帧/s1 000 帧/s1 000 帧/s1 000 帧/s输出端口数1632323264产品推出时间2007年2007年2009年2017年2017年CCD 160-256-SFT是Sarnoff公司最新推出的一款背照式高帧频大面阵可见光CCD,阵列规模为2 048 × 256,像元尺寸为16 μm × 16 μm,最高帧频可达到1 000 帧/s,32个输出端。国际上高光谱CCD的发展趋势为:1)更小像素尺寸、更高帧频。像素尺寸从18 μm发展到16 μm,帧频从500帧/s发展到1 000帧/s以上。支持高光谱成像仪已经由空间分辨率30 m、光谱分辨率10 nm发展到更高水平。2)更大阵列规模。阵列规模从512 × 512发展到4 096 × 256。支持高光谱成像仪的幅宽从几十公里逐渐增大到一百公里以上。1.1.3 EMCCDEMCCD即电子倍增CCD,是灵敏度极高的一种半导体光电探测器件。EMCCD在常规CCD的输出区域前增加一段多级倍增区,在高压(40~50 V)下雪崩倍增。EMCCD通过较高的增益,抑制器件的读出噪声,从而在弱光及极弱光下提高器件的信噪比。Andor 公司首先将EMCCD应用于在2001年发布的iXon系列高端超高灵敏相机上。此后,多款使用EMCCD的相机相继面世,极大推动了天文观测、生物医学和激光监控等领域的发展。EMCCD产品向以下方面发展:1)高速、高帧频EMCCD;2)大面阵、光子计数EMCCD;3)低驱动电压EMCCD。在天文观测中,自适应光学系统利用波前探测器实时测量成像系统的波前相位误差,所观测的目标信号比较微弱,采用高帧频的EMCCD是最佳的选择。Teledyne E2V公司开发了一款高帧频EMCCD型号为CCD220(图4)。CCD220像素尺寸为24 μm ×24 μm,最高帧频大于1 300帧/s,最大倍增增益大于1 000倍。采用背照技术,CCD220峰值量子效率超过90%。10.11834/jig.230039.F004图 4E2V公司CCD220器件实物(Feautrier等,2010)Fig.4CCD220 device object of E2V company (Feautrier et al.,2010)Teledyne E2V公司为加拿大开发了一款4 K × 4 K大阵列的EMCCD,型号为CCD282(Gach等,2014)(图5)。CCD282工作在光子计数模式,将用于加拿大10 m光学望远镜。通过降低驱动摆幅降低时钟感生噪声、深度制冷、高增益倍数(≥1 000倍)、90%的背照量子效率,达到光子计数的最佳性能。10.11834/jig.230039.F005图 5CCD282器件结构与实物(Gach等, 2014)Fig.5Structure and object of CCD282 device (Gach et al.,2014)由于EMCCD需要使用40~50 V的高电压以实现高的电子倍增增益,也会带来使用场景的限制。国际上发展了一些采用较低倍增电压的EMCCD。对于EMCCD,电子倍增主要发生在倍增区与相邻的电极之间的边界区域,边界区域界限越长,则倍增增益越大。Stefanov等人(2018)设计了一种低电压的EMCCD,通过增加倍增区与相邻电极的交界几何尺寸,实现了低倍增电压下相对较高的倍增增益。美国安森美公司设计了一种两相倍增结构,基于18 V左右的倍增电压,尽管低单级倍增增益,在多倍增级数(2 000级)的情况下,仍然可以获得适当的总倍增增益。同时,采用浮栅放大器自动判断是否倍增,可适用于日光到星光、高光到背光下全天时成像应用,例如监控、防卫/军事、科学及医疗成像、智能交通系统。1.2 CMOS图像传感器1.2.1 正照式架构CMOS图像传感器技术正照式架构CMOS图像传感器由于其自身架构的局限,填充系数偏低,灵敏度要低于背照式和堆栈式架构的传感器,但因其制造工序相对少,所以其成本也要低于其他架构的同类产品,因此对于一些应用环境光线可控、成本控制要求较高的场景,如工业检测、机器视觉等领域,正照式架构的CMOS图像传感器还有着广泛的市场应用,以Sony、AMS、Teledyne E2V等为代表的图像传感器企业推出了一系列正照式架构光学视觉传感器芯片。Sony作为光学视觉传感器领域的领军企业,引领了全球光学视觉传感器技术的发展。2017年推出了一系列4.5 μm的正照式全局快门图像传感器产品,产品分辨率涵盖7.1 MP、2.8 MP、2 MP和1.7 MP,该系列图像传感器采用了双ADC设计,使在同一帧图像上实现低增益和高增益两种数据信息,高增益实现高灵敏度和最小读出噪声,低增益可以提升芯片的满阱容量,通过相机ISP进行高低增益数据信息的处理结合,进一步提升了芯片的动态范围(表4)。此外,该芯片同时支持双重触发及自触发两种触发模式,使该系列正照式架构光学视觉传感器更好地满足工业领域的应用需求。10.11834/jig.230039.T004表 4Sony公司推出的正照式全局快门图像传感器产品Table 4Sony’s official global shutter image sensor序号主要性能IMX428IMX429IMX430IMX4321分辨率/MP7.12.821.72像素尺寸/μm4.54.54.54.53噪声/e-5.55.55.55.54动态范围/dB727272725成像速度/(帧/s)354313298AMS是奥地利一家光学解决方案的全球领导者,在传感、光源和可视化领域提供独特的产品和技术组合,于2016年收购了比利时CMOS图像传感器领先供应商CMOSIS,AMS自2012年起推出了一系列正照式全局快门图像传感器产品,并在如今的全球工业领域仍有着极为广泛的应用,最先推出了5.5 μm的正照高灵敏度、流水线式全局快门CMOS图像传感器产品,分辨率涵盖12 MP、8 MP、4 MP和2 MP,采用了真正的相关双采样(CDS),显著降低了固定模式噪声和暗噪声。该传感器集成了16个以上LVDS通道,使传感器实现了更高的成像速度。2016年推出了全新一代4.6 μm系列的正照式全局快门CMOS图像传感器产品,采用其专利技术的8T 晶体管像素结构,分辨率为20 MP和47.5 MP,采用了暗电平箝位等复杂的新型片上降噪电路,能够在弱光环境下捕捉到高质量的影像,并且能够提供绝佳的电子快门效率(表5)。10.11834/jig.230039.T005表 5AMS推出的正照式全局快门图像传感器产品Table 5AMS’s official global shutter image sensor product序号主要性能CMV2000CMV4000CMV8000CMV12000CMV20000CMV500001分辨率/MP248122047.52像素尺寸/μm5.55.55.55.54.64.63噪声/e-13138.61388.84满阱/ke-13.513.511.713.51514.55动态范围/dB6060616066646成像速度/(帧/s)3401801043003030美国Teledyne E2V作为国际领先的图像传感器公司,利用最新生产工艺以及像素设计技术,发布了Emerald系列图像传感器产品,像素尺寸涵盖2.8 μm和2.5 μm等,极小的像素尺寸,可以使客户获得更高分辨率,但同时降低光学镜头尺寸,降低整体系统成本(表6)。10.11834/jig.230039.T006表 6Teledyne E2V推出的正照式全局快门图像传感器Table 6Teledyne E2V produced normal global shutter image sensor序号主要性能Emerald 2 MEmerald3.2 M/5 MEmerald8.9 M/10 MEmerald12 M/16 MEmerald36 MEmerald67 M1分辨率/MP23.2/58.9/1012/1637.7672像素尺寸/μm2.82.82.82.82.52.53噪声/e-2.82.82.82.832.54动态范围/dB686667.567.567675成像速度/(帧/s)8068/5491/8031/2343321.2.2 背照式架构CMOS图像传感器技术背照式架构光学视觉传感器是在正照架构的基础上,对已经加工好的正照传感器晶圆进一步开展绑定支撑硅片、垂直翻转、衬底打薄、表面钝化、镀抗反射膜和焊盘刻蚀等工艺后,实现背照式传感器的制造。通过开展背照式架构的光学视觉传感器技术研究,可以使传感器像素实现100%的填充系数,进一步提升了芯片的灵敏度,所以此类传感器的主要应用领域为生命科学、天文和医疗等低照度应用场景,确保传感器在低照度场景下依然保持着高质量的成像效果,代表性的背照式架构光学传感器企业主要以Sony、Teledyne E2V为主。Teledyne E2V公司针对生命科学、天文成像领域,为了获得微弱的天体目标或细胞影像,在采用背照式传架构的基础上,同样会进一步提升像素尺寸,在其推出的一些代表性背照式产品中,像素尺寸普遍超过了10 μm,并且也在推出一些更大像素尺寸的背照式架构产品(表7)。10.11834/jig.230039.T007表 7Teledyne E2V推出的背照式传感器产品Table 7Background sensor product from Teledyne E2V序号主要性能CCD42-40CCD250-82CCD290-99CIS1131分辨率/MP416.4818.82像素尺寸/μm13.51010163噪声/e-352.52.34满阱电荷/ke-10013590/5峰值量子效率/%908580/注:“/”表示未知。此外,随着背照式技术的不断进步,针对工业领域的背照式架构传感器也在不断地涌现。面向工业装备领域,Sony研发了全新一代的背照式全局快门像素结构设计,发布了一系列2.74 μm的背照式全局快门图像传感器产品(表8),该系列图像传感器同样采用了双ADC设计,进一步提升了芯片的动态范围,并且该系列芯片支持微秒级超短的快门时间间隔。通过采用背照式架构,提升了芯片灵敏度,在保证同等成像质量的前提下,可以使图像传感器像素尺寸进一步降低,使芯片的分辨率可以做得更大。10.11834/jig.230039.T008表 8Sony公司推出的2.74 μm背照式全局快门图像传感器产品Table 82.74 launched by the company μ M-back global shutter image sensor product序号主要性能IMX540IMX541IMX5421分辨率/MP24.520.416.22像素尺寸/μm2.742.742.743噪声/e-2.12.12.14满阱/ke-9.59.59.55动态范围/dB7171716成像速度/(帧/s)3542521.2.3 堆栈式架构CMOS图像传感器技术为了满足传感器小型化和多功能化的应用需求,一种全新的传感器架构应运而生,这就是目前最先进的堆栈式架构光学视觉传感器技术(许佳佳 等,2014),该架构将原本在一个晶圆上的像素区域和电路区域,分别做在了两个晶圆上,并将两块晶圆绑定在一起,该种架构的出现使传感器的像素和电路部分可以进行独立设计及优化,使传感器电路部分可以与像素部分采用不同的制程工艺,使电路性能可以得到进一步的提升。晶圆绑定方式也从最早的硅通孔(TSV)连接,演变成了通过在像素层和电路层的连接面上构建Cu焊盘直接连接的方式进行连接,随着堆栈式架构技术的不断发展,使得未来更多数量的晶圆绑定成为可能,从而使具有集成图像处理功能的视觉传感器成为可能。Sony最先面向智能手机领域推出了一系列堆栈式架构光学视觉传感器技术,并在iphone、三星、小米和OPPO等多款手机上实现了应用,其主要特点是在像素层和电路层之间新加入了DRAM层(动态随机存储单元),DRAM层在整个CMOS模组当中充当缓存角色,用于存储像素层获取到的图像信息,因此大幅提升了传感器处理数据的速度。由于堆栈式传感器技术推出较晚,受当前技术的成熟度低和成本高的影响,目前的应用领域主要集中在手机等消费类领域。1.3 智能视觉传感器1.3.1 量子视觉传感器量子视觉传感器是基于CMOS工艺利用创新的半导体设计在每个像素元件中缩小了转换电容的电容值,从而极大地放大了每个光子产生的电信号。这种极高的信号放大率,解决了传统CMOS图像传感器内部噪声过大的问题,尤其在低照度条件下,光子产生的电信号极弱,传感器内部噪声覆盖信号,使得目标信息无法准确呈现,通过这种方式实现了在室温条件下的单光子探测和光子数分辨(Zizza,2015)。10.11834/jig.230039.F006图6光子计数图像传感器技术(Zizza,2015)Fig.6Quanta image sensor technology(Zizza,2015)(a) raw jot image data; (b) data at low magnification;(c) grayscale image after processing)2021年,美国Gigajot Technology公司推出了一款16.7 MP分辨率的3D堆栈式量子图像传感器(Ma等,2021),像素尺寸1.1 μm,噪声仅0.19 e-,该系列产品在可以室温下以全速工作状态进行光子计数,并具有高动态范围。与传统的小像素CMOS图像传感器相比,量子图像传感器的读出噪声性能提升了5~10倍,可实现以前无法实现的超低照度成像,适用于科学、医疗、国防、工业和航天等领域。1.3.2 三维成像视觉传感器三维成像视觉传感器能够获得图像的三维信息,在科学研究、工业检测、安全监控和消费娱乐等领域具有广泛的应用前景。目前,商用的三维成像技术主要有立体视觉技术,结构光技术以及飞行时间技术(time-of-flight, ToF)等。其中ToF技术具有低功耗和微型化的重要优势,能够满足便携式电子设备的需求,已成为目前三维成像视觉传感器的研究热点。D-ToF(direct time of flight)传感器通过使用高分辨率的时间数字转换器(time-to-digital converter,TDC)和通常由单光子雪崩二极管(single-photon avalanche diode,SPAD)实现的高增益光电探测器记录光子入射时间,直接测量光的飞行时间以计算深度(Ota等,2022)。尽管D-ToF传感器可以实现较长的探测距离,但其横向分辨率是有限的。这是因为每个像素通常需要大量的片上存储器和处理单元,以避免SPAD的光子检测概率和暗计数率的影响。在实现具有高横向分辨率的D-ToF传感器时,特别是在极端的环境光条件下,需要在功耗、动态范围和帧速率之间进行权衡。早期的D-ToF传感器采用正面照射(front-side illuminated,FSI)CMOS工艺实现,具有像素尺寸大和横向分辨率低的缺点。最近,D-ToF传感器采用了 3D堆叠BSI CMOS工艺,以实现小像素尺寸和高横向分辨率。在这些传感器中,像素阵列和逻辑电路可以首先在不同的芯片中单独优化,然后通过面对面键合技术连接。日本的Ota等人(2022)提出了像素化曝光控制和自适应时钟充电,将D-ToF传感器的横向分辨率提高至960 × 960,在3D堆叠的BSI CMOS工艺下,动态范围为143 dB,功耗为0.37 W。索尼公司使用小的像素群来进行光子检测以抑制背景光,在117 klux的背景光下实现的最大检测距离达到200 m以上(Kumagai等,2021)。I-ToF(indirect time of flight)传感器测量调制光的相移来间接计算深度。与D-ToF传感器相比,I-ToF传感器可以实现更高的横向分辨率。这是因为I-ToF传感器可以通过执行简单的计算来检测相移,而无需以像素为单位的大容量存储器和处理单元。然而,由于光源的发射功率有限和光电探测器的灵敏度有限,I-ToF传感器的检测距离很短。此外,I-ToF传感器有两个关键问题:移动物体的运动伪影和背景光的深度误差。为了抑制运动伪影,2020年,韩国的Kim等人(2020)提出了一种动态的伪4-Tap方法,可以在单帧中生成深度图像,并使用了过像素的MIM电容来实现120 klux以上的背景光消除。2021年,韩国三星电子提出了另一种具有3.5 μm 4-Tap像素和1 280 × 960分辨率的I-ToF传感器(Keel等,2021a)。在这个传感器中,使用了多重交错和伪随机调制方法来分别降低峰值电流和消除多用户干扰。早期的I-ToF传感器采用FSI CMOS工艺实现,具有像素尺寸大、横向分辨率低的缺点(Payne等,2014)。2018年,美国微软采用了BSI CMOS工艺来提高像素的灵敏度,以减少像素尺寸并提高横向分辨率(Bamji等,2018)。韩国三星电子采用了三维堆叠的BSI CMOS工艺,以进一步缩小像素尺寸并提高横向分辨率(Keel等,2021b)。为了进一步提高D-ToF传感器的横向分辨率,2020年,日本松下提出了结合D-ToF和I-ToF方法的H-ToF(hybrid time of flight)结构。通过检测短距离的相位,同时用长距离的计数光子创建一个稀疏的深度图,横向分辨率已经提高到1 200 × 900像素,深度分辨率可配置到10 cm(Okino等,2020)。2022年,韩国的Park等人(2022)提出了使用基于四级搜索和时间门控的Δ强度相位检测的像素内直方图TDC的H-ToF传感器,实现了80 × 60像素的横向分辨率和1.5 cm的深度分辨率。近年来用FSI CMOS工艺实现的H-ToF传感器原型,不仅实现了与I-ToF传感器类似的高深度分辨率,而且还实现了比I-ToF传感器更远的探测距离。总体来说,目前D-ToF传感器的分辨率已经提高到100万像素,SPAD阵列的功耗在高光照条件下显著增长。在未来,更智能的像素结构和信号处理单元有望实现具有高帧率的节能D-ToF传感器。具有高横向分辨率和深度分辨率的I-ToF传感器已经使用类似于CIS工艺的方法实现。然而,未来仍需要减少来自背景光的运动伪影和深度误差,以提高应用的可靠性。对于H-ToF传感器,可以采用 3D 堆叠BSI CMOS工艺来进一步减小像素尺寸并提高横向分辨率。1.3.3 仿生视觉图像传感器传统视觉传感器由快门统一控制曝光,以帧为单位记录动态影像画面。例如电影每秒记录24帧画面,但从机器视觉的角度来看,这种传统的传感器仍存在一定的应用缺陷,首先帧间可能丢失高速运动细节信息,因此传统视觉传感器向着高帧率趋势发展;其次每帧重复记录大量静态背景光强信息,因此高帧率高分辨率的视频流对后端计算造成更大的负担,并带来对数据通讯、存储更大的压力。国际上有许多机构从事高清高速成像设备的研究,代表性的高清高速摄像机如下:美国Fastec Imaging公司开发的IL5便携式高速相机支持在设定时间内快速实时存储高清图像,支持2 560 × 2 048像素的分辨率,帧率为634 帧/s。美国Vision Research公司开发的Cine Mag接口,数据存储速率高达每秒1 G像素。采用这种接口,秉承着灵活性、多功能性和易用性,开发了Phantom系列高清高速数码相机(Burgett,2018)。型号包括C210、M10、M310、M120、V1840、V2512等,最新的V2640型号高速数码相机于2018年发布。美国NAC公司生产的Memrecam HX系列相机分辨率为2 560 × 1 920像素,在全分辨率下帧率高达850帧/s。德国Mikrotron公司推出了一系列高速相机存储设备,如EoSens®QUAD1.1S高速相机,可以在高感光度的前提下,以2 500 帧/s以上的帧率拍摄分辨率1 280 × 864像素的高速图像。德国PCO公司生产的高速相机pco.dimax cs4采用高速CMOS作为光敏器件,帧率高达1102 帧/s,分辨率为2 016 × 2 016像素。在1 920 × 1 080像素的分辨率下,帧速率可以提高到2 128 帧/s。相较于传统视觉传感器,生物视觉系统在图像信息感知以及处理能力上表现更为优越。研究者受其成像特性的启发,摒弃了帧的概念,提出动态视觉传感器(dynamic vision sensor, DVS)和脉冲图像传感器。传统视觉传感器将运动场景量化为图像序列,而动态视觉系统图像传感器仅输出变化像素单元的光强信息,将动态场景量化为微秒级精度的高时间分辨率事件流,并向高速、高精度和小像素尺寸发展,目前代表性研究成果如下:2008年,Delbruck团队首次将DVS商业化,它仅输出不断变化的像素信息,并以微秒精度将动态场景量化为事件流(Lichtsteiner等,2008)。2015年,Delbruck团队使用可编程电容耦合放大器作为预放大级,并提出阈值减法代替复位法(Yang 等,2015)。该方法不仅提高了信号的完整性,并将时间对比灵敏度提高到1%。2017年,Suh团队使用行采样电路对相邻像素进行分组,并行处理事件数据,极大地提高了事件读取速度,像素尺寸减小到9 μm,事件输出数据速率高达300 Meps(Son 等,2017)。2017年~2020年,韩国Samsung公司推出了DVS-Gen2,DVS-Gen3,DVS-Gen4等型号的商用相机,空间分辨率扩展到1 280 × 960像素。相较于IniVation公司,动态范围小,最大仅100 dB。2020年, Suh团队使用像素尺寸为4.95 μm的Cu-Cu连接在两层晶圆中实现了像素电路(Suh 等,2020)。每像素功耗为122 nW,最大事件速率为1.3 Geps。栅极诱导泄漏方案用于抑制周期性噪声事件,同时为减少伪影采用全局事件保护功能。2020年,Finateu团队使用Cu-Cu连接工艺实现了一种新的4.86 μm像素大小的堆叠事件视觉传感器。传感器实现了事件数据压缩技术,并将事件率提高到1.066 Geps(Finateu等, 2020)。一些机构还提高了传感器输出事件数据的质量。由于DVS像素尺寸减小,它更易受到噪声影响并触发噪声事件。2019年,Li等人(2019)提出的动态视觉图像传感器可以抑制像素噪声。由于背景噪声的随机性,且在时间和空间邻域内不存在相关性,因此,该方法利用有效事件的时间和空间相关性来过滤掉随机背景噪声。2020年,Akrarai等人(2020)提出由DVS系统来完成DVS架构。DVS架构是由嵌入在几个相邻的DVS像素中心的冗余压缩电路实现的,它实现了事件数据的时空冗余压缩。另外,事件数据确实对绝对光强信息的测量,因此一些机构提出同步输出事件流与灰度值的动态视觉传感器结构。2011年,Posch团队提出可以直接使用对数光电探测器的输出电压作为其光强度信息的CeleX架构。当选择一个像素时,这个电压可以由光源跟随器读取,从而实现量化光强度(Posch 等,2011)。2014年,Brandli等人(2014)提出了一种动态有源像素视觉传感器,它共享一个光电二极管,并在像素级集成了APS和DVS,可以输出同步静态背景灰度信息和异步动态事件信息。1.3.4 微光高动态视觉传感器科技高速发展的时代,安防、汽车和计算机等领域的新视觉应用所需的灵活性更高,需要在室内/室外、白天/夜晚以及各种场景下实时工作。高动态范围(high dynamic range,HDR)传感器可以用来实现这一目标,它在高照度和低照度环境下都具有优异的成像性能。2002年,日本静冈大学Sony等研究机构合作,在0.18 μm工艺下,研究了不同光照条件下CMOS有源像素的噪声组成和分布规律,提出一种列级处理电路,利用多帧过采样(Kawai和Kawahito,2002)、增益自适应(Sakakibara等,2005)等新方法,提高了低光条件下像素的灵敏度和信噪比。2009年,他们详细分析了列并行相关多采样技术对噪声的抑制效果,主要是对1/f噪声和RTS噪声有明显的抑制效果。此外,他们还提出了有助于抑制RTS噪声的方法,在像素源跟随器中添加驱动电流开关(Kawahito等,2009)。2012年,静冈大学的Seo等人(2012)采用了一种列并行两级折叠积分/cyclic 17位精度ADC, 可以实现固定模式噪声为0.021 e-,1.2 e-像素随机噪声,85 dB的动态范围的效果。在0.01 lux照度下,图像传感器几乎没有可视的量化噪声。2012年,荷兰代尔夫特理工大学Chen等人(2012)提出CIS中的列并行数字相关多采样技术用于降低噪声。基于0.18 μm CMOS工艺的传统四管像素使用这种结构,采用列并行放大器和一个数字相关多采样(correlated multi sample, CMS)电路,可大大降低像素读出时的随机噪声。在黑暗条件下测量结果表明,该结构的噪声可达127 μVrms,通过降低读出噪声可使电路的信噪比提高10.4 dB。同年,他们提出同时使用CMS相关多采样、高增益列级放大器和像素内的BSF(埋沟源跟随器装置)的方法(Chen等,2012),以进一步降低TRN,根据实验测试,TRN可以达到0.7 e-。2015年,日本静冈大学的团队提出了一种新型像素结构,他们将利用穿透效应进行复位的掺杂结构取代了复位管,实现了220 uV/e-的转换增益和0.27 e-的读出噪声。2020年,瑞士洛桑联邦理工学院的团队提出一种新型5T像素结构(Boukhayma等,2020),不但能够达到250 uV/e-的转换增益,而且在像素内使用具有薄氧化层的源跟随器,将读出噪声降低到0.32 e-。2020年,日本东北大学的团队通过使用横向溢流集成沟槽电容器和杂质浓度非常低的p型Cz-Si衬底改进了像素工艺(Murata等,2020),实现了71.3 dB的信噪比和89.7%的量子效率。在产业界的研究中,不但满足微光应用的灵敏度和噪声要求,而且考虑了CIS动态范围指标。2005年,日本东北大学首次提出了基于横向溢出集成电容(lateral overflow integration capacitor,LOFIC)技术的动态范围扩展,使动态范围不受光敏单元的满阱容量的限制,动态范围可以大大提高(Sugawa等,2005)。2017年,索尼实现了3.875 μm像素尺寸的内置存储器和LOFIC技术(Sakano等,2017),将饱和信号扩展到224 ke-。2021年,安森美半导体公司推出一款像素尺寸为4.2 μm采用LOFIC结构的全局曝光CMOS图像传感器,在单曝光流水线全局曝光模式下实现了90 dB的动态范围,在双曝光滚筒(electronic rolling shutter, ERS)模式下可实现110 dB的动态范围(Sampath等,2021)。1.4 红外图像传感器自1959年Lawso研制出碲镉汞(HgCdTe, MCT)的长波红外探测器以来,红外探测器的发展前沿、技术引领就掌握在国外几家主要研究机构、厂商手中。近年来常用红外探测器材料有碲镉汞、InGaAs、InAs/InGaSb T2SL、量子阱等。利用这些不同材料的特性,围绕对红外探测器应用需求的不同,国外研究机构开展了一系列相关研究。1.4.1 大面阵红外探测器大面阵红外探测器广泛应用于空间红外遥感领域,在天文学观测、光度测量和气象观测等方面具有重要价值。为了平衡视场与分辨率之间的矛盾,解决途径之一就是采用高分辨率、超大规模的红外焦平面探测器组件,并通过拼接单片大面阵来获得更大的探测器阵列规模。国际上美国(Dorland等,2009)、法国(Nedelcu等,2018)、英国(Feautrier等,2022)、比利时(Gershon等,2013)的科研单位和企业均对大面阵红外探测器进行了探索和研究。美国在大面阵红外探测技术领域研究多年,实现了从1 K × 1 K、2 K × 2 K到4 K × 4 K及更大规模红外探测器的研制(史漫丽和凌龙,2017),目前在世界红外领域处于领先地位。美国洛克威尔科技公司(Rockwell Scientific Company, RSC)已研制出1 K × 1 K、2 K × 2 K、4 K × 4 K规模的大面阵红外探测器,读出集成电路(ROIC)的演进过程如图7所示。HAWAII-2RG(H2RG)应用于詹姆斯·韦伯空间望远镜,其CMOS ROIC的阵列规模达到2 K × 2 K(像元间距18 μm),并具有灵活的1/4/32输出配置,以兼容各种天文应用的高背景控制器(Bai等,2004)。基于H2RG架构还能够拼接实现更大规模的焦平面阵列,如4 K × 4 K的HAWAII 4RG-15(H4RG-15)红外马赛克焦平面阵列(Hall等,2016)。10.11834/jig.230039.F007图 7RSC ROIC的演进过程(Chuh等,2006)Fig.7Evolution of RSC ROIC(Chuh et al.,2006)美国雷神视觉(Raytheon Vision Systems, RVS)公司长期为天文学提供多种规模的高性能红外探测器芯片组件,阵列尺寸从1 K × 1 K至8 K × 8 K不等,像素间距范围达到8~27 μm,光谱响应范围达到0.4~28 μm(Starr等,2016)。图8中展示了雷神公司生产的碲镉汞4 K × 4 K(像素间距20 μm)的红外探测器阵列。雷神公司与罗切斯特理工学院(RIT)于2022年(Figer等,2022)报道了合作项目SATIN,以研发可应用于天体物理学研究的碲镉汞超大布局的新型红外探测器HELLSTAR,它将达到红外天文学史上最大的像素规模4 K × 6 K(像素间距10 μm)。雷神公司的长期目标是采用分子束外延的方式在大尺寸晶圆(8~12 英寸)上生长15 μm像元的8 K × 8 K或14 K × 14 K的大面阵红外焦平面阵列(李燕兰 等,2022)。10.11834/jig.230039.F008图 8美国雷神公司HgCdTe 4 K × 4 K红外阵列(Starr等,2016)Fig.8Raytheon HgCdTe 4 K × 4 K infrared array (Starr et al.,2016)美国Teledyne公司(Blank等,2012)、Zandian等人(2016)先后推出2 K × 2 K(像素间距18 μm)的H2RG焦平面与4 K × 4 K(像素间距10 μm)的H4RG-10焦平面,并在此基础上于2012年与美国夏威夷大学和GL Scientific合作开发了适用于地面天文观测的H4RG-15焦平面阵列,其规模可达到4 K ×4 K(像素间距15 μm),可操作性大于97%,功耗小于4 mW,暗电流小于0.01 e-/s。Teledyne公司于2018年成功研制并交付了近红外光谱光度计(NISP),它是欧洲航天局欧几里得项目中的有效载荷,用于研究宇宙中的暗能量与暗物质。NISP探测器系统由16个2 K × 2 K的H2RG红外传感器芯片组件、16个SIDECAR ASIC传感器芯片等模块构成,具有较高的带内量子效率、良好的空间均匀性、低读出噪声、低暗电流和紧密的分布等性能(Bai等,2018)。Teledyne公司Cheriyan等人(2022)为应用于地基天文学的COSMOS项目提供了8 K × 8 K(像元间距10 μm)的深低温CMOS相机,该探测器的量子效率高于90%,具有极低的时间噪声(小于1 e- rms)和暗电流(在-25 ℃ 时小于0.05 e-/p/s)。法国Lynred与Leti公司于2022年成功研制了应用于天文大规模阵列ALFA计划的2 K × 2 K(像元间距15 μm)碲镉汞近红外探测器阵列,该探测器具有较低的暗电流(低于0.1 e-/p/s)和高于80%的量子效率。1.4.2 宽谱段红外探测器近年来,宽谱段成像技术由于在遥感、矿产探测和生物医学等方面得到广泛运用而备受关注。2006年,日本发射了红外天文卫星AKARI,其有效载荷红外相机IRC可在近中红外波段(1.8~26.5 μm)下进行观测任务,在9 μm和18 μm下进行全天观测,可实现对天体目标进行宽视场的深度成像。其中的两款探测器阵列均由美国雷神公司提供,包括工作在1.8~5.5 μm波段,512 × 412规格的InSb探测器;以及工作在4.6~13.4 μm和12.6~26.5 μm波段,256 × 256规格的Si:As探测器(Onaka等,2007)。美国QmagiQ公司于2013年(Reisinger等,2013)报道了640 × 512(像素间距25 μm)QWIP长波红外焦平面阵列,工作波段为8~12 μm(测试后响应波段为7.5~11.5 μm),将该光谱窗口划分为200个单独的通道切片(每个波段20 nm),在40 K温度下,当积分时间为16 ms时,在整个波段的切片中NETD低于200 mK。该技术应用于2013年启动的Landsat 8任务中的地球观测热红外成像仪器。应变超晶格(SLS)技术的光谱响应可覆盖4~13 μm区间,且工作温度可提高至77 K附近,平均量子效率超过20%,具有制作宽谱段红外探测器的巨大潜力。NASA戈达德太空飞行中心与QmagiQ公司合作,于2012年推出了640 × 512混合型SLS宽谱段探测器,像素尺寸为20 μm,响应波段为4~12 μm,并搭配FLIR/Indigo 0402 ROIC。推出了1 K × 1 K SLS探测器阵列,响应范围为1~13 μm,并集成了5波段的滤波器(Jhabvala等,2020)。T2SL材料的能带可调,能覆盖3.1~30 μm波段,具有应用在高温工作下8~14 μm宽谱段长波红外探测器的巨大潜力(Kwan等,2021)。美国JPL于2021年(Gunapala等,2021)报道了一款基于锑化合物T2SL高温工作型势垒红外探测器(BIRD)焦平面阵列,它能够提供连续可调的截止波长,波段范围覆盖4~15 μm,可用于中波、长波红外探测,具有出色的均匀性和可操作性。1.4.3 高灵敏度红外探测器灵敏度是光电探测器最重要的性能指标之一,表示探测器捕获信号的灵敏程度,若数值越高,则探测器对弱光的探测能力越强。比探测率表征了探测器捕获弱信号的灵敏度,可通过降低噪声功率或提高光响应度来增加比探测率。由于暗电流噪声是红外探测器中不可忽略的噪声源,可通过抑制暗电流来降低噪声功率。同时,探测器的响应度由外量子效率与光电导增益决定,可以通过引入高外量子效率和高光电导增益的新结构、新材料来实现响应度的提升(张金月 等,2021)。德国AIM公司于2010年(Breiter等,2010)报道了基于碲镉汞的640×512(像素间距为15 μm)中波和长波探测器,其中中波探测器在配备F/4.6冷屏,积分时间为5 ms时,NETD小于25 mK;长波探测器的NETD小于38 mK(F/2,积分时间180 μs)。并于2015年(Lutz等,2019)推出了改进版640 × 512(像素间距15 μm)MCT长波探测器,其平均NETD约为20.8 mK(积分时间1.06 ms)。美国JPL于2010年(Nguyen等,2010)提出了InAs/GaSb超晶格长波红外探测器,在77 K、10.3 μm处(200 mV偏置电压下)的暗电流密度达到1.01×10-5 A/cm2,峰值量子效率为30%。并于2018年报道了InAs/InAsSb超晶格吸收层长波红外探测器,规模为640 × 512,量子效率达到37%,在60 K下,NETD达到21 mK。于2019年推出的640 × 512(像素间距24 μm)BIRD结构长波探测器的NETD可达到16.3 mK(尚林涛 等,2021)。美国西北大学Dehzangi等人(2020)于2020年报道了基于T2SL InAs/InAs1-xSbx平面型中波红外探测器的成像演示,截止波长为4.28 μm。探测器采用锌离子注入,可实现在77 K、偏置电压-80 mV下比探测率可达到9.12 × 1011 Jones,峰值响应率为0.68 A/W(3.35 μm处),量子效率达到23.5%(无防反射涂层),此时暗电流密度为1.23 × 10-6 A/cm2,R0×A为1.53 × 104 Ωcm2。日本宇宙航空研究开发机构JAXA于2021年(Katayama等,2021)报道了320 × 256和640 × 512(像素间距均为15 μm)规模的T2SL中波红外焦平面。为应用于地球静止气象和大气化学任务,探测器需要超高的灵敏度,并且要对甚长波区域(截止波长15 μm)进行响应。在20 K测试温度及-20 mV偏压下,暗电流密度为1 × 10-4 A/cm2,单元探测器的响应度约为0.1 A/W(15 μm)、比探测率可达到5.7 × 1011 Jones;在77 K、-20 mV偏压下,暗电流密度为4 × 10-2 A/cm2,单元探测器比探测率可达到1.3 × 1010 Jones。韩国i3system公司于2022年(Ko等,2022)报道了InGaAs短波探测器,在200 K工作温度下,平均量子效率为70.1%,在-0.1 V偏压下该探测器具有6.80 × 10-9 A/cm2的暗电流密度和2.33 × 1013 Jones的峰值比探测率;以及InAs/GaSb/AISb/GaSb T2SL短波探测器,在200 K下,截止波长为2.45 μm,平均量子效率为51.3%,暗电流密度为1.1 × 10-7 A/cm2,峰值比探测率为4.68 × 1012 Jones。1.4.4 双色/多色红外探测器双色或多色探测器同时获得多个波段的目标信息,能够有效抑制复杂背景、排除干扰,从而提高探测目标的能力。双色探测器主要有平面、叠层两种技术路线,如图9所示。10.11834/jig.230039.F009图9384×288 InAs/GaSb SL双色探测器下拍摄的图像(Rehm等,2011)Fig.9Three hundred and eighty-four × image taken under 288 InAs/GaSb SL two-color detector(Rehm et al.,2011)美国AIM公司于2007年(Münzberg等,2007)报道了基于锑化物T2SL的384 × 288 M/MWIR双色红外探测器,每个像素(40 μm)同时组合了3~4 μm和4~5 μm波段范围的光谱信息来进行目标探测,其成像质量较好。较长波段的NETD小于12 mK(F/2,2.8 ms),较短波段的NETD小于22 mK(F/2,2.8 ms)。为了减小尺寸和像元间距,AIM与IAF进行合作,将每个像素上的铟柱由3个减为2个,并保持信号积分时间重合,探测器尺寸减小为256 × 256,像素尺寸降为30 μm。雷神公司长期致力于制造双色红外焦平面阵列,曾为美国导弹防御局的SM-3项目(256 × 256,30 μm间距,L/LWIR FPAs)、美国陆军夜视和电子传感器理事会的TMT项目(640 × 480,像素间距20 μm,M/LWIR FPAs)、DBFM项目(1 280 × 720,20 μm间距,M/LWIR FPAs)等多个项目提供设备。并于2009年(Smith等,2010)报道了512 × 512(像素间距30 μm)的碲镉汞L/LWIR红外焦平面,其读出电路支持“集成后读出”和“集成时读出”两种操作,可选择单色或双色两种模式,该器件适用于弹道导弹防御等任务。后经过在分子束外延(MBE)生长和晶圆制造方面实施了改进,配备SB-410 ROIC后,测试发现L/LWIR双色探测器的性能接近单色液相外延(LPE)长波探测器的性能(Smith等,2010)。韩国亚洲大学Hwang等人(2021)和刘炜 等人(2021)提出了p-Ge/n-MoS2范德华异质结双色探测器,响应波段范围为406~1 550 nm,具有近光伏(-0.5 V)和光导(-3.5 V)两种工作模式,不同的反向偏置电压决定了可见光或红外光的响应度。英国Leonardo公司于2022年(Greenen等,2022)报道了碲镉汞M/LWIR双色红外探测器,覆盖范围为3.7~5 μm和8~9.4 μm,该探测器由GaAs基板上的金属有机气相外延(MOVPE)生长得到,像元间距为12 μm,并装配FLIR-1308 ROIC。通过对1 280 × 1 024阵列进行测试,发现在中波通道(积分时间16.5 ms)下,实际NETD与理论NETD(纯背景限制)的比值为1.15,缺陷约为1.78%(缺陷定义为NETD比值超过3、光子响应通量超过正负25%的像素比例),信号效率为46.79%(信号效率定义为光子通量与电子的转换效率);长波通道下(积分时间0.7 ms),NETD比值为1.05,缺陷约为0.33%,信号效率为56.17%。1.4.5 高温工作型红外探测器红外探测器通常需要工作在低温条件下以保证较低的暗电流,因为较大的暗电流会严重降低探测器的性能。然而配备制冷机又会增加探测系统的体积,提高成本和设计难度。因此为了降低成本、尺寸、重量和功耗,研究人员提出了高温工作型(HOT)红外探测器,其关键技术在于降低暗电流。非制冷探测器可工作在室温下,常用的热敏材料以氧化钒和多晶硅为主,前者在精度和灵敏度的性能较为突出,后者更易于实现量产(Glozman等,2006)。以色列SCD公司是InSb中波红外焦平面阵列的代表制造商,生产了多款性能稳定的HOT红外探测器。于2006年(Glozman等,2006)报道了可工作在100 K及以上温度的InAlSb中波红外探测器,由于使用外延生长材料获得了更高的p-n结质量,减少了生长复合(GR)中心的数量,因此显著降低了器件的暗电流。随着Al的加入,带隙增大,进一步提高了工作温度。经测试,该探测器的成像质量稳定、空间均匀性高,可应用于高质量成像仪、手持红外相机、导引头、瞄准吊舱及空中侦查等方面。SCD于2012年(Klipstein等,2012)报道了在GaSb或GaAs衬底上生长的具有InAsSb活性层和AlSbAs阻挡层的n型bariode中波探测器。通过去除窄带隙光子吸收有源层材料的损耗电场,来抑制GR电流,该器件的工作温度可达到180 K,NETD为43 mK。SCD于2022年(Klipstein等,2022)报道了基于T2SL的XBn和XBp探测器,验证了基于InAs/GaSb和InAs/InAsSb T2SL势垒探测器在中波波段内可在130 K下运行,在长波波段内可在77 K下工作,NETD为15 mK,如图10所示。10.11834/jig.230039.F010图10150 K温度下 XBn 2 560 × 20 485 µm间距Crane探测器的成像演示(Klipstein等,2022)Fig.10XBn 2 560 at 150 K × imaging demonstration of 20 485 µm spacing Crane detector (Klipstein et al.,2022)法国蒙彼利埃第二大学的Perez等人(2015)提出了基于nBn架构的InSb红外探测器,通过抑制SRH(shockley-read-hall)复合过程减小GR电流,来实现较高的工作温度。该器件在77 K时的暗电流为1 × 10-9 A/cm2。经测试,该探测器的工作温度可达到120 K。该团队于2019年(Perez等,2019)报道了非镓InAs/InAsSb T2SL红外探测器,用于全中波波段(3~5 μm)的检测,该器件可工作在135~140 K温度下。德国AIM公司于2019年报道了基于碲镉汞p-on-n 1 024 × 768(像素间距10 μm)长波红外模块的研制,预计NETD约为30 mK,像素可操作性大于99.3%。并于2022年(Lutz等,2022)报道了上述器件的研制成果,工作温度在100 K的性能表现良好,NETD约为30 mK,可操作性超过99.5%,帧频为120 Hz,截止波长为11 μm,公司下一步的计划是要将焦平面工作温度提高至100 K以上。非制冷红外焦平面探测器无需制冷装置,能够工作在室温状态下,具有体积小、质量轻、功耗小、寿命长、成本低和启动快等优点,在民用工业领域得到广泛应用与发展。美国密苏里大学Cheng等人(2011)设计了一种基于VOx的非制冷型L/LWIR微测热辐射计,其比探测率高达1.62 × 109 Jones。该器件的NETD在8~9.4 μm和9.4~10.8 μm波段分别为14 mK和16 mK,计算得到的吸收系数在两个光谱波段分别为59%和65%。德国的行星研究所于2022年(Helbert等,2022)报道了为Io任务设计的热红外多光谱成像仪TMAP,其中包括一个采用非制冷型1 024 × 768规格的微测热辐射计,其探测波段为4.5~16 μm,NETD小于50 mK。比利时XenICs公司研制了Gobi系列非制冷型的测辐射热计,规模为640 × 480(像素间距17 μm),响应波段为8~14 μm,NETD约为55 mK,具有较高的灵敏度,且外形紧凑、易于集成。1.4.6 红外偏振探测器偏振作为红外辐射的重要物理特性,红外偏振成像技术能够同时获取红外辐射强度与偏振信息,有效丰富了图像的特征信息。偏振探测能够有效区分人造目标与自然物体,可用于追踪导弹、探测地雷、探查水下目标和识别伪装等任务。偏振成像可分为分时成像、分振幅成像(Mudge和Virgen,2011)、分孔径成像(Pezzaniti和Chenault,2005)和分焦平面成像。其中,分焦平面成像的偏振元件直接集成在FPA上,因其体积小、集成度高以及系统稳定等优势成为当下偏振成像的主流方式。光学偏振元件作为传统偏振探测器不可或缺的部件,但是会导致其响应低、空间分辨率低、图像配准不佳以及成本较高等问题。若将具有各向异性的半导体材料作为光探测器的感光层,利用其天然的偏振光敏感性,将有效简化偏振探测器的设计,适用于制造新型的偏振光电探测器。美国陆军研究实验室于2001年(Beekman和van Anda,2001)将线性光栅刻蚀在量子阱长波红外光电探测器焦平面的像素上,并定性描述了偏振性能。相邻像素上具有正交光栅,可有效消除像素配准错误。该款探测器的尺寸为288 × 384(像素间距40 μm),可工作在凝视模式或微扫描模式下。2007年法国阿尔卡特—泰雷兹III-V实验室的Antoni等人(2007)发现小像素的偏振敏感量子阱红外光电探测器的响应度性能良好,可以集成到大面阵的焦平面阵列中。同年美国佐治亚州立大学的Perera等人(2007)提出了一款改进版隧穿效应量子点光探测器(T-QDIP)结构,耦合金属栅极之后可以制成具有波段选择性的偏振敏感双色红外探测器。法国Thales公司于2008年用线性光栅代替二维光栅成功地刻蚀在百万像素的长波红外量子阱探测器上。2014年美国范德比尔特大学的Hong等人(2014)研究了多层BP场效应晶体管中的电传输与光电效应,其各向异性可应用于偏振光电探测中。新加坡南洋理工大学的Liu等人(2016)于2016年通过研究ReS2的偏振敏感光响应,发现不同偏振态的入射光通过具有各向异性的ReS2后经历了不同程度的吸收,证明了晶体结构固有的各向异性性质,可用于实际的集成光学应用。俄罗斯莫斯科物理技术学院的Semkin等人(2022)于2022年根据石墨烯—金属结的光响应对栅极电压和偏振角的异常依赖性来实现中波红外偏振探测,经验证该探测器的偏振灵敏度较高(两个正交偏振的信号比可达到10)。2 国内研究进展2.1 CCD图像传感器国内在多光谱TDI CCD、高光谱CCD和EMCCD三方面也取得了重要进展,目前的器件性能达到了国际一流水平。10.11834/jig.230039.F011图11国产某五谱段多光谱TDI CCDFig.11A domestic five-band multispectral TDI CCD国内在高光谱CCD的研制上,突破了多抽头健壮性、垂直区高行频技术以及背照高量子效率等关键技术,后续将进行更大阵列规模的高性能高光谱CCD的研制。国内在器件表面镀滤光膜技术实现高光谱技术方面也取得了部分进展。国内在EMCCD的研制方面,突破了背照高量子效率、多抽头并行读出、高速低噪声放大器以及低RC时间延迟技术,基本达到了工程实用化水平。10.11834/jig.230039.F012图12中国电子科技集团公司第四十四研究所对标CCD220器件实物Fig.12Physical object of CCD220 device benchmarking in China Electronics Technology Group Corp.No.44 Research Institute2.2 CMOS图像传感器国内对于CMOS图像传感器技术的研究起步较晚,最初仅有少部分企业开展了面向手机等消费类领域的光学视觉传感器研究,随着我国不断推出对于集成电路产业的扶持政策,越来越多的企业开展了视觉传感器的研究。在科研领域,中国电子科技集团公司第四十四研究所、771所、772所、长春光机所等机构均开展了光学视觉传感器的研究,产品主要面向大型科学装置等应用。在商业领域,长光辰芯、思特威等一系列专注于视觉传感器研发的企业逐渐走向国际,市场份额逐步提升。2.2.1 正照式架构CMOS图像传感器长光辰芯成立于2012年,是国内一家专注于高性能CMOS图像传感器的设计的企业,总部位于长春,在国内杭州和大连、比利时安特卫普、日本东京设有研发中心。2016年起,该公司陆续推出了一系列正照式全局快门CMOS传感器,像素尺寸包括2.5 μm、3.2 μm和4.6 μm,分辨率最高可达152 MP,通过采用先进的电荷域全局快门像素设计,及真相关多采样降噪技术,进一步降低全局快门传感器的读出噪声,最低读出噪声仅为1.6 e-,可满足工业检测、新能源、智能交通以及人工智能等多样化领域的应用需求。10.11834/jig.230039.T009表9长光辰芯推出的正照式全局快门图像传感器产品Table 9Positive global shutter image sensor product launched by Changguang Chenxin序号主要性能GMAX2505/2509/2518/0505GMAX3265/32103/32152GMAX3809GMAX46511分辨率/MP5/9/18/2565/103/1529512像素尺寸/μm2.53.23.84.63噪声/e-1.8/1.8/2.7/1.643.27.64动态范围/dB65.5/65.5/66.9/65.866/66.4/67.370.765.85成像速度/(帧/s)290/290/139/15071/24/1665302.2.2 背照式架构CMOS图像传感器技术面向生命科学、天文和微光夜视等低照度成像领域,长光辰芯自2015年起推出了系列化的背照式架构CMOS图像传感器产品,其最新推出的亚电子读出噪声、适用于微光成像的背照式CMOS图像传感器GLUX9701,通过结合低噪声设计及先进的背照式工艺,使得该系列在超低照度环境(10-3 lux)下具备清晰成像能力,最低读出噪声为0.85 e-,且功耗仅为180 mW,更为重要的是,噪声分布的均匀性得到显著提高。10.11834/jig.230039.T010表 10长光辰芯推出的背照式架构传感器产品Table 10Backlit architecture sensor products launched by Changguang Chenxin序号主要性能GSENSE2020BSIGSENSE400BSIGSENSE4040BSIGSENSE6060BSIGLUX9701BSI1分辨率/MP4416.7361.32像素尺寸/μm6.5119109.763噪声/e-1.61.61.62.30.854动态范围/dB90.5966677895峰值量子效率95%@600 nm95%@570 nm90%@600 nm95%@580 nm90%@600 nm思特威创新性地研发了Voltage Domain SmartGS®技术,其最新的第二代 SmartGS®技术,采用大 Pixel 的 BSI 工艺设计,使暗光下的感光度、噪声和暗电流等性能均得到了进一步的优化,同时也采用了并行电压域读取结构,大幅提升了最大快门速度,完善对高速运动物体的清晰抓拍,同时基于上述技术,推出了一系列4 μm和4.2 μm的背照式全局快门图像传感器产品(Miyauchi等,2020),为智能交通应用减少光污染、赋能全天候应用及工业智能升级提供利器。10.11834/jig.230039.T011表 11思特威推出的背照式架构传感器产品Table 11Backlit architecture sensor products launched by Smart Sens序号主要性能SC130GSSC350HGSSC410GSSC910GSSC950HGS1分辨率/MP1.334992像素尺寸/μm44.24.2443动态范围/dB60626068624成像速度/(帧/s)240755050652.2.3 堆栈式架构CMOS图像传感器技术面向电影制作、无人机和专业摄像等领域,长光辰芯发布了全新GCINE系列中首款产品——GCINE4349,这是长光辰芯基于在工业级、科学级CMOS(sCMOS)和摄影级产品方面的技术基础而研发的一款堆栈式架构的传感器产品,该产品专为高端视频成像设计,采用4.3 μm像素设计,49 MP像素全画幅,支持多种读出模式下的 8 K或像素合并式4 K分辨率输出。同时芯片在16 bit ADC(64 ×1.2 Gbps sub-LVDS)采样下,8 K模式下帧频高达120帧/s,像素合并式4 K模式下帧频高达240帧/s。2.3 智能视觉传感器2.3.1 量子视觉传感器目前,国内对于量子视觉传感器的研究相对较少,尚处在起步的阶段。如香港城市大学和天津大学方面,针对量子视觉传感器的建模分析、噪声消除和图像重建等方面开展了研究。2.3.2 仿生视觉图像传感器领先的融合视觉传感芯片研发商锐思智芯,在事件驱动型传感器领域拥有超过8年研究经验,2022年7月发布了专门为高端成像应用而设计的融合视觉传感芯片ALPIX-Eiger,像素尺寸为1.89 μm,分辨率达到8 MP,通过搭载独创的Hybrid Vision 融合视觉专利技术,在像素层面实现了图像传感和事件感知的融合,可广泛用于手机、运动相机等小型化智能设备。豪威集团在2022年发布了产品级CIS/EVS融合视觉芯片OV60B10,该芯片采用豪威集团独有的in-pixel timestamp及相关的高速读出技术,相对于业界已有的Time stamping during readout方式,能大幅提高EVS的时间标签精度,并降低时间标的抖动,可广泛适用于超高速图像重构、高动态范围成像、ADAS、智能座舱、眼球追踪、物体追踪以及SLAM 等多种场景。仿生视觉图像传感器方面,2007年,香港大学Shoushun和Bermak(2007)提出了一种高速公平仲裁结构,通过调整相邻两次仲裁过程中的像素优先级,在一定程度上保证了所有像素仲裁优先级的一致性。2012年天津大学提出了基于AER方式的CMOS图像传感器(于璐,2012),模仿视网膜结构设计动态视觉信息的输出,采用双采样脉冲宽度调制电路,对像素结构和仲裁电路进行了行为级的建模和仿真,但没有进行流片验证。2013年天津大学提出了基于时间域的AER异步图像传感器像素设计(李东盛,2014),引入了一种新的时间误差方法,以8 × 8的像素阵列进行了仿真,同样未进行流片验证。2017年天津大学提出了一种时域灵敏度增强型的动态视觉传感器,通过在像素单元增加亚阈值区的MOS管个数来增强像素的灵敏度(徐江涛 等,2017)。2017年深圳大学发表了仿视网膜细胞的硅图像传感器像素设计和基于SMIC 0.13 μm工艺的动态视觉传感器设计采用基础的像素电路设计并以8 × 8像素阵列进行了流片,但芯片功能并未得到实现(陆河辉,2016)。Chen和Guo(2019)于2019年提出异步时基图像传感器可以融合时间对比度检测和亮度测量。DVS像素结构只对变化的像素和触发事件做出反应。脉冲宽度调制像素结构对变化的光强度信息进行量化。脉冲视觉图像传感器方面,2017年北京大学数字视频编解码技术国家工程实验室黄铁军团队提出了一种全新的视觉形式,称为视达(Vidar = Visual + radar)。视达受灵长类视网膜中心凹采样机制的启发,采用脉冲序列表达光的变化过程,能够有效在更为精细的时间尺度下保留物理光强变化的时序信息。基于视达模型,北大团队采用与传统相机同样的CMOS传感器和消费级的集成电路,研制出了脉冲视觉芯片和相机,实现空间分辨率400 × 250、时间分辨率25 μm,动态范围达到100 dB。2.3.3 三维成像视觉传感器基于飞行时间的三维图像传感器的研究方面,国内的许多高校、科研院所和企业作出了很大的贡献。2014年,西安电子科技大学基于0.18 μm CMOS工艺设计了一款256 × 256的CMOS图像传感器,像素为10 µm × 10 µm,该像素结构的特点是将像素分成两部分,减小了电荷的横向传输距离,提高了电荷的传输速度。2020年,天津大学的徐江涛等人根据TOF原理设计了双浮栅(floating diffusion, FD)节点且梯度掺杂的像素结构,并提出了一种对电荷转移不完全问题的校准算法,仅通过改变时序和处理数据便可提高传感器精度;以及一种时钟传输结构以消除因时钟传输带来的列FPN噪声,可以实现在100MHz调制频率下将调制对比度校准到98%以上(李嘉文,2020)。2020年,西安电子科技大学的朱樟明、杨银堂研究团队设计了一款DToF SPAD激光雷达传感器芯片。该DToF SPAD激光雷达传感器芯片在单芯片上不仅集成了核心感光器件SPAD及精准测距电路,同时该传感器具有多种测距精度优化和抗背景光干扰算法等功能,该传感器具有超30帧/s的刷新率,分辨率为32 × 32 × 4,同时该芯片在200 mW的功耗下可以实现12~15 m的远距离高精度探测,满足航空航天、无人系统、消费电子等应用对远距离三维感知的需求。深圳市灵明光子科技有限公司于2021年发布了自主研发、采用全球先进背照式3D堆叠工艺技术的D-ToF单光子成像传感器ADS3003,其物理分辨率达到了240 × 160,面阵尺寸为0.35英寸,室内环境下测量距离可达15 m,室外环境下可达5 m,帧率最高可达50帧/s,其综合性能达到了国际一流水平。芯视界在单光子D-ToF(SPAD)技术和应用落地上处于领先地位,是全球率先研究单光子D-ToF三维成像技术的先驱之一。2020年发布了QQVGA分辨率单光子(SPAD)面阵D-ToF传感器VI4310,分辨率为160 × 120、最高支持120 帧/s刷新率,在200 mW的整体超低功耗下(包括DSP和ISP算法)实现10 m的远距离探测,在单芯片上实现了核心感光器件SPAD Array及精准测距电路、图像处理算法等高度集成。2.3.4 微光高动态视觉传感器微光高动态图像传感器方面,2018年,中国科学院大学的团队针对科学级CMOS图像传感器进行研究(张元涛,2018),其基底构造与CCD传感器一致,而采用CMOS读出电路的结构,通过这种方式进一步降低系统噪声,同时保证了高灵敏度和大动态范围的成像要求。同年,南京理工大学的团队基于NSC1105图像传感器和NVT-5型像增强器, 对宽动态彩色像增强CMOS成像系统进行了研究(王逸伦,2018),实现了行驱动的优化及图像降噪、彩色化处理。天津大学研发了10-4 lux微光成像芯片和超高灵敏度128级TDI等成像芯片(Nie等,2016)等,满足国家重大应用需求。思特威公司凭借独有的双转换增益技术、聚焦视频成像的高动态范围等技术,研制了超星光级系列、车载系列和全局快门等系列芯片,可实现140 dB超高动态范围、0.58 e-超低读出噪声以及240帧/s图像采集帧率等性能,满足安防监控、机器视觉、智能交通以及消费电子等应用需求。2018年,思特威早于索尼发布了第一款背照式全局快门产品(许佳佳 等,2014),如今,这款国产自研的高端背照式全局快门产品,已经广泛应用在更多新兴机器视觉应用中。2.4 红外图像传感器国内从上世纪80年代后期陆续开始红外焦平面探测器的研制。尽管国内的第2代、第3代红外焦平面技术在材料、器件工艺、读出电路、杜瓦和致冷等方面取得一些进展,完成了几类器件的研制,但还有许多关键技术还没有完全突破,可靠性、工程化和通用化与标准化水平有待进一步提高;第4代产品刚开始进行技术突破,到目前为止,只有为数很少的工程化产品提供使用。虽然近几年国家在红外探测器技术方面加大投入,但总体水平与西方发达国家相比仍有较大差距。2.4.1 大面阵红外探测器国内研究大面阵的单位和公司有中国科学院上海技术物理研究所(上海技物所)、昆明物理研究所和华北光电技术研究所等。中国科学院上海技物所于2014年成功研制了640 × 512大规模T2SL红外焦平面器件,于2020年研制了规模达1 K × 1 K(像元间距15 μm)的T2SL长波焦平面。并于2022年(张阳 等,2023)提出满足工程化应用需求的对称式八杆的冷平台支撑机构,来支撑某航天项目的6 K × 6 K超大规模面阵红外探测器。同年报道了2 560 × 2 048(像素尺寸10 μm),中心距为1~1.7 μm的 InGaAs 焦平面探测器,峰值探测率优于1.0 × 1013 Jones,有效像元率达到99.7%(李雪 等,2022)。昆明物理研究所于2020年报道了2 K × 2 K(像素间距18 μm)的中波和短波红外焦平面器件,采用p型碲镉汞材料,通过B+注入,铟柱与读出电路互联,形成n-on-p平面结器件,在77 K测试温度下表现出较好的均匀性和较低的盲元水平(孔金丞 等,2020)。并于2022年报道了具有有效像元数超过99.9%、平均峰值探测率大于4 × 1012 Jones、暗电流密度为1 nA/cm2的2 K × 2 K(像素间距18 μm)碲镉汞红外焦平面器件(龚晓丹 等,2022)。华北光电技术研究所于2022年报道了一款1 280 × 1 024(像素间距10 μm)碲镉汞长波探测器(祁娇娇 等,2022),截止波长为9 μm,有效像素数不少于99.4%,非均匀性不超过4%。我国的大面阵探测器在规模和像素尺寸方面都努力向国外看齐,现已有诸多产出,但参数和性能方面仍存在一定差距。2.4.2 宽谱段红外探测器中国科学院上海技物所于2014年报道了320 ×256(像素间距30 μm) InAs/GaSb T2SL长波红外焦平面探测器(许佳佳 等,2014),响应波段为8~12 μm,在77 K测试温度下,探测器100%截止波长为10.5 μm,平均峰值探测率为8.41 × 109 Jones,盲元率为2.6%,不均匀性为6.2%。并于2019年(饶鹏 等,2019)以该探测器为核心部件,开发了高灵敏度长波红外探测系统,可实现信息获取噪声为0.065 mV,系统的NETD达到19.6 mK,黑体探测率达到7.72 ×1010 Jones。同年上海技物所报道了长波量子阱级联探测器(Zhou等,2019),宽带响应范围为7.6~10.4 μm,其光谱形状和线宽可根据薄势垒的厚度进行调整,同时对工作温度不敏感。该器件可以在超过液氮温度下工作,在77 K下,峰值响应度为63 mA/W,约翰逊噪声限制探测率为5.1 × 109 Jones;在30 K下,约翰逊噪声限制探测率可达到2.5 × 1012 Jones。中国科学院半导体研究所的Jiang等人(2019)和蒋洞微等人(2020)基于InAs/GaSb T2SL,研制了具有N-M-π-B-π-M-N结构的L/LWIR 双色探测器。在50 mV~-10 mV偏压下,蓝色通道在2~8 μm波长范围内的探测率为1011 Jones以上,在-50 mV~-80 mV偏压下,红色通道在7~12 μm波长范围内的探测率能达到1011 Jones以上。2.4.3 高灵敏度红外探测器中国科学院上海技物所于2022年(于春蕾 等,2022)报道了国内首个2 560 × 2 048(像素间距10 μm)InGaAs短波红外焦平面探测器,工作波段为0.9~1.7 μm,室温下暗电流密度为11.62 nA/cm2,峰值探测率达到1.11 × 1013 Jones,响应不均匀性优于3%,焦平面有效像素率高于99.7%,动态范围大于120 dB,并进行了演示成像。华北光电技术研究所于2020年推出了640 ×512,感光材料为碲镉汞或锑化铟,像素尺寸为10 μm、15 μm、25 μm的中波红外焦平面探测器,其NETD分别为30 mK、15 mK、13 mK。同年推出了1 280 × 1 024中波红外焦平面探测器,像素尺寸分别为10 μm、15 μm,NETD分别为25 mK、20 mK。武汉高芯科技于2018年(Tan等,2018)报道了640 × 512(像素间距15 μm)的基于InAs/ GaSb T2SL的长波红外焦平面探测器,在80 K工作温度下,8.1 μm处的光谱响应度为3.93 A/W,量子效率可达38.6%,峰值探测率为1.65 × 1011 Jones,以及99.5%的像素可操作性。该公司的碲镉汞制冷型红外焦平面具有较高的灵敏度和良好的画面均匀性,如规模为320 × 256、像素间距为30 μm的C330M中波红外探测器,其NETD(F/2)可达9 mK,有效像素率超过99.5%,动态范围超过80 dB。华北光电技术研究所于2020年推出了1 024 × 6碲镉汞长波红外焦平面探测器,像素尺寸(μm)为20 × 24,平均NETD为3 × 1011 Jones,有效像素率为99.5%,响应率不均匀性小于等于7%。昆明物理研究所于2021年报道了规格为640 ×512,像元间距分别为15 μm和25 μm的p-on-p碲镉汞长波探测器,两款探测器的截止波长为10 μm,NETD均不超过25 mK,有效像元数大于等于99%(郝斐 等,2022)。同时,国内许多学者针对提升探测器的灵敏度,提出了新的技术途径和器件。南京大学的Long等人于2016年提出并制备了一种将石墨烯夹在MoS2与WSe2原子薄层之间形成的p-g-n异质结构(Long等,2016),其内建电场有效抑制了暗电流,在室温下能够在可见光到短波(400~2 400 nm)波段内响应,尤其在近红外波段的比探测率可达到1011 Jones。北京大学Yin等人(2018)展示了基于二维Bi2O2Se晶体的红外探测器,它在1 200 nm处的灵敏度可达到65 A/W,室温下具有约为1 ps的超快光响应率,可通过改进晶体生长、探测器几何形状和制造工艺来达到更好的性能。华南理工大学的解博名等人(2022)报道了基于激子解离窄化机制的改进型层级器件,从而实现响应峰值为940 nm近红外窄带有机光电探测器,该器件峰值比探测率高达2.3 × 1013 Jones。目前国内有许多高等院校的科研队伍致力于解决探测器的高灵敏度的问题,已取得显著突破,需要与企业展开密切合作,推动产学研深度融合,尽快将技术途径等科研成果实现产出。2.4.4 双色/多色红外探测器华北光电技术研究所于2020年(邢艳蕾 等,2020)报道了一款S/MWIR MCT红外双色探测器,规模为320 × 256,像素间距为30 μm,平均峰值探测率为2.21 × 1012 Jones和2.13 × 1011 Jones。北京理工大学Luo等人(2022)提出了一种谐振腔增强型的胶体量子点(CQD)双波段红外光电探测器,可对短波和中波红外进行响应,响应度最大为1.6 A/W且探测率最高可达2 ×1011 Jones。中国科学院上海技物所胡伟达团队(Martyniuk和Rogalski,2022)于2022年提出了一种非制冷型双色红外探测器,其中BP/MoS2 p-n结用于中波检测,MoS2/Si n-p结用于近红外检测,形成BP/MoS2/Si的垂直范德华异质结构。室温下探测器在中波3.5 μm处的峰值探测率为6.4 × 109 Jones,比探测率为3.51 × 109 Jones,在近红外探测下的比探测率为3.34 × 108 Jones。高德红外于2021年公布了自主研制的国内首款百万像素级双色红外探测器,如今已实现量产。基于T2SL的C330S中长波双色探测器的阵列规模为320 × 256,像素间距为30 μm,波段覆盖范围为中波3.7~4.8 μm、长波7.7~9.5 μm,中波波段的NETD小于20 mK、电路动态范围超过76 dB,长波波段的NETD小于25 mK、动态范围大于80 dB,探测器的有效像元率超过99.0%,响应非均匀性小于8%,工作温度范围-45 ℃~+71 ℃。2.4.5 高温工作型红外探测器上海技物所于2019年(周易 等,2019)报道了基于InAs/GaAsSb 带间级联320 × 256 中波红外焦平面,该器件在127 K下NETD为55.1 mK,盲元率为2.3%。中国科学院上海技物所于2021年(Wang等,2022)报道了范德华异质结构的快速非制冷型中波红外探测器,其响应时间为13 ns,光响应度为2.5 A/W,量子效率大于85%,室温下的黑体辐射峰值探测率为2 × 1010 Jones,77 K下的峰值探测率为1011 Jones。昆明物理研究所于2022年(陈军 等,2023)报道了基于As注入掺杂p-on-p技术的640 × 512(像素间距15μm)中波红外碲镉汞探测器,工作温度为150 K,NETD小于15 mK。并配合该器件研制了重量小于270 g的探测器组件。中国科学院半导体研究所于2022年(She等,2022)报道了一种AlAsSb/InAsSb 超晶格势垒结构,以降低光响应的偏压依赖性,并研制了p-B-n T2SL中波红外探测器,在150 K时的截止波长约为5 μm。且在150 K、-100 mV下的暗电流密度为1.2 × 10-4 A cm-2,在峰值响应度处的量子效率为29%,比检测率为1.2 × 1011 Jones。国内红外非制冷探测器发展迅速,多家企业推出非制冷产品在各工业领域得到应用。北方广微致力于非制冷型红外焦平面探测器的研制与生成,旗下共7款非制冷型红外探测器,其中GWIR0202X1A长波探测器的阵列规模为384 × 288,像元间距为25 μm,响应波段为8~14 μm,NETD小于35 mK,热响应时间低于12 ms,帧频可达60 Hz。艾睿光电是国内研制非制冷红外芯片的领军企业,于2021年公布了世界第一款8 μm非制冷红外热成像探测器芯片,规模为1 920 × 1 080,能满足轻量化、高性能的需求,该技术应用于该公司多款产品上,如Asens汽车红外热像仪。该公司的非制冷型红外芯片共14款,像素间距有10 μm、12 μm、17 μm,其中像素间距为10 μm的RTDS101M红外探测器芯片采用非制冷型氧化钒微测热辐射计,光谱响应范围为8~14 μm,阵列规模为1 280 × 1 024,可操作率超过99.5%,NETD(f/1.0,30 Hz,300 K)小于50 mK,热响应时间低于10 ms,工作温度范围为-40℃~+85℃,帧频可达60 Hz。2021年,研制了8 μm的非制冷红外热成像探测器芯片,面阵规模为1 920 × 1 080,能够满足红外热成像仪轻量化、高性能的需求。高德红外推出的基于氧化钒晶圆级封装非制冷红外探测器可对8~14 μm波段进行光谱响应,具有高灵敏度,全系列的典型NETD小于40 mK,工作温度范围为-40 ℃~+85 ℃,规格有640 × 512(像素间距12 μm)、400 × 300(17 μm)、256 × 192(12 μm),热响应时间小于12 ms。该公司金属封装的氧化钒非制冷长波红外探测器有1 280 × 1 024(像素间距12 μm)、800 × 600(17 μm)、640 × 512(12 μm)、400 ×300(17 μm)规模,光谱响应范围为8~14 μm,工作范围为-40 ℃~+85 ℃,且热响应时间均小于12 ms,典型NETD分别达到50 mK、30 mK、40 mK、30 mK。大立科技推出的基于非晶硅非制冷焦平面探测器的光谱范围也可达到8~14 μm,以DLE1920-15 μm为例,其NETD(f/1, 300 K, 50 Hz)低于50 mK,规模为1 920 × 1 080,像素间距为15 μm,工作温度范围为-40 ℃~+60 ℃。2.4.6 红外偏振探测器华中科技大学的Li等人(2018)研究发现基于少层GeAs2的偏振敏感光探测器具有高度的各向异性,其振动能力和平面各向异性使得二维材料GeAs2成为探索层间耦合和未来光电器件应用的重要方向。郑州大学的Wu等人(2019)报道了一种基于石墨烯/PbSe2/锗异质结的偏振探测器并进行了高分辨率偏振成像的演示,证明该探测器具有高偏振敏感度(112.2)、宽谱段响应(紫外到中波波段)以及响应速度快等优点。中国科学院半导体研究所的魏钟鸣团队针对主族层状低维半导体,研究其光电各向异性在偏振成像领域的应用(赵凯 等,2022)。2017年该团队(Wang等,2017)基于二维GeSe研制出532 mm、638 mm、808 mm偏振敏感光电探测器,表现出良好的可重复周期、偏振角及显著的二向色比,证明少层GeSe具有集成SW-NIR光学应用的能力,可应用于偏振检测。Zhao等人(2021)研制基于准一维Sb2S3材料的偏振探测器,无需借助光学偏振片,即可进行偏振成像,在360~1 550 nm波段内的光谱响应较好。2021年该团队通过合金化的方法研制了基于Sb-S-Se纳米线(NW)的宽谱段偏振探测器,它在紫外—可见光—近红外波段内均具有良好的光谱响应和偏振特性,相较于Sb2S3偏振探测器具有更高的响应率(6.38 A/W)与探测率(1.63 × 109 Jones)。2022年中国科学院上海技物所的胡伟达团队(Chen等,2022)将动能匹配和能带匹配的范德华异质结应用于红外探测器,发现该BP/Bi2O2Se异质结红外探测器具有较高的偏振特性,在2 μm表现出17的大偏振比。北方广微GWPL0318X2A偏振探测器具有640 × 512规模,像元间距为17 μm,光谱响应范围为8~14 μm,NETD小于40 mK, 热响应时间低于15 ms,帧频可达50 Hz。该偏振探测器的偏振方向为0°、90°、45°、135°,消光比超过2,可应用于辅助面部识别、目标识别、油污检测以及道路检测等方面。3 国内外研究进展比较3.1 CCD图像传感器国内在多光谱TDI CCD、高光谱CCD和EMCCD三方面取得了重要进展,目前的器件性能达到了国际一流水平。国产多光谱TDICCD已经批量应用于高分辨率遥感成像卫星,国产高光谱CCD突破了关键技术,国产EMCCD基本具备了工程化应用能力。3.2 CMOS图像传感器通过对上述正照式、背照式和堆栈式架构的CMOS图像传感器技术的国际国内研究现状进行比较分析可知,在工业、医疗和天文等专业影像领域,国际和国内的视觉传感器企业所开展的研究方向基本一致,针对不同架构的传感器类型,均有着国际领先的代表性产品,如背照式架构研究方面,日本Sony推出了2.74 μm像素的系列化背照式全局快门产品,国内的思特威也同样推出了4 μm/4.2 μm像素系列化背照式全局快门产品;美国Teledyne E2V推出了一系列科学级背照式产品,峰值量子效率超过90%, 国内的长光辰芯则推出了科学级背照式CMOS视觉传感器产品,峰值量子效率最高可达95%。综合比较来看,国际的视觉传感器企业数量更多,产品丰富,并且在视觉传感器领域的研究起步早,拥有丰富的光学视觉传感器的技术基础,以Sony为代表的传感器企业引领了全球视觉传感器技术的发展。虽然国内在视觉传感器领域的研究起步较晚,但近些年随着政府大力支持集成电路产业的发展,推出了一大批产业扶持政策,越来越多的企业把研发方向放在了光学视觉传感器方向,使得我国的光学视觉传感器技术实现了突飞猛进的发展,推出了一系列具有国际同类领先水平的高性能视觉传感器产品,在全球图像传感器市场所占的市场份额逐步提升,研发能力已经达到国际同类的最高水平。3.3 智能视觉传感器由于我国CMOS图像传感器研究和产业化起步较晚,国内在CMOS图像传感器领域的研究与世界先进水平相比还有一定差距,不过近年来随着对该领域关注度的提升,越来越多的机构加入了该领域的研究。1) 三维成像视觉传感器。在三维成像视觉传感器方面,由于ToF技术对光学传感芯片要求相对较高,国外芯片产业发展较早且产业链较为完善,目前国外传感器芯片厂商在国内ToF产业链中基本占据着主导地位,国内智能端的三维图像传感器供应也都被日本索尼公司等公司垄断。同时,在相关的性能优化以及结构创新中,国内外也存在着较大差距。2016年,中国科学院半导体研究所报道了256 × 256分辨率ToF图像传感器,测距误差为1.6%。2018年,日本索尼公司推出了320 × 240分辨率的ToF传感器,1 m处的测距误差为5.9 mm。同年,索尼公司推出VGA分辨率ToF传感器产品IMX456QL,已广泛应用于各类智能终端,其1 m处分辨率约为6 mm。2018年,美国微软公司报道了基于光栅解调像素的1 024 × 1 024分辨率ToF图像传感器,测距误差达到1.2%。目前我国研究技术较之国外还有相当大的差距,这需要一定的时间和努力去弥补。2) 仿生视觉图像传感器。在仿生视觉图像传感器方面,经过对比发现,国内起步较晚。2012年、2013年天津大学研制出了电路但是没有进行流片验证,2017年深圳大学设计的动态视觉传感器进行流片后功能却未实现,一定程度上反映了与国外的差距较大。国外在2015年开始就对信号的完整性、灵敏度以及抑制噪声方面展开了研究并颇有成效。国内也对信号的灵敏度研究颇有进展,例如天津大学设计的DVS通过在像素单元增加堆叠的二极管连接亚阈值MOS管来增强像素的灵敏度,除此之外,Chen等人(2019)提出的ATIS可以融合时基对比度检测和亮度测量,也是国内动态视觉传感器的重要突破之一。3) 微光高动态图像传感器。在微光高动态图像传感器方面,虽然国内近几年在微光图像传感器方向的发展突飞猛进,但是与国外的先进技术相比,在转换增益、读出噪声、量子效率和动态范围等方向还是有所差距。从全球市场来看,索尼和三星是绝对的技术引领者和市场占有者,国内的豪威科技、格科微电子和思特威等企业在车载、安防等领域占据着一定的市场。另外,天津大学、上海集成电路研发中心以及中国科学院等单位也具有一定的技术实力。总体来说,我国CMOS图像传感器研究和产业化虽然起步较晚,但国内的众多高校、研究院所和企业都已经开展了深入的研究,积累了很多宝贵的经验和研究成果,为我国研制世界一流的CMOS图像传感器芯片产品提供了强有力的支撑。3.4 红外图像传感器在红外探测器发展方面,与国外科研机构相比, 国内的科研机构对于红外探测器的研究起步较晚。因此,欧美的科研机构一般处于“领跑”的状态,而国内的科研机构更多的是属于“跟跑”的状态:大多数红外探测器的开创性工作由欧美科研机构开展, 完善了红外探测的材料理论,建立了完整高性能的红外探测器生产工艺与生产设备。而国内的科研机构开展的主要是对其提出技术路线的跟随与优化,虽然可以在类别和功能已经逐步赶上,但在性能、规模和集成度方面与国外仍有较大的差距。此外在红外探测器的生产制造方面仍然受到很大的约束。大规模的红外读出电路的生产这一关键工序目前主要仍掌握在国外厂商,红外探测器材料生长、耦合和封装测试相关的仪器设备目前主要供应商也为国外厂商。需要国内的研究机构与产业界共同合作,推动红外探测器生产制造的国产化替代,减小我国红外探测器的生产周期、生产成本和生产良率,大面阵红外探测器国内外参数对比如表12所示。10.11834/jig.230039.T012表 12大面阵红外探测器国内外参数对比Table 12Comparison of parameters of large area array infrared detectors at home and abroad国家研究机构年份规模像素间距/μm美国RSC公司20042 K × 2 K1820164 K × 4 K15雷神公司20164 K × 4 K2020224 K × 6 K10Teledyne公司20124 K × 4 K1520228 K × 8 K10法国Lynred公司20222 K × 2 K15中国中国科学研究院上海技物所20201 K × 1 K1520222 K × 2 K10昆明物理研究所20202 K × 2 K1820222 K × 2 K18华北光电技术研究所20221 K × 1 K10另外,在民用非制冷领域国内的探测器厂商,如高德红外、艾睿光电、大立科技和飒特红外等,均在非制冷红外探测器方面投入了力量进行攻关, 并发布了很多非制冷红外相关的新产品,也具备了批量化的生产能力。基于中国更为广阔的应用需求, 国内非制冷红外探测器目前发展蓬勃、势头强劲。未来通过学术界与工业界的机构的合作,共同促进红外探测器的产业发展(表13和表14)。10.11834/jig.230039.T013表13国内外双色红外探测器对比Table 13Comparison of two-color infrared detectors at home and abroad国家研究机构年份波段材料美国AIM公司2007M/MWIR锑化物T2SL雷神公司2009M/LWIRL/LWIR碲镉汞意大利都灵理工大学2020M/LWIR碲镉汞韩国亚洲大学2021VIS/IRp-Ge/n-MoS2英国Leonardo2022M/LWIR碲镉汞中国复旦大学2019VIS/NIRMoS2/InAlAs/InGaAs半导体所2019L/LWIRInAs/GaSb T2SL北京理工大学2022S/MWIRCQD上海技物所2022NIR/ MWIRBP/MoS2/Si10.11834/jig.230039.T014表14国内外HOT红外探测器对比Table 14Comparison of HOT infrared detectors at home and abroad国家研究机构年份工作温度/KNETD/mK以色列SCD公司2006100 (MWIR)142012180 (MWIR)432022130 (MWIR)/77 (LWIR)15美国密苏里大学2011非制冷型 (L/LWIR)14/16法国蒙彼利埃第二大学2015120 (MWIR)-2019140 (MWIR)-德国AIM公司2022100 (LWIR)30行星研究所2022非制冷型 (MWIR,LWIR)50中国中国科学研究院上海技物所2019127 (MWIR)55.12021非制冷型 (MWIR)-昆明物理研究所2022150 (MWIR)15半导体研究所2022150 (MWIR)-北方广微-非制冷型 (LWIR)35艾睿光电-非制冷型 (LWIR)40注:“-”表示未知。4 发展趋势与展望1)多光谱TDI CCD方面。未来基于CCD和CMOS融合工艺的CCD感光—CMOS电路读出的多光谱TDI CCD架构将逐渐成熟并大量应用。2)高光谱CCD方面。未来围绕更高帧频、更大阵列规模、背照高量子效率宽光谱响应、背照高调制传递函数等技术进一步发展。以器件表面镀滤光膜实现高光谱探测的新型探测器技术也将继续完善并实用化。3)EMCCD方面。除了大面阵、光子计数等具有极致性能的EMCCD之外,低驱动电压EMCCD、具备全天时成像功能的浮栅放大器信号选择型EMCCD将继续发展。从全球市场来看,Yole公布的2020年CMOS图像传感器市场报告显示,CMOS图像传感器的市场价值达到了207亿美元,预计到2026年全球CMOS图像传感器市场总量将达到315亿美元。2020年7月,国务院印发的《新时期促进集成电路产业和软件产业高质量发展的若干政策》指出,中国芯片自给率要在2025年达到70%。而我国目前半导体自给率仅达到36%,国产化替代刻不容缓。因此,CMOS图像传感器的发展前景良好。随着自动驾驶、智能交通和机器视觉等领域的快速发展,对CMOS图像传感器提出更高灵敏、更宽动态范围以及更低噪声的需求,CMOS图像传感器的发展面临更高技术要求的挑战。因此,研究高量子效率、高满阱容量像素设计技术及低噪声高速度读出电路设计技术,对于提高我国图像传感器自主研发水平,满足国内对于高端CMOS图像传感器的需求,具有极大的科学价值和经济效益。背照式架构的CMOS图像传感器将成为传感器市场的主流产品,背照式架构传感器凭借超过灵敏度,已经成为生命科学、天文和广电等专业影像领域的第一选择,并且各个图像传感器企业均已经推出了面向工业领域的背照式全局快门传感器产品,未来随着背照式架构技术的不断成熟,制造成本逐渐下降,背照式架构的图像传感器将会在更多的领域实现应用,成为未来传感器市场的主流产品。高集成度的智能化视觉传感器将成为研究重点,随着堆栈式架构技术的快速发展,让视觉传感器实现小型化的同时,多功能化也成为全球在视觉传感器方向的研究重点,2020年索尼最新推出世界首款集成了AI(artificial intelligence)运算单元的智能化视觉传感器IMX500,通过堆叠式工艺,在传感器的逻辑晶圆上设计配备了DSP(digital signal processing),专门用于AI信号的处理和缓存,虽然该传感器在处理复杂的分析任务方面还存在瓶颈,但高集成度的智能化视觉传感器有可能打破传统的图像传感器和处理器分离的模式,必将成为各企业竞相研发的重点。ToF技术具有低功耗和微型化的重要优势,能够满足便携式电子设备的需求。近年来国内外不断展开研究,提出了各种高分辨率、低测距误差的ToF传感器结构。然而,目前ToF传感器仍存在量程与精度无法兼顾,抗背景光干扰差以及三维信息解算慢等问题,需要发展新型的设计技术。仿生视觉图像传感器未来可面向多传感器融合的神经形态工程系统发展。将视觉、语音及触觉等多神经形态传感器融合,应用于神经形态工程的智能感知系统。红外探测器经过近50年的蓬勃发展, 已经成功研制响应覆盖短波到甚长波,规模从长线列覆盖到8 K × 8 K大面阵,多色集成的各类高性能红外探测器,具有成像系统体积小、质量轻、功耗低、系统灵敏度高以及工作帧频高等一系列优点。然而,随着红外探测需求的进一步提升,如目标多变、背景复杂、复杂环境和任务多元等应用挑战还需要从以下几个方面进一步发展:1) 红外大面阵探测器均存在非均匀性问题,非均匀性影响探测精度,特别是在弱信号探测时尤为严重。解决该问题需要从红外探测器材料生长工艺,读出电路一致性以及读出电路与探测器耦合进行入手。2) 针对自动驾驶等复杂红外背景的应用,单一波段的红外探测器容易受环境变化的干扰,导致无法对目标进行准确识别。需要发展具有多维度信息获取能力的红外探测器,同时获取多个光谱维、偏振维的红外图像。3) 探测器向高集成度、小型化方向发展,这主要体现在像元间距越来越小,阵列规模越来越大。后端需要处理的图像压力越来越大,需要将整个红外探测系统与红外焦平面进行集成, 发展感存算一体的红外探测器,将智能化的处理技术在片上进行集成。发展新型红外微分探测器,将抑制复杂背景的功能置于读出电路端,实现暗弱目标探测的对比度和图像信噪比的提升。4) 提高红外探测器的环境适应性,红外探测器广泛应用的一个主要约束就是对低温环境的要求,如何降低高性能红外探测器的工作温度需求、降低工作功耗、提高组件封装的集成度也是未来一段时期的主要研究内容。
使用Chrome浏览器效果最佳,继续浏览,你可能不会看到最佳的展示效果,
确定继续浏览么?
复制成功,请在其他浏览器进行阅读
复制地址链接在其他浏览器打开
继续浏览