在2018年度的国际固态电路会议(isscc)上,有几项在影像传感器技术方面的新进展亮相,超越了以前着重在“选美”的影像撷取,添加了更多情境资讯;这些新进展包括了事件导向(event-driven)传感器、能解决运动中物体影像扭曲问题的全域快门(global shutters)新方法,以及飞行时间(tof)影像传感器。
具备动作侦测功能的cmos影像传感器
索尼(sony)在isscc发表的事件导向低功耗cmos影像传感器,就是一个为所撷取影像添加情境资讯的好例子,该公司的设计工程师团队直接在影像传感器内部布置了运动侦测(motion detection)功能。
在一篇论文中,sony详细介绍了一款1/4吋、390万像素(3.9megapixel)的低功耗事件导向背照式堆叠(back-illuminated stacked) cmos影像传感器,整合了像素读取电路(pixel readout circuit),能侦测每一个像素的运动物体。根据sony开发团队的描述,开发这款事件导向影像传感器的幕后动机,是为了满足那些低功耗、永不关机装置也要配备高画质成像技术的需求。
随着诸如家用保全摄影机、虚拟个人助理等无线连网装置崛起,物联网(iot)系统设计工程师也在寻找能延长电池寿命的小型解决方案,事件导向技术正适合保全系统应用;这类影像传感器内建了智能功能,能即时侦测运动物体。
sony的事件导向传感器具备像素阵列、列驱动器(row drivers)、列解码器(row decoders)、单斜率产生器(single-slope generation)、动作/光侦测功能区块、影像讯号处理器、讯框存储器sram、mipi连结埠,以及连结至传感器控制区块的cpu
(来源:sony)
如上图所示,当sony事件导向传感器侦测到运动物体时,cpu会产生一个外部中断讯号,利用晶片上的自动曝光,以零延迟触发对高画质影像的撷取。sony表示,该影像传感器利用每个像素区块共享之浮动扩散(floating diffusion)中的像素加总(pixel summation),实现了每秒10讯框的运动物体侦测。
sony位于美国矽谷的影像传感器设计中心资深嵌入式软体工程师abhinav mathur表示,该影像传感器的运作功耗仅1.1mw,而相同的全分辨率、每秒60讯框速率cmos影像传感器功耗为95mw;在事件纪录的应用中,此传感器能在摄影机系统的低功耗感测模式下显著降低功耗与资料频宽。
sony事件导向传感器功能区块
(来源:sony)
tof传感器技术进展
3d深度摄影机正夯,相关技术的竞争焦点在于更高分辨率、更低功耗以及更小体积;微软(microsoft)在isscc简报了应用于kinect 2动作感测装置的tof传感器进展,该传感器采用的是经过改善的连续波(continuous-wave,cw)式tof技术,号称将最新的tof传感器推向了百万像素等级。
microsoft的最新tof传感器
(来源:microsoft)
microsoft的团队认为,在市面上各种3d影像撷取技术中,cw tof成像系统能提供优异的机械强度、无要求底线,以及高效能深度影像分辨率、低运算成本,还有ir环境光强度不变 (ir ambient light invariant intensity)同步撷取──即主动亮度(active brightness)──等特性,因此该团队致力于改善cw tof摄影机的空间分辨率、精确度以及运作范围,同时降低其功耗。
此外microsoft也借由提升调变对比(modulation contrast)、量子效率以及调变频率来改善cw tof影像传感器的不确定性与功耗,消除了读取杂讯与模拟数字转换,同时以较小像素降低了光学堆叠的高度。
microsoft的tof传感器规格
(来源:microsoft)
小型像素(3.5 x 3.5μm)对新一代tof传感器在智能手机应用的竞争上非常重要,microsoft号称其方案具备商用全域快门rgb传感器竞争力,以及适用手持式装置的小型光学堆叠;该公司在isscc论文中介绍的1024x1024像素tof全域快门影像传感器,能在200mhz下达到87%的调变对比,采用台积电(tsmc)的65奈米1p8m背照式cmos技术。
像素内杂讯消除
松下(panasonic)在isscc展示其有机光导薄膜(organic photoconductive film,opf) cmos影像传感器技术最新进展──将opf cmos影像传感器中的光电转换功能与电路分离;借由这种独特架构,该公司团队将新开发的高速杂讯消除技术以及高饱和度技术整合至电路,同时利用传感器的独特敏感度控制功能来改变施加到opf的电压,因此实现全域快门功能。
opf cmos影像传感器与传统全域快门传感器的架构比较;panasonic声称其最新传感器是业界首款提供8k分辨率、60fps讯框速率、450k电子饱和度,并具备全域快门功能
(来源:panasonic)
在过去,广播电视与保全应用的高分辨率、高保真度摄影机,如8k超高分辨率电视系统与采用堆叠传感器方案的8k摄影机的共同缺陷,是采用滚动快门(rolling-shutter)而非全域快门。在全域模式下,快门运作能同步撷取所有像素的影像;而滚动快门模式的有机cmos影像传感器,则是以逐行(row by row)方式曝光与运作。
panasonic表示,滚动快门会导致失真问题,特别是在高速成像以及多视角影像合成应用时
(来源:panasonic)
panasonic新开发的传感器号称能即时撷取不失真的运动物体影像,该公司认为这对多视角与高速、高分辨率摄影机特别有益,例如机器视觉与智能交通监控系统的应用;而因为光电转换与电路能分开设计,利用像素内增益开关(in-pixel gain-switching)技术能达到高饱和度特性,电压控制敏感度调变技术则是借由改变施加至opf的电压来调整敏感度。
panasonic新开发的cmos影像传感器能撷取8k分辨率影像,甚至在高对比度的场景中;同时具备全域快门功能,可用全像素撷取同步影像
(来源:ee times)
支援200公尺距离的成像光达
东芝(toshiba)的工程师团队在isscc发表的是长距离、高分辨率光达(lidar)系统最新技术,利用来自目标物反射光子(reflected photon)的tof资讯;而因为其目标是距离量测(distance measurement,dm),该团队将支援距离定在200公尺,也就是一辆行驶于高速公路上的汽车,感测正在接近的其他车辆或物体的最理想距离。
而toshiba的团队也指出,若要在城市区域实现安全可靠的自动驾驶车辆,光达系统必须要有宽广视角与高分辨率,才能完整感知周遭情况;要实现此目标的一个棘手挑战是,光达系统得时常与强烈的背景光线(例如阳光)对抗,那也是光达系统最主要的杂讯来源。
车用光达系统的侦测距离要求以及toshiba的解决方案规格
(来源:toshiba)
toshiba介绍了一种结合时间至数字值转换器(time-to-digital converter,tdc)与模拟数字转换器(adc)的光达soc,配备了一种命名为智能累加技术(smart accumulation technique,sat)的功能,号称能让光达系统达到200公尺的视距以及自动驾驶车辆需要的高分辨率影像。
根据toshiba的说法,sat能利用来自adc的强度与背景光资讯,识别并累计仅从目标物反射的数据,因此与传统的累加技术相较,其分辨率能达到四倍。该tdc/adc组合架构放宽了adc采样率需求,以支援短距离dm精确度;此外该概念验证支援200公尺距离的光达系统,dm距离是传统设计的两倍,可实现240x96像素分辨率与0.125%的dm精确度。
toshiba光达方案与传统设计的性能比较
(来源:toshiba)
像素平行接合技术
不只panasonic,sony也注意到滚动快门影像传感器撷取运动物体影像失真的问题,指出像素内模拟存储器(in-pixel analog memory)与像素平行(pixel-parallel) adc虽是潜在解决方案,但这些技术都无法支援百万像素分辨率,因为它们都没有解决在一个像素中读写adc数字讯号的时序限制(timing constraint)问题。
sony在isscc论文中提出的方案,是利用具备每像素单一adc的堆叠影像传感器,在cmos传感器实现全域快门
(来源:sony)
sony的堆叠式背照cmos影像传感器,配备146万像素14位元adc,采用像素级接合技术(pixel-level bonding technology)。该公司表示,具备正向回馈电路的次临界值比较器(subthreshold comparator)有助于降低比较器运作电流与电路区域最小化,能降低功耗。
编译:judith cheng
(参考原文: rivals expand image sensor scope,by junko yoshida)
RabbitMQ中的路由模型(direct)
华为P10的发布:让华为Mate9无路可走?
中国电信终端洞察报告:5G手机SA的性能整体表现成熟稳定
ORC团队引领光学计量学大变革
新一代LED光耦电路设计,改进老化和能耗
2018年度的国际固态电路会议:几项最新影像传感器技术亮相
输出过冲原因及改善措施
使用Processing与Arduino进行交互将MPU6050数据进行3D建模展示
德州仪器AFE传感器技术助力汽车雷达系统探测道路的安全性
什么是磨床
匝间耐压(层间耐压)测试方法
如何利用Lora实现迷你气象站的设计
小米5C造声势小米6系统成亮点, iphone7Plus遇问题
21.5寸4K iMac拆解大曝光,内部芯片一览!
未来谁将成为Mini LED市场的主导者
RUCKUS AP R850表现如何?
汇川技术电液伺服方案助力冶金行业绿色可持续发展
电磁干扰的来源及屏蔽方法介绍
c++引用详细解说1
线性电源与开关电源的关系