CMOS图像传感器技术的不断崛起
过去，图像传感器只是作为一种视觉感知工具，来帮助我们记录生活，但如今，随着技术的前进，尤其是AI技术的发展，图像传感器正逐渐应用在各种新型且更具挑战性的场景中。
图像传器成像技术正在发生一场革命，市场与技术双双驱动图像传感器不断崛起。
市场方面，根据市场研究公司Technavio的数据，预计全球CMOS（互补金属氧化物半导体）图像传感器市场在2020-2024年期间将增长101.5亿美元。
技术方面，在更小封装和更高分辨率的需求下，图像传感器的像素尺寸必须与填充因子一起减小，并且金属布线反射吸收要求必须降至最低。
目前，前端照明（FSI或FI）已经成熟，生产成本越来越低。尽管现在接近2微米的高分辨率传感器限制了光敏区域，但这却导致了更高的良率。添加到微透镜的其他光导已将尽可能多的光导引到有限的感光区域，但是1至2μm是像素大小的临界点。
同时，背面照明和AI等技术的加入正在让图像传感器走向更多的可能。
一、背面照明可提高图像传感器性能
背面照明（BSI或BI）提供了一种有趣的选择，因为控制电子设备不会限制光敏区域。但是，光以较低的量子效率（到达传感器的光子数与在终端收集的电荷载流子数之比）进一步传播。下图说明了背面和正面照明。
目前，制造商正在采用BSI并采用新的传感器设计架构，以改善低照度条件下智能安防和监控摄像机的灵敏度，信噪比和动态范围。
例如，索尼于2009年推出了5兆像素1.75 μm BI CMOS传感器，降低了复杂性并降低了相关的制造成本。HTCEVO 4G Android智能手机以及苹果的iPhone 4都使用了BI CMOS传感器——OmniVision Technologies 的BI CMOS传感器。
再比如，如今，SmartSens Technology 已开发出用于监视，汽车，机器视觉和消费类电子产品（例如运动相机，无人机和自动吸尘器）的高性能CMOS图像传感（CIS）。
通过采用“全局”而不是“滚动”快门设计，BI CMOS传感器性能得以提高，从而改善图像传感器在汽车，航空和制造业等高速应用中的表现。
虽然滚动快门传感器降低了成本并提供了良好的性能，但是在快速移动的物体以及不稳定或移动的相机中，它们的伪影很容易识别。而与滚动快门传感器从上到下读取图像不同，全局快门传感器同时将所有像素曝光到图像上，从而产生更多的噪音，更多的热量和更少的动态范围。虽然可以将滚动快门传感器这些不足最小化，但要付出高得多的代价，而且在高速或弱光条件下的，这些不足很显而易见。
二、AI加速采用图像传感器
人工智能（AI）及机器学习可以改变智能事物的未来行为——所有需要“眼睛”的场景，主要包括机器人，无人机和自动驾驶汽车这三类。
在高速汽车应用中，全局快门使准确制动并避免碰撞和障碍成为可能。
无人驾驶或传统车辆需要采用车载多重曝光，超高动态范围汽车传感器的技术，该传感器可在高速困难的照明条件下提供出色的图像。只有使用全局快门和高速BSI处理才能满足这些要求。
为了保证质量，实时维护并为虚拟机设计收集数据，以及在高速工业环境中发现小零件中的缺陷或有缺陷的机器，需要使用全局快门和BSI CMOS技术进行成像。
然后，工程师可以使用收集到的数据来播种生成型设计软件，以探索设计方案的排列，数字孪生子（虚拟和物理的组合）发现有效和无效的工具。有一天，这可能会在机器内部发生。比如由硅谷资深人士Andrew Ng（Landing.ai）创立的初创公司开发了一种机器视觉工具，该工具使用相对较少的样本图像，能通过机器学习算法来检测电路板等产品中的微观缺陷。计算机“查看”并处理信息，并从其观察中学习。
在某些特定的场景下，BSI CMOS发挥着重要的作用。
使用BSI CMOS的监控摄像头现在可以记录低照度/星光，其感光度等级从0.01 lux（清晰，月光明亮的环境）到0.001 lux（清晰，无月光的环境），并且数字噪声较低，使其适用于城市或仓库安全以及观察。
另外，大都市地区的执法机构越来越多地依靠BSI CMOS图像传感器技术来记录和识别高犯罪现场的人员，通常是在光线不足的情况下。人工智能和具有实时面部生物特征数据的深度学习行为系统有朝一日可以帮助执法机构在犯罪发生之前制止犯罪。
还有其他机构（消防，EMS，救援）正在使用配备BSI CMOS高清晰度摄像头的监视无人机来挽救生命并指导急救人员。搜索失踪儿童或迷路远足者的努力可以通过扫描能够识别特定人类生物特征的无人机来节省宝贵的时间和生命。
三、图像传感器助力探索火星
作为美国国家航空航天局（NASA）火星探索计划的一部分，“火星2020”火星探测器计划至少在一年内（或直到车轮脱落！）广泛地探索“红色星球”。预计2020年7月，“火星2020”将会发射，预计将于2021年2月18日登陆火星，踏上了这段将持续一年的旅程。
值得一提的是，“火星2020”严重依赖图像传感器。
在“火星2020”机上的23台摄像机中，有16台将执行工程和科学任务。其中，增强型工程相机可提供详细的地形彩色图像，以实现安全导航，硬件自检，引导样本收集以及将其引导至指定为科学目标区域的解决方案。
但如果没有BSI / FSI CMOS图像传感器（20兆像素，5120 x 3840像素图像）和集成软件，这一切都是不可能的。导航摄像机从其当前位置显示当前区域和所需区域的轮廓，使流动站及其地球上的团队可以使用这些数据。
如上图所示，HazCams在前方有四个，在后方有两个，可以检测到障碍物和危险，经常停下来抓取前方地形的立体图像，以自行评估难度和可能的替代路线。此外，它们还有助于引导机械臂收集样品并进行测量，而无需咨询流动站团队。
在科学的凸轮中，安装在流动站机器人手臂上的SHERLOC和WATSON尤其有趣。SHERLOC使用分光计，激光和照相机搜索因水而改变的有机物和矿物质。沃森（WATSON）为SHERLOC对矿物目标的详细检查捕捉了“大”的照片。WATSON可以精细地查看火星岩石的纹理和结构，以及岩石碎片和灰尘的表层，但是它可以被其他安装在手臂上的仪器使用。
CMOS AI / ML技术在任何地方都比医疗保健更有益。与机器学习相同的技术可以发现电路板上的针孔，评估火星地形或自动识别打印的字符，从而有助于定位和诊断曾经被医生忽略的疾病。计算机辅助诊断使用自动图像分析来提取统计推断，并应用模式分类器来确定所提取特征可能属于的类别。这在乳腺摄影和某些癌症中特别有用。
结语：
显然，图像传感器——“机器的眼睛”所提供的不仅仅是图片，他们能提供更多大数据分析以及更深入的信息，使我们对新的领域和现实有更深刻的了解。
