安森美全系列智能感知方案推动AI发展

shuszhao · 发表于 2020-10-5 08:11:17

智能感知技术在汽车、机器视觉和边缘人工智能等领域应用越来越多。汽车是非常传统的行业，最近几年，电力化和智能化的发展为这个行业带来了新的动力，各种感知产品的应用使汽车变得更安全、更舒适。机器视觉同样是一个很历史悠久的行业，其应用广泛且多样化，涵盖了包括电子制造、平板检测、机器人、物流等在内的多个细分市场。目前，中国已成为全球机器视觉市场增长最快的国家。边缘人工智能是新兴市场，主要是由人工智能、5G、IoT等新技术推动，发展非常迅速。

图1：感知技术应用于汽车、机器视觉和边缘人工智能等领域。

安森美半导体近日举办了“智能感知策略及方案”在线媒体交流会，智能感知部全球市场及应用工程副总裁易继辉分析了重点应用市场的需求和趋势，介绍了安森美最新的智能感知发展策略，以及全方位智能感知技术和方案。

图2：安森美半导体智能感知部全球市场及应用工程副总裁易继辉。

CMOS图像传感器的发明者

安森美半导体在成像传感器行业有超过40年的历史，在传感技术方面经历了多次并购，如Cypress的 CMOS 图像传感技术，TRUESENSE 的 CCD 图像传感技术，Aptina 高容量的 CMOS 和汽车图像传感器。TRUESENSE的前身是柯达影像，柯达影像的核心技术来源于贝尔实验室CCD影像。Aptina前身是美国航天宇航局JPL喷气式推动器实验室。1993年，JPL为了阿波罗登月开发出全球首款CMOS图像传感器。27年过去了，CMOS图像传感器已经得到广泛应用。从三年前开始，安森美半导体又陆续收购了IBM在以色列的毫米波雷达研发中心，以及专注于飞行时间（ToF）激光雷达传感器开发的爱尔兰SensL公司，以满足汽车自动驾驶、机器人、医疗成像等对LiDAR及传感器融合的需求。

图3：安森美是CMOS图像传感器的发明者。

随着第四代工业革命的到来，人工智能对人类社会产生了巨大的影响。斯坦福大学人工智能专家、被人尊称为“人工智能之父”的Andrew Ng认为人工智能是新的电力，如同第二次工业革命电力一样，给整个人类带来了深入的改变；数据是人工智能的动力和发动机；感知是数据的燃料。 “安森美的全系列智能感知方案包括图像感知、多光谱、高光谱的感知，激光雷达感知、毫米波雷达感知以及传感器融合等，这一切推动了AI和第四次工业革命的进步，”易继辉说：“如果把人工智能比作大脑，我们就是为大脑提供眼睛。”

图4：安森美半导体的全系列智能感知方案。

汽车感知爆发式成长

未来的汽车是一个架在四个轮子上、具有极强感知能力的计算机。ADAS摄像头、倒车摄像头、环视360度，监控、电子车镜、驾驶员监控、乘务员监控、车内的、毫米波雷达和激光雷达，现在最好的汽车感知系统已经远远超过人类的感知。
“汽车成像是给人眼看的，如驾驶员、乘客、后视、环视、电子后视镜。安森美在全球占>60%的市场份额；汽车感知是供人工智能和机器视觉用的，安森美占全球>80%的市场份额，而且还在逐年扩大。”易继辉介绍说，在人眼视觉中，图像是为人眼所见并欣赏的，因此通常需要做到清晰、细致、色彩丰富且美观；而在机器视觉中，图像需提供足够的信息，例如边缘、形状、大小等，用于算法读取并理解。
汽车成像主要面临三大挑战：一是宽动态范围。如果动态范围不够宽，从汽车从车库或隧道出来时，可能只能看到暗处，或者只能看到亮处。二是环境条件，车要能在东北零下几十度的环境开，也能够在沙漠开或者南方高温条件下开。三是对图像传感器来说很独特的挑战：辨别LED指示牌、交通灯。图像传感器有时候因为频率不同步，经常捕捉不到信号，这对驾驶员人眼没有太大问题，但对机器视觉是很大的挑战。

图5：汽车成像面临三大挑战。

随着车联网的发展，未来的自动驾驶汽车不仅是“可靠的汽车”，更是“可信的汽车”，具有功能安全性和网络安全性。“Hayabusa是整个市场具有最高宽动态效果和第一款具有网络安全功能的产品，最近已经上市。”易继辉说。
易继辉提到智能驾驶舱也越来越受到重视，例如驾驶员识别、车椅位置调节、空调的温度、乘客监控等。

图6：智能驾驶舱可进行驾驶员识别、车椅位置调节、空调的温度和乘客监控等。

在谈到自动驾驶时，易继辉介绍L0~L5的概念。他说，L1叫做脱脚（feet off），脚可以自由；L2是脱手（hands off），手可以放开驾驶方向盘；L3是eyes off，驾驶员的眼睛可以不看了；第四级是mind off，脑子不用想了；第五级叫做limit off，已经没有任何局限，在任何场景都可以自动驾驶了。

图7：中国汽车驾驶自动化分级的智能感知配置。

“从L1到L5，传感器的数量和种类都是不断增加。最大的差别在L3和L4，L4一定需要激光雷达，对L3，激光雷达只是一个选项。”易继辉认为，“L3仍然需要驾驶员控制汽车，完全不需要考虑驾驶员。L3就像加减法，L4是微积分：加减法永远算不出极限值，只有微积分才能算出极限值，也所以只有在L4的情况下，才能涵盖所有极限情况。”

图8：安森美半导体汽车感知+视觉的总体方案。

毫米波雷达在L1~ 5的不同自动驾驶级别上有不同的应用。安森美开发了一种叫做“MIMO+”的专利技术，能够提供4D的信息：距离（R）、速度（V）、角度（A）、是高度（E），用于L3层级的自动驾驶。

图9：毫米波雷达技术在自动驾驶中的应用。

工业机器视觉和边缘人工智能应用

工业4.0、工业自动化、人工智能使机器视觉市场快速发展。边缘人工智能不断应用于一些新的领域，如新零售、智慧农业、畜牧业和农业。“在新冠病毒后疫情时期出现了一些趋势：一是远程化。远程教学、远程医疗会越来越普遍；二是无人化。无人送货车、无人商店，减少人和人之间的接触，即无接触化。”易继辉说。

图10：工业机器视觉及边缘人工智能市场增长。

易继辉介绍，平板检测是整个工业机器视觉行业中，对图像传感器最具挑战性的应用。从1K、2K、4K到8K，像素在逐渐扩大。检测过程分两步：第一步是暗检测，上电前主要检测一些指纹、划痕和其他物理上的问题；第二步是上电以后，特别是检测OLED和最新的AMOLED（Active Matrix OLED）。LED有一个亮板在后面作为发光源，而OLED和AMOLED的每个像素都是一个单独发光源。像素和像素之间发光的强度和色彩的均匀度都要能够很准确地侦测出来，因而对图像传感器的要求很高。过去检测LED面板上的1颗像素，对应需要9颗像素（3×3），OLED则对应需要16颗（4×4）甚至25颗（5×5）像素，这对图像传感器的像素要求越来越高，从4,500万到1.5亿像素，甚至超过2亿像素。

图11：平板检测对图像传感器要求很高。

从下图可以看出，图像传感器的分辨率逐年提升，从过去的200万、500万、800万、1200万，到现在超过2000万像素。对于同样尺寸的图像传感器，噪声导数逐年随着像素的增大而不断提高。带宽也是在逐年增加。易继辉举例说，一个29×29mm2的标准工业用摄像头，十年以前可能只是200万像素，后来逐渐增加到300万、500万、1200万，今年已经到了1600万像素，这是靠技术来推动的。这些技术包括：

[li]全局快门，在高速运动下使图像不会有拖影；[/li][li]像素内图像校正，以前是在系统里通过软件校正，现在直接做到硬件里，在像素内部做图像校正；[/li][li]工艺节点，从110纳米到65纳米，再到45纳米甚至更小，成本、尺寸、耗电量逐年下降；[/li][li]背照式，用来提高感光能力；[/li][li]堆栈架构，将模拟和数字信号放在第二层，人工智能的一些算法放在第三层，实现高智能化的图像传感器。[/li]

图12：1.3英寸固定尺寸图像传感器的发展。

“我们用NVIDIA Xavier Edge GPU做了人工智能训练，精度可以达到97%，其中AR1335 （1300万）图像传感器提供了很好的图像质量，提高了人工智能的判断精度。”易继辉表示，“我们的目标是工业机器视觉中怎么用上人工智能。”

图13：采用AR1335图像传感器的水果新鲜度分类系统。

无接触系统的成长潜力非常大。安森美半导体的AR0230 HDR具有200万像素及宽动态范围，能提供很好的图像质量，进而提高人工智能的判断精度，可应用于无接触付款以及飞机场、火车站、高铁站等无接触的通过闸口。

图14：人脸识别付款应用（AR0230 HDR）。

结语

从第一次工业革命机械化到第二次工业革命电力化，到第三次工业革命计算机数字化，到现在第四代工业革命人工智能化、信息化，人工智能对人类社会的影响和改变是远远超过计算机数字工业革命。如果把人工智能比作大脑，那么感知就相当于眼睛。安森美提供各种感知技术，如图像感知，多光谱、高光谱的感知，激光雷达感知、毫米波雷达感知、传感器融合等，所有这些技术都推动着人工智能和第四次工业革命的进步。