车载摄像头技术 — 360环视/DMS（六）

360°环视摄像头

环视摄像头系统用于将车辆周围的360°环视画面传输到座舱内的显示器上。车辆的周围环境从不同的角度进行显示，包括自上而下的鸟瞰图，消除了所有盲点，并在紧凑的空间内进行精确操控时增强了驾驶员的视野。

环视可以有两种不同类型的系统：

2D环视摄像头系统：该系统在座舱显示器上提供传统的二维鸟瞰图，显示车辆周围环境。来自摄像头的多个图像或视频传送被拼接在一起，形成平面的鸟瞰图。

3D环视摄像头系统：在此系统中，车辆及其周围环境以球形的3D表示形式显示。由于360°表示形式本质上是3D的，因此可以从车辆周围的任何角度获取所需的视图。

360°环视摄像头系统包括4-6个高动态范围、高分辨率的摄像头：后视摄像头，前置摄像头，以及两个超广角侧置摄像头。

所有四个摄像头的FoV均大于180°。环视摄像头系统执行两项主要功能：第一，摄像头校准和光度校准。第二，将所有视频流合并到一个鸟瞰中。所有鱼眼镜头捕获的图像均由ECU处理，以校正镜头畸变，然后拼合在一起以生成车辆周围环境的实时视图。除了将车辆周围环境的360°视角投射到座舱内的显示器之外，高端环视摄像头系统的视频传输还用于支持ADAS功能，例如交叉交通警报、后方碰撞警告、停车辅助、障碍物和VRU检测。

环视摄像头系统是计算密集型应用，需要具有宽DDR接口的快速强大的处理芯片来应对高数据带宽和低延迟要求。处理单元还应提供实时视频处理和渲染功能。

技术创新和成本效率的提高使360°环视摄像头系统可用于更广泛的车辆。包括博世、大陆、法雷奥、电装、摩比斯和Clarion在内的大多数Tier1，都为乘用车和商用车提供环视摄像头系统。

鸟瞰是一种用于汽车ADAS技术的视觉监控系统，可提供360°的俯视图。该系统的主要优点是协助驾驶员安全地停车。但它可以用于车道偏离和障碍物检测，尽管预测偏离的能力较小，而更多的是作为反应性警报。

DMS摄像头

驾驶员监控和座舱内感知是汽车摄像头日益增长的应用领域之一。 监控驾驶员的状态是安全部署L2+和L3自动驾驶的关键功能。基于摄像头的驾驶员监控基于计算机视觉技术，其中系统使用座舱内的摄像头来捕获驾驶员的面部参数，以确定注意力分散或困倦的程度，然后提供相应的视听警告，确保驾驶员保持警觉和清醒。

驾驶员监控摄像头正在越来越多地采用AI和深度学习技术来提高效率。驾驶员监控摄像头跟踪的面部属性包括面部检测、头部姿态、注视评估和人眼状态检测。人眼状态检测包括眨眼频率、眨眼时间和眼睛的闭合状态。深度学习技术是计算密集型技术，驾驶员监控摄像头模块需要高速的GPU才能实时处理所有信息。由于驾驶员监控摄像头系统已集成为ADAS系统的一部分，因此考虑功能安全性并确保软件堆栈的ASIL级认证是非常重要的。

---

from A to B