车载摄像头的技术趋势 — 智能摄像头(十)

片上系统(SoC)在单个芯片上集成了计算平台的大多数组件。摄像头SoC或视觉SoC将高分辨率成像、图像信号处理和神经网络处理集成到一个低功耗嵌入式平台中。摄像头SoC不仅能够捕获图像,而且能够根据加载到SoC中的算法进行实时处理。这使得摄像头模块具有快速的感知和决策能力。
由于紧凑的集成、更快的处理速度和图像通信带宽低,摄像头SoC越来越多地用于汽车应用中,尤其是在前置立体和单目摄像头中。这是因为仅需要将处理后的元数据传输到中央ECU。摄像头SoC提供的并行和多层图像处理功能可以融合来自多个摄像头的数据流,执行复杂的图像处理任务。由于低延迟、计算性能和低功耗,摄像头SoC使得汽车摄像头模块具有边缘处理能力。
Mobileye(EyeQ系列)、OV(OX01E10)、赛灵思(Zynq和Zynq UltraScale +)和安霸(CV22AQ,CV2FS和CV22FS)提供车规级摄像头SoC。
智能摄像头
智能化程度更高的摄像头模块是车载摄像头生态系统的新兴趋势之一。摄像头供应商正在将更多边缘计算功能集成到摄像头模块中,从而使他们能够检测并了解环境。智能摄像头是一个独立的视觉系统,它不仅可以捕获图像,还可以从中提取特定应用的信息。
通过融合多个传感数据流(例如RGB摄像头+NIR),在传感节点处添加智能。RGB摄像头+SWIR,RGB摄像头+激光雷达,RGB摄像头+雷达。半导体技术的进步,例如紧凑封装的多核处理芯片,图像加速器的开发以及集成ISP的摄像头传感器,都为摄像头模块的智能化提供了动力。
由于Euro-NCAP 2020的强制要求,DMS越来越多地部署在车辆中,使其成为5星评级所必需的主要安全功能。提供L2自动驾驶功能的量产车型或在开发L2.5/3的OEM,也依靠DMS来检测自动驾驶。智能摄像头模块将在此类系统的部署中发挥关键作用。摄像头模块中集成的图像处理和AI功能用于驾驶员注意力分散检测,车载算法可精确读取面部表情、头部运动和眼睑运动以确定驾驶员的注意力分散程度。
Eyeris、Affectiva、Compound Eye和Nauto等汽车初创公司正在开发智能摄像头模块或在边缘进行处理的智能摄像头。
索尼于2020年5月推出了其集成了AI的图像传感器(据称是全球第一个)。IMX500和IMX501图像传感器兼具处理能力和存储器,使其能够执行基于计算机视觉任务的机器学习算法。索尼提到,这项技术可以用于自动驾驶汽车和自动监控系统。
博世在2019年9月推出了名为MPC3的智能摄像头模块,该模块具有用于自动驾驶的AI功能。博世在其摄像头模块中使用了瑞萨的V3H SoC,以实现用于物体检测和分类以及交通标志识别的AI功能。

下次我们开始梳理一下摄像头模组的供应链。


from A to B

(0)

相关推荐

  • 车载摄像头供应链 — 博世/大陆

    车载摄像头的供应链由图像传感器.ISP.图像识别处理器等Tier2供应商和提供摄像头模组的Tier1构成.在许多特定应用的情况下,Tier1和OEM还会与图像传感软件开发商合作,提供基于AI和ML的图 ...

  • 【学术论文】图像去模糊系统频域优化设计

    摘要 在实际应用中,模糊图像清晰化处理难以在空域实现,为此需对图像进行频域转换,在频域中实现图像去模糊. 采用FPGA开发平台"硬件"实现图像处理,实时性强,但消耗资源过多,执行效 ...

  • 从小米摄像头事件,到物联网安全的“三重门”

    智能物联网出现之后,与之相关的安全问题就没有消停过. 不过,近年来像"黑客入侵心脏起搏器""黑客攻破车联网"这样能引发好莱坞式炸裂场面的事故新闻,已经不怎么让大 ...

  • 为什么摄像头模块功耗和EMI需要求助SerDes?

    本文来源:智车科技 / 导读 / 3年前,新A8成为首款具备L3级自动驾驶功能的量产车,它搭载12个超声波传感器.5个摄像头.4个中程雷达.1个远程雷达.1个红外摄像头,还有激光雷达(LiDAR). ...

  • 高通发布视觉智能平台SoC QCS605/603,集成AI、视觉处理引擎

    都说我们已经一只脚迈入了新的物联网时代,所有电子产品都可以自由接入到网络中,因此关于物联网市场成长速度是非常快的.高通昨天发布了全新的视觉智能平台(Qualcomm Vision Intelligen ...

  • 车载摄像头的技术趋势 — 传感器融合

    这次开始说一下车载摄像头的一些技术趋势,先说一下摄像头与其他传感器融合的部分. 传感器融合 传感器融合或数据融合是一种用于融合多个不同数据流的技术,旨在提高系统的整体感知和传感能力,超出了单独使用任何 ...

  • 特斯拉model 3的硬件进化

    特斯拉 Model 3是一款3年前的车型.然而,随着软件升级和硬件换代(从HW2.5到HW3.0),特斯拉承诺保持特斯拉Model 3的相关性,并为未来的全自动驾驶做好准备. 至少,这是他们的承诺. ...

  • 史上最强的移动芯片,却撑不起智能汽车的未来?

    近几天,几乎所有的PC相关媒体.社交网络都被一种全新的"燃气灶"所刷屏--大家热议着它独特的造型.它那高达9999元的售价.还有它的种种"船新"功能- 咳咳,说 ...

  • 大红大紫的ToF传感器,能成为物联网传感器的新宠吗?

    本文来源:物联传媒 本文作者:Vior.Liu ToF传感器火了. 从去年开始,一票传感器厂商和手机厂商的目光都投向了ToF传感器.直到今年,英飞凌.AMS等传感器厂商,以及苹果.华为.三星等手机厂商 ...

  • 特斯拉Tesla Model 3整体架构解析

    一辆特斯拉 Model 3型车在硬件改造后解体 Sensors for ADAS applications 特斯拉 Model 3型设计的传感器组件包括:8个摄像头,可在250米半径内提供汽车周围36 ...