车内交互的高阶玩法 人体姿态都是信号
真正的人工智能是懂你的喜怒哀乐,MINIEYE I-CS正在实现。
I-CS方案是MINIEYE新推出的智能座舱解决方案,基于计算机视觉技术与人工智能打造,包含驾驶员监测系统(DMS)、乘客监测系统(OMS)、物体识别与人车交互系统等功能。
MINIEYE成立于2013年,提供自动驾驶和智能座舱的感知解决方案。其产品实现了全车型覆盖,目前已有30多家车厂量产定点,10万辆以上商用车量产装配,已透露的合作车企有一汽、东风、吉利。
体态、表情触达人机交互
智能语音交互在日常生活已经普及,语音连续对话也在车上得到实现。这时候又出现“手势交互”、“表情控制”等功能,会不会“多此一举”?技术发展是为人服务,I-CS方案所提供的技能实用性又有多大?
9月27日,MINIEYE智能座舱事业部负责人杨一泓对I-CS方案具体针对的五大应用场景做了介绍。
事实上,五大场景贯穿了整个用车过程,从上车前开始,I-CS采用无感式身份识别与活体检测技术,同时具备2D及3D摄像头方案,当用户靠近传感器时,无需动作配合,即可快速完成活体判断并进行身份识别,主动为用户打开车门,快速登陆车机系统。
在驾驶过程中,I-CS拥有两套视线方案,能判断驾驶员视线是否落在前方路面、中控、AI助手、内后视镜等7个注视区内。视觉感知精度提升3倍,随时观测驾驶员的注意力。
当一人驾车出现疲惫时,I-CS能够实时监测驾驶员头部姿态、眼睑开闭程度、视线方向以及眨眼频率等,并根据不同行为特征实现疲劳程度的量化分为四个等级。今年,欧盟正式推出一套疲劳量化标准的打分体系,经测评后,I-CS的疲劳分级制度符合欧标。
多人用车场景下,也要考虑到乘车人的体验。其中,副驾及后排也可以用手势、动作调节车内功能。I-CS打通了前后排的互动空间,借助视线、手势、头部动作等多种自然身体语言的交互方式,可实现多人多位置便捷互动。在此场景下,智能座舱的功能权重不再局限于靠近中控的前排,是全车人都可享受的智能空间。
此外,I-CS具备儿童看护的功能,通过综合分析人脸属性、人体骨骼比例以及身长信息,能够准确判断成人与儿童。当识别到儿童,系统将主动触发儿童看护功能,持续对儿童进行状态、行为监测,并实时反馈给前排家长,提醒其采取必要措施。一旦有儿童被遗忘在车内,系统将提醒驾驶员返回,若长时间无响应则立即报警,阻止儿童被锁车内的惨剧发生。
回到开头的问题,这些使用功能在各种场景下的应用是否真的必要?杨一泓解释到,技术能力是必要的,具体的使用方式和场景是否深度考虑到用户需求与体验,是打造智能座舱要持续研究的过程。
“地面空间站”智能进化的四张王牌
MINIEYE在ADAS领域比较知名,今年上半年,MINIEYE在ADAS领域的累计出货量已达到22.8万套,同比增长245%,而在座舱感知技术上的研发,从2017年也已开始。
MINIEYE认为智能座舱会成为自动驾驶技术以外,推动汽车行业变革的又一“增量”,此次I-CS座舱感知量产方案的公布,对MINIEYE从自动驾驶扩展到智能座舱的转变很重要。
四年研究成果I-CS的核心能力是什么?MINIEYE亮出四张“王牌”。
首提“自然身体语言交互”概念。自然身体语言(Intuitive Body Language)的底层交互逻辑是将“人车交互应该像人与人交流一样自然流畅”的理念植入I-CS方案,充分利用直觉式肢体动作,形成自然用户界面,将自然身体语言转化为对车机的指令,从而降低学习成本,减少车内多人时的尴尬体验。
二是全栈自适应。MINIEYE可根据主机厂与一级供应商的不同需求,提供灵活封装的软件解决方案。可适配多摄像头模组及位置、支持CPU/GPU/DSP方案。MINIEYE对于不同摄像头位置,包括仪表盘、A柱、内后视镜、中控、方向盘管柱都有相关经验,而DMS甚至没有ISP也可以很好适应。
除此之外,针对摄像头产生变化的系统,MINIEYE开发了一套全新系统“Mini-Cali”。以往用户需要完成一个视线对于区域座舱落点的功能,视线每变化一次,摄像头位置就难以把握座舱坐标。Mini-Cali系统可以将摄像头坐标和座舱坐标自动转换,调节了方向盘依然可以找到视线精准落点。
三是高性能计算,I-CS自主研发的MiniDNN加速器可以根据硬件特点,对其常用的神经网络模型进行优化,对I-CS常用的神经网络模型,可达到理论峰值的优化。这项自研技术对集成式座舱方案为未来OTA升级奠定基础。
四是开发工具链完备。MINIEYE建立起一套完备的自研开发工具链以及数据半自动标注平台。杨一泓表示,MINIEYE愿意与客户能力共享,无论是开发的自研供应链,还是基于不同功能的系统、可视化软件都愿意开放给客户,加速整个项目的量产落地。
车云小结
自动驾驶供应商开始提供智能座舱方案,意味着智驾与智舱的关系越来越紧密。
在人还没有开启驾驶动作、甚至还未进车内,就已经与车产生了连接,提前发现驾乘人意图,是一辆聪明的车该干的事。
MINIEYE等技术研发供应商在整条智能汽车产业链处于中上游位置,关乎汽车升级的进程。MINIEYE认为,智能座舱的未来发展趋势一定是多模态不断融合的,为用户提供主动式交互服务。