电动汽车的研究
主持 亚博体育
电动汽车的研究
发布2021年9月6日 通过

人工智能检测司机正在做什么

人工智能检测司机正在做什么
司机是累了还是睡着了?汽车内部的摄像头已经可以监测到这一点。特别是在自动驾驶的情况下,车内摄像头是重要的,而且是法律规定的。一种新的系统由弗劳恩霍夫研究所IOSB是世界上第一个能够利用图像数据得出关于驾驶员活动的结论,并分析他们控制车辆的速度。
在自动驾驶中,车辆决定它需要做什么——转向、刹车和加速。然而,在汽车能够完全摆脱驾驶员之前,半自动汽车将支持任何驾驶人,从而给他们越来越多的自由。在半自动汽车的情况下,从车辆到司机的转换仍然是需要的,这是不言而喻的,例如,如果有施工工作在高速公路上或当从高速公路上驾驶过渡到城市。因此,车辆必须在两个层面上实现智能:它必须能够解读交通状况,监控车辆内部的情况,以及与司机进行交互。司机在做什么?他们能多快控制车辆?虽然已经有了驾驶员监控系统,但到目前为止,这些系统几乎不使用任何相机图像数据,主要局限于疲劳检测。有关更多信息,请参阅IDTechEx的报告亚博体育自动驾驶汽车、机器人出租车和传感器2022-2042

人工智能检测司机的行为

研究人员弗劳恩霍夫IOSB专注于驾驶员和车辆之间的互动,并致力于弥合两者之间的差距。“我们的技术不仅能识别面部特征,还能识别司机和乘客当前的姿势,”弗劳恩霍夫IOSB的团队经理迈克尔·沃特说。“然后,我们可以从这些姿势中确定司机和乘客目前正在做什么。”
开发的核心是机器学习算法和流程,如人工智能(AI)。算法实时分析摄像头数据,找出司机是在打电话、和孩子们玩还是在看乘客的手机。因此,IOSB技术超越了图像识别,并在上下文中解释活动。研究人员首先通过手动注释大量的相机镜头来训练该系统:人们的手、脚和肩膀在哪里?智能手机、书籍和其他物品放在哪里?然后,他们使用新图像评估算法,并校正或验证其结果。
系统将司机或乘客的形象抽象成一个数字骷髅——一种模仿人的身体姿势的简笔画。因此,它推断活动使用骨骼运动和补充对象识别。“算法可以据此判断一个人是在睡觉还是在看马路,这个人的注意力有多分散,以及他们需要多长时间才能集中注意力回到路上。”我们解释说。该系统支持传统摄像机和可以在黑暗中看到东西的红外摄像机,以及测量物体与摄像机之间距离的3D摄像机。该系统甚至给予室内设计师在相机放置方面的自由。
研究人员一直在与知名汽车制造商合作,在许多研究项目中处理与汽车内饰活动检测相关的问题奥迪大众汽车以及博世(Bosch)和大陆集团(Continental)等供应商。这些项目得到了德国联邦教育和研究部(BMBF)、德国联邦经济事务和能源部(BMWi)或联邦交通和数字基础设施部(BMVI)的支持。“我们不仅可以探测到司机的活动,还可以探测到所有乘客的活动——无论是在车的前部还是后部。”证实了我们。该技术已经准备好进行试生产。我们已经和想要使用我们技术的公司取得了联系。”连接这些发展的是该研究所自己的驾驶模拟器,行业客户也可以从单个研发项目中受益。模拟交通情况,是收集相关驾驶和行为数据的基础。此外,其广泛的传感器技术意味着所有乘客的行为都可以被研究。

数据保护是首要任务

就数据保护和安全方面而言,研究人员从一开始就把这作为一个优先考虑的问题。“摄像头数据是实时分析的,没有保存,在任何时候都不要离开车辆。这也不需要个性化的模型,所以不会收集个人数据。”斯坦福大学的高级科学家帕斯卡尔·伯恩斯蒂尔说弗劳恩霍夫IOSB,专门研究数据安全,数据保护和透明度。该技术从一开始就尊重隐私,因此符合欧盟严格的法规和高度的数据保护意识。

众多的应用-甚至超出活动检测

一项新的欧盟法规强调了活动检测的重要性;无论自动驾驶汽车的自动化程度如何,对司机的监控都将成为强制要求。使用弗劳恩霍夫通过IOSB技术,汽车制造商不仅可以满足这一要求,还可以让众多关于自动驾驶的愿景成为现实。让我们举个例子:用于人与车之间交流的语音识别正在迅速接近其极限。命令“在那里停车”本身没有意义。然而,当与身体姿态识别和活动检测结合使用时,该系统可以确定用户在那个时刻所指向的停车位。该系统还可以帮助无人驾驶汽车的安全方面。例如,虽然目前司机仍有责任确保所有乘客遵守安全法规并系好安全带,但这很快就会成为无人驾驶汽车的工作——比如自动驾驶的出租车或公交车。对车辆内部的可靠监控也至关重要。
来源和顶部图像:Fraunhofer-Gesellschaft
更多IDT亚博体育echEx期刊