• IIANews微官网
    扫描二维码 进入微官网
    IIANews微信
    扫描二维码 关注微信
    移动客户端
  • English
IMS2024中国智能制造发展论坛线下报名

新系统实时分析摄像头数据 不仅探测乘员面部特征还可识别姿势

  2021年09月02日  

驾驶员是累了还是睡着了?车内的摄像头都可以监控到,特别是在自动驾驶车辆中,车内摄像头不仅很重要,而且法律规定必须安装。据外媒报道,德国弗劳恩霍夫光电、系统技术及图像处理研究所(Fraunhofer Institute for Optronics, System Technologies and Image Exploitation,IOSB)是全球首个能够利用图像数据得出有关驾驶员活动情况的结论,并分析驾驶员能够以多快的速度控制车辆。


不仅探测身体姿势,还可探测活动情况(图片来源:IOSB)

在自动驾驶中,车辆需要决定自己的行为,是转向,还是刹车,还是加速。不过,在车辆完全不需要驾驶员之前,半自动驾驶汽车只会向驾驶员提供一些帮助,让驾驶员有更大的自由度。在半自动驾驶汽车中,如果在高速公路的施工区域或者从高速公路转向城市街道,仍然需要将车辆控制权移交给驾驶员。因此,车辆必须具备两种程度的智能:1、必须能够理解交通状况;2、必须能够监控车内情况,并与驾驶员互动。驾驶员在干什么呢?驾驶员能够以多快的速度控制车辆呢?虽然现在已经出现了驾驶员监控系统,但是此类系统几乎没有采用任何摄像头图像数据,主要也只能探测驾驶员的疲劳状况。

人工智能技术探测驾驶员正在干什么
IOSB的研究人员正在关注驾驶员与车辆之间的互动情况,并努力弥合之间的鸿沟。研究小组主管Michael Voit表示:“我们的技术不仅能够识别面部特征,还能够识别驾驶员和乘客的当前姿势。然后,我们能够从此类姿势确定驾驶员和乘客正在干什么。”
该研究的核心是机器学习算法和过程,如人工智能(AI)。算法实时分析摄像头数据,以确定驾驶员是在打电话、与孩子玩耍还是在看乘客的手机。因此,IOSB技术超越了图像识别技术,还能够根据具体情境解读各种活动。首先,研究人员对该系统进行了训练,手动标注了大量的摄像头照片:人们的手、脚和肩膀在哪里?手机、书或者其他物体位于哪里?然后,研究人员利用新图像评估了算法,并校正或验证结果。
该系统提取驾驶员或乘客的图像,以形成一个数字骨架,一种重现人类身体姿势的简笔画。因此,其可以利用骨骼移动,在识别出来的物体的辅助下,推断出驾驶员和乘客的活动。Voit解释道:“因此,算法可以识别是否有人在睡觉还是在看着道路,这人分心情况如何,需要多久才能重新关注道路。”该系统既支持传统视频摄像头,也支持能够在黑暗中看到东西的红外摄像头,以及能够测量物体与摄像头距离的3D摄像头。此外,该系统还让设计师能够自由在车内安装摄像头。


驾驶模拟器(图片来源:IOSB)

研究人员一直都在众多研究项目中,研究与汽车内部活动探测相关的问题,还与奥迪、大众等知名汽车制造商以及博世、大陆等汽车供应商合作。此类项目还得到了德国联邦教育与研究部(BMBF)、德国联邦经济事务与能源部(BMWi)或德国联邦交通与数字基础设施部(BMVI)的支持。Voit证实:“我们不仅能够探测驾驶员的活动,还能够探测车内前座以及后座所有乘客的活动。该技术已经可以进行试生产,我们也正在与想要采用我们技术的公司接触。我们研发采用的是自己的驾驶模拟器,而行业客户可以从此类研发项目中获益。模拟交通状况是收集相关驾驶和行为数据的基础,此外,该模拟器配备的各种传感器技术意味着其能够研究所有乘客的行为。”

数据保护是当务之急
就数据保护和安全而言,研究人员一开始就把其当作重中之重。IOSB高级科学家Pascal Birnstill表示:“摄像头数据是实时进行分析的,不会保持下来,也不会发送至车外,也不需要个性化的模式,所以也不会收集个人数据。”因此,该技术从研发之初就尊重隐私,符合欧盟严格的法规以及高水平的数据保护意识。

应用广泛,甚至不止于活动探测
欧盟的一项新规定强调了活动探测的重要性,无论车辆自动化程度如何,配备自动驾驶技术的车辆都必须安装驾驶员监控技术。采用IOSB技术,汽车制造商不仅可以满足该要求,还能够实现各种有关自动驾驶的愿景。例如:用于汽车与人之间交流的语音识别正迅速接近发展极限,“在这停下”的语音命令本身没有意义,但是结合身体姿势识别和活动探测,该系统能够确定当前用户正在指着哪个停车位。此外,该系统还有助于解决无人驾驶汽车的安全问题。虽然现在仍然是驾驶员的责任,去确保所有乘员遵守安全规定,系好安全带,但是很快会变成无人驾驶汽车的工作,如自动驾驶出租车或公交车。

最新视频
为自动化未来而生:魏德米勒SNAP IN鼠笼式联接技术   
“EurekaCloud”自动仿真数控程序   
魏德米勒30周年
剑维软件-重构传统人机界面(HMI)
《边缘计算助推IT/OT融合,加速共享数字计划》白皮书
施耐德电气:中压配电和电网自动化
大族机器人
专题报道
第三届EESA储能展
第三届EESA储能展为加快适应储能规模化发展的步伐,促进储能行业进一步良性发展,共促新能源产业的融合,第三届EESA储能展将于2024年9月2-4日在国家会展中心(上海)举办。
企业通讯
魏德米勒开放式自动化平台u-OS
魏德米勒开放式自动化平台u-OS

作为工业物联网领域的重要供应商,魏德米勒持续为客户提供专业的数字化解决方案,产品广泛应用于各种行业,满足工业环境下的各种

2024汉诺威工业博览会专题
2024汉诺威工业博览会专题

2024 汉诺威工业博览会将于4月22 - 26日在德国汉诺威展览中心举行。作为全球首屈一指的工业贸易展览会,本届展览会

在线会议
热门标签

社区

ABB 菲尼克斯电气 威图 三菱电机社区 西门子社区 罗克韦尔自动化社区 恩德斯豪斯自动化
施耐德电气 图尔克 伊玛 欧姆龙 巴鲁夫 魏德米勒 唯恩电气
西克 堡盟 ifm 纳博特斯克 万可 凯本隆 山洋电气
施迈赛 皮尔磁 菲力尔 浩亭 劳易测 伦茨 英威腾
海格电气 威琅电气 VEGA 康耐视 item 仙工智能 KUKA
ODU 雄克社区 天机机器人 倍福 MiR 海康机器人 优傲机器人
SRT软体机器人 灵动科技 科尔摩根 快仓智能 ATI 艾利特机器人 安歌科技
大族机器人 奥托尼克斯 研祥金码 雷尼绍 Nidec CT FDT 威强电
霍尼韦尔 迦智科技 Basler社区 史陶比尔连接器 湾测 节卡机器人 研祥智能
Baidu
map