一种基于嘴部信息的人员状态检测方法及装置

    公开(公告)号:CN112036217A

    公开(公告)日:2020-12-04

    申请号:CN201910479935.5

    申请日:2019-06-04

    发明人: 李源 王晋玮

    IPC分类号: G06K9/00

    摘要: 本发明实施例公开一种基于嘴部信息的人员状态检测方法及装置,该方法包括:获得包含面部的人脸图像;从人脸图像中检测出包括上下唇的嘴唇特征点的人脸特征点的二维位置信息;基于人脸特征点的二维位置信息以及预设的三维人脸模型,构建目标三维人脸模型;基于目标三维人脸模型中指定位置处的嘴唇空间点的三维位置信息以及预设的投影矩阵,确定出该嘴唇空间点在人脸图像中的投影点的投影位置信息;基于指定位置对应的位置处的嘴唇特征点的二维位置信息、嘴唇空间点的三维位置信息及投影位置信息,确定上下唇的当前张合度;基于当前张合度以及历史张合度,确定出目标人员的当前状态,提高对人员状态的检测结果的准确性。

    自动驾驶注意力检测系统及方法

    公开(公告)号:CN109501807A

    公开(公告)日:2019-03-22

    申请号:CN201810931449.8

    申请日:2018-08-15

    发明人: 侯喆 王晋玮

    IPC分类号: B60W40/08 B60W50/00

    摘要: 本发明涉及智能驾驶领域,特别涉及关注驾驶员注意力的智能驾驶系统;本发明提供了一种智能驾驶系统,包括中央控制单元、信息采集单元等。所述中央控制单元还包括安全单元,所述安全单元,在智能驾驶模式中,通过实时检测人眼视线关注的位置坐标,来确保行驶安全。为了保证视线位置检测的准确,采用的自制的训练用数据采集架可以高效收集人脸各角度图像;采用的神经网络将人眼图像与人头部姿势图像融合在一起输入到神经网络中,让神经网络学习眼睛和头部姿态叠加的图像数据,即专门针对收集的高质量训练用图像数据集,设计与其配套的神经网络模型。

    一种人脸关键点的标注方法及装置

    公开(公告)号:CN113569594A

    公开(公告)日:2021-10-29

    申请号:CN202010350817.7

    申请日:2020-04-28

    IPC分类号: G06K9/00

    摘要: 本发明实施例公开一种人脸关键点的标注方法及装置,该方法包括:获得多个图像采集设备在相同采集周期内采集的人脸图像;从每一人脸图像中,检测出目标人脸中各人脸关键点对应的图像位置信息;基于每一人脸图像中目标人脸中人脸关键点对应的图像位置信息以及预设关键点标注规则,确定每一人脸图像中目标人脸的各人脸关键点的标注位置信息,其中,预设关键点标注规则包括:基于目标人脸图像中人脸关键点对应的图像位置信息进行标注的规则,和/或基于每一人脸图像中遍历所得的满足指定位置条件的人脸关键点对应的图像位置信息进行标注的规则,目标人脸图像为:人脸图像中满足指定筛选规则的人脸图像,以实现提高人脸关键点的位置识别结果的准确性。

    一种手部关键点的标定方法及装置

    公开(公告)号:CN113516705A

    公开(公告)日:2021-10-19

    申请号:CN202010276930.5

    申请日:2020-04-10

    摘要: 本发明实施例公开一种手部关键点的标定方法及装置,该方法包括:获得多个图像采集设针对手势展示区域采集的红外图像;基于预先建立的关键点检测模型,从每一红外图像中确定出目标手势中手部关键点的检测位置信息及检测语义信息;对红外图像进行分组,得到至少一组红外图像组;利用每一红外图像组对应的检测语义信息所对应手部关键点的检测位置信息,及其对应的设备信息,确定出目标检测语义信息对应的目标空间位置信息;基于目标检测语义信息对应的目标空间位置信息及每一红外图像对应的设备位姿信息和设备内参信息,确定每一红外图像中目标检测语义信息所对应手部关键点的标注位置信息,以实现自动对红外图像中的手部关键点进行标注。

    一种基于头部信息的人员状态检测方法及装置

    公开(公告)号:CN112084820A

    公开(公告)日:2020-12-15

    申请号:CN201910513685.2

    申请日:2019-06-14

    IPC分类号: G06K9/00

    摘要: 本发明实施例公开一种基于头部信息的人员状态检测方法及装置,该方法包括:从包含目标人员的面部的人脸图像中,检测出面部中的人脸特征点的二维位置信息,人脸特征点包括:面部中上下眼睑的眼睑特征点;基于人脸特征点的二维位置信息以及预设的三维人脸模型,构建目标人员对应的目标三维人脸模型,目标三维人脸模型包括:基于眼睑特征点构建的人眼的上下眼睑;基于目标三维人脸模型和/或人脸图像,确定目标人员的头部的当前姿态信息;基于目标三维人脸模型中上下眼睑的三维位置信息,确定人眼的上下眼睑之间的当前开闭长度;基于当前姿态信息以及当前开闭长度,确定目标人员的当前状态,以实现提高对目标人员的当前状态的检测结果的准确性。

    制动系统、方法、装置、疲劳驾驶模型的训练方法和装置

    公开(公告)号:CN111434553A

    公开(公告)日:2020-07-21

    申请号:CN201910037187.5

    申请日:2019-01-15

    摘要: 本发明实施例公开了一种车辆的制动系统、方法、装置、疲劳驾驶模型的训练方法和装置。其中,车辆的制动系统包括自动紧急制动装置和驾驶员监控装置;其中,自动紧急制动装置在检测到风险区域时,向驾驶员监控装置发送存在风险区域的检测结果;驾驶员监控装置在接收到自动紧急制动装置发送的检测结果时,基于预先设置的疲劳驾驶检测模型,对包含有驾驶员人脸区域的图像进行识别确定驾驶员的精神状态,并根据精神状态判断驾驶员的反应状态,并将判断结果发送给自动紧急制动装置;自动紧急制动装置被配置为接收判断结果,并根据判断结果对制动策略进行调整。通过采用上述技术方案,提高了自动紧急制动装置触发的准确性与安全性。

    一种基于多面部信息的人员状态检测方法及装置

    公开(公告)号:CN112084821A

    公开(公告)日:2020-12-15

    申请号:CN201910513791.0

    申请日:2019-06-14

    发明人: 李源 祁健 王晋玮

    IPC分类号: G06K9/00

    摘要: 本发明实施例公开一种基于多面部信息的人员状态检测方法及装置,该方法包括:从人脸图像中,检测出面部中的人脸特征点;基于人脸特征点以及预设的三维人脸模型,构建人员对应的目标三维人脸模型;基于目标三维人脸模型中第一眼睑空间点、第一嘴唇空间点以及预设的投影矩阵,确定第一眼睑空间点以及第一嘴唇空间点在人脸图像中的投影点;基于第一眼睑空间点和对应的投影点及人脸图像中相应的眼睑特征点,确定上下眼睑的当前开合长度;基于第一嘴唇空间点和对应的投影点及人脸图像中相应的嘴唇特征点,确定上下唇的当前张合度;基于当前张合度以及当前开合长度,确定人员的当前状态,以实现提高对目标人员的当前状态的检测结果的准确性。

    一种基于眼睑特征信息的人员状态检测方法及装置

    公开(公告)号:CN112016347A

    公开(公告)日:2020-12-01

    申请号:CN201910457032.7

    申请日:2019-05-29

    发明人: 李源 王晋玮 侯喆

    IPC分类号: G06K9/00

    摘要: 本发明实施例公开一种基于眼睑特征信息的人员状态检测方法及装置,该方法包括:获得包含目标人员面部的人脸图像;从人脸图像中检测出人脸特征点的二维位置信息;结合预设的三维人脸模型,构建目标三维人脸模型;进而结合投影矩阵,确定指定位置处的眼睑空间点在人脸图像中的投影位置信息;基于人脸图像中指定位置对应的位置处的眼睑特征点的二维位置信息、指定位置处的眼睑空间点的三维位置信息以及投影位置信息,确定上下眼睑的当前开闭长度;基于当前开闭长度,确定出目标人员的当前状态,以实现确定人眼的眼睑特征信息,利用眼睑特征信息,实现对人眼开闭状态的检测结果的准确性的提高,提高对人员的当前状态的检测结果的准确性。

    眼部关键点的标注及其检测模型的训练方法和装置

    公开(公告)号:CN110956071A

    公开(公告)日:2020-04-03

    申请号:CN201910541988.5

    申请日:2019-06-21

    IPC分类号: G06K9/00

    摘要: 本发明实施例公开一种眼部关键点的标注及其检测模型的训练方法和装置。方法包括:获得人脸图像及人脸图像对应的标注眼睑曲线;针对每一标注眼睑曲线,基于数学积分原理,对标注眼睑曲线进行积分,确定标注眼睑曲线中标注上眼睑曲线的第一曲线长度和标注下眼睑曲线的第二曲线长度;从标注上眼睑曲线和标注下眼睑曲线中,确定出多个待利用眼睑点;基于标注上眼睑曲线的第一曲线长度、标注下眼睑曲线的第二曲线长度、待利用眼睑点及预设等分点数,从标注上眼睑曲线和标注下眼睑曲线中,分别确定出等分上眼睑点和等分下眼睑点,进而结合标注眼角点,确定每一人脸图像对应的眼部关键点,以实现标注出具有较明显语义特征的眼部关键点且提高标注效率。

    一种图像特征点的标定方法及装置

    公开(公告)号:CN113221600A

    公开(公告)日:2021-08-06

    申请号:CN202010069966.6

    申请日:2020-01-21

    发明人: 李源 王晋玮

    IPC分类号: G06K9/00 G06N3/04 G06N3/08

    摘要: 本发明实施例公开一种图像特征点的标定方法及装置,该方法包括:获得多个图像采集设备在相同采集周期内采集的待标定图像;从每一待标定图像中检测出面部特征点的检测位置信息及对应的语义信息;基于每一面部特征点对应的语义信息,对待标定图像进行分组,得到每一语义信息对应的待标定图像组;利用每一待标定图像组对应的语义信息所对应面部特征点的检测位置信息,及对应的设备位姿信息和设备内参信息,确定出目标语义信息所对应面部特征点对应的空间位置信息;进而,结合每一待标定图像对应的设备位姿信息和设备内参信息,确定每一待标定图像中每一目标语义信息所对应面部特征点的标注位置信息,以实现对图像特征点的准确性自动标注。