公开(公告)号：CN110263663A

公开(公告)日：2019-09-20

申请号：CN201910455869.8

申请日：2019-05-29

Applicant: 南京师范大学 ,  南京智能高端装备产业研究院有限公司

Inventor： 谢非 ,  吴沛林 ,  王鼎 ,  刘文慧 ,  汪璠 ,  杨继全 ,  韩嘉宁 ,  光蔚然 ,  刘益剑 ,  郭钊利

IPC: G06K9/00

Abstract: 本发明公开了一种基于多维面部特征的驾驶员多级疲劳度识别方法，包括：步骤1：采集连续视频帧序列图像，判断是否有人脸在图像中。如果检测出有人脸在图像区域，则将人脸部分图像单独截取出来作为人脸检测图像转到下一步进行处理；否则读取下一帧图像重新进行判断。步骤2：提取人脸特征点，并记录每一个特征点在图像中的位置坐标。步骤3：计算多维面部特征；步骤4、对面部状态做出判断，面部状态包括：是否在打瞌睡、是否在打哈欠、是否在低头和是否在转头。步骤5、融合多维面部特征和面部状态，计算K帧内疲劳度评估值，根据疲劳度评估值将疲劳度识别为正常、轻度疲劳、中度疲劳和重度疲劳四个等级，完成驾驶员多级疲劳度识别功能。

公开(公告)号：CN109808711B

公开(公告)日：2020-07-07

申请号：CN201811598562.5

申请日：2018-12-25

Applicant: 南京师范大学

Inventor： 韩嘉宁 ,  谢非 ,  夏邵君 ,  卢华昊 ,  韩雨桐

IPC: G06F3/01 ,  B60W50/10

Abstract: 本发明提供一种基于视觉假体的自动驾驶车辆控制方法及系统、自动驾驶车辆和视觉假体，该方法包括：接收由视觉假体发送的眼球控制信息，其中，所述眼球控制信息的生成步骤包括：通过视觉假体检测用户眼球运动信号，并由视觉假体基于所述用户眼球运动信号提取眼球轨迹信息，将所述眼球轨迹信息与预设运动轨迹进行匹配判断；在所述眼球轨迹信息与预设运动轨迹匹配时，将所述眼球轨迹信息作为眼球控制信息；将所述眼球控制信息转换为对应的控制指令，并基于所述控制指令执行对应操作。本发明可实现盲人通过视觉假体控制自动驾驶车辆，提升自动驾驶车辆以及视觉假体的智能性，尤其适用于盲人在特定场景下的智能驾驶。

公开(公告)号：CN109808711A

公开(公告)日：2019-05-28

申请号：CN201811598562.5

申请日：2018-12-25

Applicant: 南京师范大学

Inventor： 韩嘉宁 ,  谢非 ,  夏邵君 ,  卢华昊 ,  韩雨桐

IPC: B60W50/10 ,  G06F3/01

Abstract: 本发明提供一种基于视觉假体的自动驾驶车辆控制方法及系统、自动驾驶车辆和视觉假体，该方法包括：接收由视觉假体发送的眼球控制信息，其中，所述眼球控制信息的生成步骤包括：通过视觉假体检测用户眼球运动信号，并由视觉假体基于所述用户眼球运动信号提取眼球轨迹信息，将所述眼球轨迹信息与预设运动轨迹进行匹配判断；在所述眼球轨迹信息与预设运动轨迹匹配时，将所述眼球轨迹信息作为眼球控制信息；将所述眼球控制信息转换为对应的控制指令，并基于所述控制指令执行对应操作。本发明可实现盲人通过视觉假体控制自动驾驶车辆，提升自动驾驶车辆以及视觉假体的智能性，尤其适用于盲人在特定场景下的智能驾驶。

公开(公告)号：CN110909716A

公开(公告)日：2020-03-24

申请号：CN201911244639.3

申请日：2019-12-06

Applicant: 南京师范大学

Inventor： 韩嘉宁 ,  谢非 ,  王鼎 ,  吴沛林 ,  汪璠 ,  吴启宇 ,  吴奕之 ,  陆飞

IPC: G06K9/00

Abstract: 本申请公开了一种基于睡眠监测的控制方法、电子装置和存储介质。电子装置用于检测疲劳驾驶，控制方法用于电子装置，控制方法包括：获取驾驶员的睡眠数据；在睡眠数据满足预设条件的情况下，获取驾驶员当前的驾驶图像；根据驾驶图像确定驾驶员的疲劳值。如此，在驾驶员的睡眠数据满足预设条件的情况下，才获取驾驶员当前的驾驶图像，并根据驾驶图像确定驾驶员的疲劳值。这样不必在每次驾驶的过程中，都不断地获取驾驶图像并对驾驶图像进行处理和分析，可以降低资源占用并节约能耗。