公开(公告)号：CN116402386A

公开(公告)日：2023-07-07

申请号：CN202310330047.3

申请日：2023-03-30

Applicant: 华南理工大学

Inventor： 谢晋 ,  黄佳璇 ,  杨林丰 ,  冯润辉 ,  宋琦

IPC: G06Q10/0639 ,  G06Q50/20 ,  G06F3/01 ,  G06F18/22 ,  G06T19/00 ,  G09B9/00 ,  G09B5/02

Abstract: 本发明涉及人机交互技术领域，公开了一种基于混合现实的技能熟练度评价和训练系统及方法。所述系统包括手部关节数据采集模块，数据处理模块，评价模块和示教训练模块。该系统通过采集熟练者和学员的操作数据，提取衡量手势熟练度的左右手指尖配合度和手指关节稳定度特征，将操作者的操作手势进行量化计算，以熟练者的数据为评价基准，实时对学员的操作进行熟练度等级评价。同时采用手势复现，视频示教两种方式进行训练，使学员可以进行自我学习，无须教学员时刻指导，纠错，示教，提高学习效率。

公开(公告)号：CN116439704A

公开(公告)日：2023-07-18

申请号：CN202310330039.9

申请日：2023-03-30

Applicant: 华南理工大学

Inventor： 谢晋 ,  宋琦 ,  杨林丰 ,  何昊鹏 ,  黄佳璇 ,  黄梅鹏

IPC: A61B5/16 ,  A61B5/11 ,  A61B5/00 ,  A61B5/22 ,  A61B3/113 ,  G16H50/20 ,  G16H40/67

Abstract: 本发明公开了一种基于眼动角速度特性的接线板布线疲劳在线诊断方法，包括：获取人员在接线板布线实操过程中的眼球视线向量坐标，提出将眼球视线向量坐标转化为在水平面、矢状面、冠状面三个正交平面方向上角速度与眼球运动过程眼外肌施力的眼动‑疲劳诊断模型；使用上述眼动‑疲劳解析模型对视线向量进行计算，分别得到在三个正交平面上的眼球角速度与对应眼外肌施力状态的时频域动态特性；随后使用两个用于疲劳评价的特殊特征指标，分别判定接线板布线实操人是否存在外展神经类疲劳、动眼神经类疲劳与滑车神经类疲劳，进而综合诊断人员疲劳状态。本发明可在实操过程中诊断人员疲劳状态，减少诊断时间与主观影响，提高疲劳诊断的正确率。