基于线索神经网络的语音-视觉融合情感识别方法

    公开(公告)号:CN103400145B

    公开(公告)日:2016-08-10

    申请号:CN201310304011.4

    申请日:2013-07-19

    Inventor: 吕坤 张欣

    Abstract: 本发明提出的一种基于线索神经网络的语音?视觉融合情感识别方法,属于自动情感识别领域。其基本思想是:首先,分别使用人的正面脸部表情、侧面脸部表情和语音三个通道的特征数据,独立地训练一个神经网络来执行离散的情感类别的识别,训练过程中神经网络模型中的输出层加入4个线索(hint)节点,分别承载活跃度?评价度(activation?evaluation)空间中的4个粗粒度类别的线索(hint)信息。在线索信息的帮助下,神经网络权重的学习会产生更优的特征选择。然后,使用多模态融合模型对三个神经网络的输出结果进行融合,多模态融合模型也采用基于线索信息训练的神经网络。该方法具有较低的计算量,识别率高且鲁棒性好。对于训练数据较少的情况,效果更加明显。

    基于多层增强HMM的语音-视觉融合的情感识别方法

    公开(公告)号:CN102930298B

    公开(公告)日:2015-04-29

    申请号:CN201210459172.6

    申请日:2012-11-15

    Abstract: 本发明提出的一种基于多层增强HMM(MBHMM)的语音-视觉融合的情感识别方法,属于自动情感识别领域。本发明方法中提出的MBHMM分类器包括3层整体分类器,每层整体分类器由从左向右的多个连续型HMM分量分类器组合而成。使用情绪视频中的语音、脸部表情、肩部运动三种特征流分别作为3层整体分类器的输入,在训练整体分类器时通过AdaBoost方法不断更新各样本的权重,同时通过AdaBoost方法确保在使用某一特征流训练当前层整体分类器时着重于前一特征流的整体分类器难于识别的样本。本发明方法与已有识别方法相比较明显提高了分类的准确度。

    一种双通道信息融合的情感识别方法

    公开(公告)号:CN102819744B

    公开(公告)日:2014-09-10

    申请号:CN201210225169.8

    申请日:2012-06-29

    Inventor: 吕坤 贾云得 张欣

    Abstract: 本发明提出的一种双通道信息融合的情感识别方法,属于自动情感识别领域。其基本思想是:从情感视频数据中提取脸部表情和语音特征数据;然后使用脸部表情特征数据初始化Boltzmann拉链中慢链的可见节点的状态值;使用语音特征数据初始化Boltzmann拉链中快链的可见节点的状态值,对BOLTZMANN拉链进行训练;使用训练好的BOLTZMANN拉链识别情感视频的情感类别。本发明使用Boltzmann拉链来融合紧密耦合的语音-视觉模态,有效利用了两个通道的内在关联,解决了两个通道数据不同的时间尺度问题,并在训练过程中避免了局部能量极小,实验结果证明了该方法的高准确率和有效性。

    一种网络安全态势综合评估系统

    公开(公告)号:CN103748999B

    公开(公告)日:2012-02-08

    申请号:CN201010048645.4

    申请日:2010-06-09

    Abstract: 一种内部网络安全态势综合评估系统,包括:漏洞信息采集模块、端口状态采集模块、安全事件采集模块、虚警过滤模块、主机威胁态势评估模块、主机流量统计模块、主机丢包率统计模块、主机CPU使用率统计模块、主机内存占用率统计模块、主机并发连接数统计模块、主机可用资源态势评估模块、主机安全态势综合模块、网络安全态势综合模块、漏洞信息库、漏洞信息更新表、资产价值表、安全事件库。该系统按照“多层、多维”的评估思路,首先评估被评估网络中每台主机的可用资源态势和主机威胁态势,进而获取被评估网络中每台主机的安全态势,最后得到整个被评估网络的综合安全态势。采用本发明系统,可以提高网络安全态势评估的准确性和效率。

    一种适用于中文的自动唇语识别系统

    公开(公告)号:CN102004549A

    公开(公告)日:2011-04-06

    申请号:CN201010558253.2

    申请日:2010-11-22

    Inventor: 吕坤 贾云得 张欣

    Abstract: 一种自动唇语识别系统,包括:头戴式摄像头、人机交互模块、唇部轮廓定位模块、几何向量获取模块、运动向量获取模块、特征矩阵构造模块、变换矩阵T获取模块、转换特征矩阵获取模块、存储器A、存储器B、典型相关判别分析模块。头戴式摄像头用来录制汉字发音图像序列,通过人机交互模块传输至唇部轮廓定位模块,其使用卷积虚拟静电场Snake模型从中检测及跟踪唇部轮廓;几何向量获取模块和运动向量获取模块从唇部轮廓中分别提取出几何和运动特征,并将它们联合起来作为典型相关判别分析模块的输入特征矩阵;典型相关判别分析模块计算特征矩阵间的相似度,处理后获取识别结果。本发明系统与已有唇语识别系统相比较,具有更高的识别准确率。

    基于用户自相似度的多模型相结合的电影推荐方法

    公开(公告)号:CN107368540A

    公开(公告)日:2017-11-21

    申请号:CN201710493196.6

    申请日:2017-06-26

    Inventor: 张欣 林灵 吕坤

    Abstract: 本发明涉及一种基于用户自相似度的多模型相结合的电影推荐方法,属于数据科学与数据挖掘技术领域。本发明基于用户对电影的评分信息的自相似度来动态地将协同过滤与内容过滤所得结果进行融合,得到推荐结果。在电影的多值属性与机器学习中的分类树模型的结合时,提出了将一部电影的多个属性值分开,使之成为独立的特征向量,将多值属性与分类树模型很好地结合在一起。本发明提出的基于用户自相似度的多模型相结合的电影推荐方法与已有方法相比较,优点是:本发明基于用户对电影的评分信息的自相似度来动态地将协同过滤与内容过滤所得结果进行融合,得到的推荐结果更符合用户需求,推荐质量更高。

    一种用于识别应用软件通信协议特征的方法

    公开(公告)号:CN101710898B

    公开(公告)日:2011-10-19

    申请号:CN200910237433.8

    申请日:2009-11-06

    Abstract: 本发明涉及一种应用软件通信协议特征的描述方法,属于网络信息安全技术领域。本发明使用的前提是已从捕获的网络数据包中分析获得需要识别的应用软件通信协议的特征,然后使用本发明提出的方法对该应用软件通信协议特征进行描述,以便准确的实现对该应用软件通信协议的识别。本发明对应用软件通信协议特征进行了明确的分类和定义,具有逻辑严密、结构严谨、适用范围广、可扩展性好等特点。将本发明提出的方法用于应用软件通信协议识别时,具有高效、准确、实时、可扩展等优点。

    一种基于AdaFM-Net的太赫兹聚焦层析图像重构方法

    公开(公告)号:CN111652949B

    公开(公告)日:2022-08-12

    申请号:CN202010303038.1

    申请日:2020-04-17

    Abstract: 本发明公开了一种基于AdaFM‑Net的太赫兹聚焦层析图像重构方法,首先建立聚焦层析图像的成像退化模型,进而根据成像距离确定太赫兹层析像的退化等级;利用最高退化等级数据集对AdaFM‑Net可调卷积神经网络除插值层以外的其它层参数进行训练,将网络的复原能力匹配到最高退化等级L1,然后利用最低退化等级数据集对插值层参数训练,使网络的复原能力匹配到最低的退化等级L2,进而通过插值实现网络复原能力从L1到L2的连续调节;最后,基于太赫兹图像,完成网络插值系数与太赫兹聚焦层析图像测试距离的对应,进而匹配地对太赫兹聚焦层析图像进行重构,取得更好的图像重构效果,并使处理后的不同成像距离的太赫兹图像空间分辨率相统一,有效地提升并统一其空间分辨率。

Patent Agency Ranking