-
公开(公告)号:CN118212475A
公开(公告)日:2024-06-18
申请号:CN202410468662.5
申请日:2024-04-18
Applicant: 华侨大学
IPC: G06V10/764 , G06V10/80 , G06V10/82 , G06N3/0464 , G06N3/08 , G06F16/35 , G06F40/30
Abstract: 一种基于多模态融合的图像主题分类方法和系统,包括:通过数据预处理构建图像对应的叙事文本和概念文本;将图像及其对应的叙事文本和概念文本输入预训练的特征提取模型得到图像特征、图像概念文本特征和图像叙事文本特征;采用标签注意力融合机制将所述图像特征和概念文本特征进行融合得到第一融合特征,利用多模态交叉注意力融合机制将所述图像特征和所述叙事文本特征进行融合得到第二融合特征;对所述第一融合特征和所述第二融合特征进行拼接融合和标签预测,实现图像主题分类。本发明融合文本信息辅助图像的新闻主题分类,提升模型的可解释性和泛化性。
-
公开(公告)号:CN117725433A
公开(公告)日:2024-03-19
申请号:CN202311793721.8
申请日:2023-12-25
Applicant: 华侨大学
IPC: G06F18/22 , G06N3/0464 , G06N3/042 , G06N3/045 , G06N3/0895 , G06F18/241 , G06Q50/00 , G06F18/25
Abstract: 本发明公开了一种基于相似性增强传播结构图的谣言检测方法,包括以下步骤:基于公开数据集提取新闻内容特征和用户特征;基于公开数据集构建传播结构图及邻接矩阵;利用用户特征的相似性增强传播结构图;利用图卷积网络获得统一传播结构图特征;对齐统一传播结构图特征和新闻内容特征;增强新闻内容特征和传播结构图特征;基于增强传播结构图特征获得增强统一传播结构图特征,将增强新闻内容特征、增强统一传播结构图特征以及对齐的统一传播结构图特征和新闻内容特征送入分类器,判断新闻是否属于谣言。本发明深入研究社交网络中用户偏好相似性的影响,同时考虑社交网络中的传播结构图以及用户之间的潜在关系,更全面地揭示了谣言传播的特征。
-
公开(公告)号:CN116630458A
公开(公告)日:2023-08-22
申请号:CN202310611537.0
申请日:2023-05-26
Applicant: 华侨大学
IPC: G06T11/00 , G06N3/0475 , G06N3/045 , G06N3/0442 , G06F40/126
Abstract: 本发明提供基于注意力机制和金字塔池化的多模态图像合成方法,包括步骤S1、利用生成对抗网络的生成器获取特征图gn;步骤S2、利用生成器的金字塔池化模块根据该特征图gn生成合成图像X;步骤S3、生成对抗网络还包括判别器,利用匹配感知梯度惩罚和合页损失函数完成生成器与判别器的训练。本发明增加了不同通道件的信息交互,生成包含更多细节的特征图,并引入金字塔池化,进一步合成细节更加真实的合成图像。
-
公开(公告)号:CN113553510A
公开(公告)日:2021-10-26
申请号:CN202110875172.3
申请日:2021-07-30
Applicant: 华侨大学
IPC: G06F16/9535 , G06F16/9536 , G06Q50/00 , G06F40/289 , G06F40/30 , G06F16/28 , G06F16/36
Abstract: 本发明公开了一种文本信息推荐方法、装置及可读介质,通过获取用户数据及所对应的文本语料,对文本语料进行预处理,得到文本数据;将用户数据进行处理得到用户属性特征,将文本数据通过词注意力网络生成文本特征,将用户数据利用知识图谱表示学习模型生成用户知识图谱特征,将用户属性特征、文本特征和用户知识图谱特征进行拼接,得到综合特征;将综合特征输入多层感知机,得到用户偏好类别及对应的推送数量。本发明加强对用户兴趣的识别度和扩展性,从而提高推荐结果的准确性和多样性,通过综合特征可得到多个维度的抽象特征表示,缓解传统个性化信息推荐中的数据稀疏、冷启动等问题。将注意力机制应用到文本推荐,进一步提高准确度。
-
-
-