检索结果-南通市图书馆

计算机应用研究 2024年

作者：林洁霞朱小栋上海理工大学管理学院

多模态讽刺检测的关键在于有效地对齐和融合不同模态的特征。然而，现有的融合方法通常忽略了多模态间组成结构的关系，并且在识别讽刺时也经常忽略了多模态数据中与讽刺情感相关的共同特征的重要性。因此，现提出一种基于跨模态分层交... 详细信息

多模态讽刺检测的关键在于有效地对齐和融合不同模态的特征。然而，现有的融合方法通常忽略了多模态间组成结构的关系，并且在识别讽刺时也经常忽略了多模态数据中与讽刺情感相关的共同特征的重要性。因此，现提出一种基于跨模态分层交互网络和对比学习的模型。首先，跨模态分层交互网络采用了基于交叉注意力机制的最小单元对齐模块和基于图注意力网络的组成结构融合模块，从不同层面上识别文本和图像之间的不一致性，将低一致性的样本判定为含讽刺意味的样本。其次，该模型通过数据增强和类别增强两个对比学习任务，帮助学习讽刺相关的共同特征。实验结果表明，所提出的模型与基线模型相比，在准确率上提升了0.81%,F1值上提升了1.6%，验证了提出的分层交互网络和对比学习方法在多模态讽刺检测中的关键作用。

关键词：多模态讽刺检测分层交互对比学习交叉注意力机制图注意力网络

来源：

同方期刊数据库评论

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

欢迎您,

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

请选择保存的检索档案：

请选择收藏分类：

通借通还

欢迎您,

建议与咨询 留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

时间限定

文献类型

馆藏选择

核心期刊

语言

文献类型

帮助

文字说明：

检索规则说明：

检索范例：

分类表

所选分类

限定检索结果

文献类型

馆藏范围

日期分布

学科分类号

主题

机构

作者

语言

在线全文

请选择保存的检索档案： 新增检索档案 确定 取消

请选择收藏分类： 新增自定义分类 确定 取消

通借通还

建议与咨询留下您的常用邮箱和电话号码，以便我们向您反馈解决方案和替代方法

请选择保存的检索档案：

请选择收藏分类：