检索结果-南通市图书馆

在线全文

学校读者我要写书评

暂无评论

基于多模态特征对齐的作物病害叶片检测

中国农机化学报 2024年第7期45卷 180-187页

作者：周一帆刘东洋周宇平驻马店职业技术学院信息工程学院河南驻马店463000 驻马店职业技术学院河南省乡村智慧农业工程研究中心河南驻马店463000 中国农业大学信息与电气工程学院北京市100083 山东农业大学作物生物学国家重点试验室山东泰安271018

针对现有农作物病害叶片检测方法利用图像特征定位叶片病害区域精度不高的问题,提出一种基于多模态特征对齐的作物病害叶片检测新方法。在训练阶段,利用视觉编码器和文本编码器将农作物叶片集中的图片和文本进行编码,并根据视觉编码特... 详细信息

针对现有农作物病害叶片检测方法利用图像特征定位叶片病害区域精度不高的问题,提出一种基于多模态特征对齐的作物病害叶片检测新方法。在训练阶段,利用视觉编码器和文本编码器将农作物叶片集中的图片和文本进行编码,并根据视觉编码特征定位给定图片中的病害区域,利用视觉和文本编码融合特征实现病害区域病害类型的细粒度分类。在推理阶段,利用预训练的病害区域定位模块定位给定测试图片中的病害区域,并将其提取的病害区域作为预训练分类模型的输入;通过计算预测文本值与文本集中原始标签之间的相似度值,快速给出病害区域的细粒度分类结果。在多个开源的农作物病害数据集上进行测试,所提出方法在马铃薯、番茄、苹果和草莓四种类型的病害叶片数据集上精准率分别为0.9574、0.9611、0.9580和0.9502,综合性能更优,具有较好实用价值。

关键词：病害叶片检测多模态特征视觉编码特征文本编码特征细粒度分类

楚门的世界：短视频虚假信息多模态特征及其传播效果

同方期刊数据库博看期刊评论

在线全文

学校读者我要写书评

暂无评论

图书情报知识 2024年

作者：付少雄朱梦蝶杨海燕王思博南京农业大学信息管理学院

[目的/意义]识别短视频虚假信息的多模态特征，探究多模态特征对短视频虚假信息传播的影响。[研究设计/方法]采集抖音平台中的真实短视频虚假信息，基于CARS列表与多模态话语关系，设计短视频虚假信息多模态特征的初始编码示例框架，进... 详细信息

[目的/意义]识别短视频虚假信息的多模态特征，探究多模态特征对短视频虚假信息传播的影响。[研究设计/方法]采集抖音平台中的真实短视频虚假信息，基于CARS列表与多模态话语关系，设计短视频虚假信息多模态特征的初始编码示例框架，进行中文语境下面向短视频虚假信息内容的情境化。结合内容编码，提炼短视频虚假信息多模态特征。基于此，结合回归分析法，探究影响短视频虚假信息传播效果的关键特征。[结论/发现]构建中文语境下面向短视频虚假信息内容的多模态特征列表，涵盖文本、音频、图像以及多模态关联四个模态维度，各模态维度间的主要特征及其常见表征具有差异性，对短视频虚假信息的综合传播效果，以及传播认同度、传播广度与传播参与度的影响各异。[创新/价值]为短视频虚假信息特征研究提供理论与实践支撑，辅助后续短视频虚假信息的识别，深化网络生态治理。

关键词：短视频平台虚假信息多模态特征内容分析传播效果

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

基于多模态特征的重载铁路钢轨损伤检测方法

无损检测 2024年第9期46卷 69-74页

作者：马骞国能朔黄铁路发展有限责任公司肃宁分公司肃宁062350

列车重载运行的情况下钢轨会出现损伤,传统的钢轨损伤检测方法主要依靠人工巡检或使用单一模态特征进行分析,存在准确性低、易漏检漏报等问题。针对这一问题,提出了基于多模态特征的重载铁路钢轨损伤检测方法。首先采集重载铁路钢轨损... 详细信息

列车重载运行的情况下钢轨会出现损伤,传统的钢轨损伤检测方法主要依靠人工巡检或使用单一模态特征进行分析,存在准确性低、易漏检漏报等问题。针对这一问题,提出了基于多模态特征的重载铁路钢轨损伤检测方法。首先采集重载铁路钢轨损伤图像,并以直方图均衡化的增强方式预处理原始图像;然后将图像中的信息转换为模态向量进行特征提取,选择置信度矩阵表示不同特征的分布情况,并分解钢轨损伤图像中的特征模态元素;最后基于多模态特征,关联具有相关性的损伤特征模量,标注损失特征标签,实现重载钢轨损伤情况的判断和检测。分别以5000,10000,30000 t重载量级的铁路钢轨作为对象进行测试,试验结果表明,所提方法能够实现精准的损伤定位,且对不同量级钢轨的损伤情况均具有较高检测精度,具有实际应用价值。

关键词：重载铁路置信度矩阵多模态特征钢轨损伤损伤检测

基于多模态特征融合的无人机测绘图像目标识别研究

在线全文

学校读者我要写书评

暂无评论

资源导刊 2024年第12期 27-30,34页

作者：黄东武汉航天远景科技股份有限公司湖北武汉430000

在分析无人机测绘图像时,主要依托单一图像特征进行目标识别,但容易受到部分干扰信息影响,导致目标识别结果F测度值(F测度值是一种综合考虑准确率和召回率的评价指标)较低。因此,提出基于多模态特征融合的无人机测绘图像目标识别方法。... 详细信息

在分析无人机测绘图像时,主要依托单一图像特征进行目标识别,但容易受到部分干扰信息影响,导致目标识别结果F测度值(F测度值是一种综合考虑准确率和召回率的评价指标)较低。因此,提出基于多模态特征融合的无人机测绘图像目标识别方法。在计算无人机测绘图像像素点的扩散系数基础上,通过抑制或增强像素点的梯度值来实现图像去噪处理,提取图像的梯度特征、熵特征和对比度特征,并分别绘制特征图。运用多模态特征融合理念融合多方面图像特征,生成多模态特征图。结合SRC(稀疏表示分类器)和CNN(卷积神经网络分类器)建立多分类决策融合方案,得到多模态融合特征,并利用该特征进行图像目标识别。实验结果表明,在不同噪声比条件下,所提方法的目标识别结果F测度值总是大于0.9,能更准确地识别出无人机测绘图像的所有目标。

关键词：多模态特征扩散阈值对比度梯度无人机图像目标识别

PDCA循环构架下工科英语素质能力的多模态特征及提升对策研究

在线全文

学校读者我要写书评

暂无评论

基于多模态特征的无监督领域自适应多级对抗语义分割网络

科教导刊（电子版） 2024年第22期 196-198页

作者：李娜沈阳航空航天大学外国语学院辽宁沈阳 110136

在新时代新工科教育背景下以及人才工作需求下,学习者英语专业素养与能力的培养与提高也变得日趋重要.面对提升英语综合素质能力的需求,文章旨在探讨传统的英语教学与PDCA循环管理架构相融合,并结合英语教学的多模态形式,解决当前英语... 详细信息

在新时代新工科教育背景下以及人才工作需求下,学习者英语专业素养与能力的培养与提高也变得日趋重要.面对提升英语综合素质能力的需求,文章旨在探讨传统的英语教学与PDCA循环管理架构相融合,并结合英语教学的多模态形式,解决当前英语教学中存在的问题,达成提升学生英语素质能力的目标.通过深入分析和实证研究,提出一系列创新的教学方法,如加强多元化教学应用、小组合作体系等,以满足并实现学生英语专业素养的全面提升的要求.

关键词：新工科 PDCA循环构架多模态特征英语素质能力

来源：博看期刊评论

在线全文

博看期刊

学校读者我要写书评

暂无评论

通信学报 2022年第12期43卷 157-171页

作者：王泽宇布树辉黄伟郑远攀吴庆岗常化文张旭郑州轻工业大学计算机与通信工程学院河南郑州450000 西北工业大学航空学院陕西西安710072

为了解决领域自适应中存在领域间视觉、空间以及语义特征分布差异的问题,提出了基于多模态特征的无监督领域自适应多级对抗语义分割网络。首先,设计3层结构的注意力融合语义分割网络来分别从源域和目标域学习上述三类特征。然后,在单级... 详细信息

为了解决领域自适应中存在领域间视觉、空间以及语义特征分布差异的问题,提出了基于多模态特征的无监督领域自适应多级对抗语义分割网络。首先,设计3层结构的注意力融合语义分割网络来分别从源域和目标域学习上述三类特征。然后,在单级对抗学习中引入联合分布置信度和语义置信度的自监督学习方法,从而在领域间所学特征的分布距离最小化过程中实现更多目标域像素的分布对齐。最后,通过基于多模态特征的多级对抗学习方法对3路对抗分支与3个自适应子网进行联合优化,从而能够有效学习各子网所提取特征的域间不变表示。实验结果表明,与当前先进方法相比,所提网络在GTA5到Cityscapes、SYNTHIA到Cityscapes和SUN-RGBD到NYUD-v2的数据集上分别取得最优的平均交并比62.2%、66.9%和59.7%。

关键词：无监督领域自适应语义分割多模态特征注意力融合多级对抗学习自监督学习

在线全文

学校读者我要写书评

暂无评论

基于多模态特征的视频密集描述生成方法

中文信息学报 2022年第11期36卷 156-168页

作者：马苗陈小秋田卓钰陕西师范大学计算机科学学院陕西西安710119 现代教学技术教育部重点实验室(陕西师范大学) 陕西西安710062

根据视频内容自动生成文本序列的密集描述生成融合了计算机视觉与自然语言处理技术。现有密集描述生成方法多强调视频中的视觉与运动信息而忽略了其中的音频信息,关注事件的局部信息或简单的事件级上下文信息而忽略了事件间的时序结构... 详细信息

根据视频内容自动生成文本序列的密集描述生成融合了计算机视觉与自然语言处理技术。现有密集描述生成方法多强调视频中的视觉与运动信息而忽略了其中的音频信息,关注事件的局部信息或简单的事件级上下文信息而忽略了事件间的时序结构和语义关系。为此,该文提出一种基于多模态特征的视频密集描述生成方法。该方法首先在动作提议生成阶段使用Timeception层作为基础模块以更好适应动作片段时间跨度的多样性,其次在动作提议生成和描述生成两阶段均利用音频特征增强提议和描述生成效果,最后使用时序语义关系模块建模事件间的时序结构和语义信息以进一步增强描述生成的准确性。特别地,该文还构建了一个基于学习场景的视频密集描述数据集SDVC以探究该文所提方法在学习场景现实应用中的有效性。在ActivityNet Captions和SDVC数据集上的实验结果表明,动作提议生成AUC值分别提升0.8%和6.7%;使用真实动作提议进行描述生成时,BLEU_3值分别提升1.4%和4.7%,BLEU_4值分别提升0.9%和5.3%;使用生成的动作提议进行描述生成时,SDVC数据集BLEU_3、BLEU_4值分别提升2.3%和2.2%。

关键词：密集描述生成多模态特征时序结构语义关系

基于用户分群的数字社区消费者多模态特征分析与服务效能提升研究

在线全文

学校读者我要写书评

暂无评论

农业图书情报学报 2023年第2期35卷 30-44页

作者：黎灿垚韦伟刘晓丽周林兴王帅广西中烟工业有限责任公司南宁530001 上海大学文化遗产与信息管理学院上海200444

[目的/意义]对数字社区消费者进行多模态特征分析与服务效能提升,有助于为数智赋能在线社区建设提供新视野、为相关部门部署数字决策提供新动能。[方法/过程]结合社区特性构建用于消费者分群的数据维度,将维度下的24个指标数据进行二次... 详细信息

[目的/意义]对数字社区消费者进行多模态特征分析与服务效能提升,有助于为数智赋能在线社区建设提供新视野、为相关部门部署数字决策提供新动能。[方法/过程]结合社区特性构建用于消费者分群的数据维度,将维度下的24个指标数据进行二次聚合后实现分群,并构造参数、决策变量及函数表,从而分析消费者多模态特征,基于这些特征实现数字消费服务效能的提升。[结果/结论]实证分析结果表明,本文模型能够生成合理有效的分群结果,进而实现类群特征区分以及群间渗透与漂移现象分析;分群结果呈现出6类消费者群体:重点、中心、特殊、沉睡、流失和一般类群,绝大多数类群都会产生用户渗透现象,仅有一般用户类群会发生群间漂移现象;服务效能提升模型表明最受关注价值的群体为中心和重点类群。

关键词：用户分群 AP-DBSCAN 多模态特征数字社区数字消费

同方期刊数据库博看期刊评论

在线全文

学校读者我要写书评

暂无评论

一种基于多模态特征的新闻视频语义提取框架

计算机应用研究 2012年第7期29卷 2725-2729页

作者：闫建鹏封化民刘嘉琦西安电子科技大学通信工程学院西安710071 北京电子科技学院北京100070

为提高视频语义信息提取准确率,提出了一种基于多模态特征的新闻视频语义提取框架。在视频中提取主题字幕信息,对音频进行分类和语音识别,根据主题字幕信息借助搜索引擎得到与新闻视频相关的网页;最后利用网页文本对语音识别的结果进行... 详细信息

为提高视频语义信息提取准确率,提出了一种基于多模态特征的新闻视频语义提取框架。在视频中提取主题字幕信息,对音频进行分类和语音识别,根据主题字幕信息借助搜索引擎得到与新闻视频相关的网页;最后利用网页文本对语音识别的结果进行纠错,从而通过视频字幕信息和语音脚本的跨模态融合提高视频语义提取的准确率。在中等规模的新闻视频(含新闻网页)库测试表明了该方法的有效性,经纠错后的语音识别准确率达到了65%左右。

关键词：多模态特征语义分析视频检索