检索结果-南通市图书馆

同方期刊数据库

在线全文

学校读者我要写书评

暂无评论

基于多模态输入的对抗式视频生成方法

计算机研究与发展 2020年第7期57卷 1522-1530页

作者：于海涛杨小汕徐常胜合肥工业大学计算机与信息学院合肥230031 模式识别国家重点实验室(中国科学院自动化研究所) 北京100190

视频生成是计算机视觉和多媒体领域一个重要而又具有挑战性的任务.现有的基于对抗生成网络的视频生成方法通常缺乏一种有效可控的连贯视频生成方式.提出一种新的多模态条件式视频生成模型.该模型使用图片和文本作为输入,通过文本特征编... 详细信息

视频生成是计算机视觉和多媒体领域一个重要而又具有挑战性的任务.现有的基于对抗生成网络的视频生成方法通常缺乏一种有效可控的连贯视频生成方式.提出一种新的多模态条件式视频生成模型.该模型使用图片和文本作为输入,通过文本特征编码网络和运动特征解码网络得到视频的运动信息,并结合输入图片生成连贯的运动视频序列.此外,该方法通过对输入图片进行仿射变换来预测视频帧,使得生成模型更加可控、生成结果更加鲁棒.在SBMG(single-digit bouncing MNIST gifs),TBMG(two-digit bouncing MNIST gifs)和KTH(kungliga tekniska h?gskolan human actions)数据集上的实验结果表明:相较于现有的视频生成方法,生成结果在目标清晰度和视频连贯性方面都具有更好的效果.另外定性评估和定量评估(SSIM(structural similarity index)与PSNR(peak signal to noise ratio)指标)表明提出的多模态视频帧生成网络在视频生成中起到了关键作用.

关键词：深度学习视频生成视频预测卷积神经网络生成对抗网络

跨模态多视角自监督的个性化食谱推荐异构图网络

在线全文

学校读者我要写书评

暂无评论

计算机辅助设计与图形学学报 2023年第3期35卷 413-422页

作者：宋亚光杨小汕徐常胜中国科学院自动化研究所模式识别国家重点实验室北京100190 中国科学院大学人工智能学院北京100049

为了更好地建模食物不同内容信息之间的关系,提出一种基于跨模态多视角自监督异构图网络的个性化食物推荐模型.首先,基于用户､食物以及食材,构建异构图;其次,基于信息传递,学习建模信息之间的复杂层级关系;再次,利用食物节点特征､食物... 详细信息

为了更好地建模食物不同内容信息之间的关系,提出一种基于跨模态多视角自监督异构图网络的个性化食物推荐模型.首先,基于用户､食物以及食材,构建异构图;其次,基于信息传递,学习建模信息之间的复杂层级关系;再次,利用食物节点特征､食物食材特征以及食物图像特征,构建跨模态多视角对比自监督学习任务增强食物节点的表示;最后,利用用户表示以及基于注意力模块融合得到的食物综合表示完成食物推荐.在大规模食物推荐数据集上的实验结果表明,该方法比最优的基线方法在AUC,NDCG@10和Recall@10这3个指标上分别提升6.35%,8.13%和11.7%,从而证明了该方法的有效性.

关键词：食物推荐异构图自监督学习多视角跨模态

在线全文

学校读者我要写书评

暂无评论

基于学习与交互的本征图像求解方法研究

基于学习与交互的本征图像求解方法研究

作者：杨小汕北京理工大学

学位级别：硕士

物体表面所呈现的颜色是由物体的形状、物体的材质、光源的位置、光源的颜色以及观察者的位置等属性决定的。反照率(Reflectance)和亮度(Shading)是决定物体表面颜色的两种最重要的本征属性:反照率描述物体本身对入射光的反射特性,反映... 详细信息

物体表面所呈现的颜色是由物体的形状、物体的材质、光源的位置、光源的颜色以及观察者的位置等属性决定的。反照率(Reflectance)和亮度(Shading)是决定物体表面颜色的两种最重要的本征属性:反照率描述物体本身对入射光的反射特性,反映了物体的真实颜色;亮度描述物体表面的形状对光照的影响,反映了物体的明暗和阴影。本征图像提取主要研究从图像中提取亮度(Shading)信息和反照率(Reflectance)信息构成亮度本征图和反照率本征图。本文首先提出一种基于学习的本征图像提取方法。把图像局部邻域块的DCT系数和色度信息作为特征构造分类器,将图像中所有像素点的导数值分成两类,一类由亮度变化引起,另一类由反照率变化引起,每一类导数都表示对图像的一种线性约束,用分类后的导数构造出一个过约束系统,求解这个过约束系统的伪逆解作为亮度本征图和反照率本征图。本文还提出一种基于能量优化的本征图像提取方法。我们假设在局部范围内,图像强度的缓慢变化是由亮度引起,而色度值的剧烈变化是由反照率变化引起,定义一个新的权值函数来表示反照率,把图像中每个像素点的反照率值表示为邻域像素点的反照率值的加权和,进而构造一个关于反照率本征值和亮度本征值的能量方程,借助这个能量方程将本征图提取问题转化为一个以用户的画笔交互作为约束条件的优化问题,最后用带有超松弛因子的高斯赛德尔迭代法求得优化问题的解作为本征图像的分解结果。实验结果表明本文提出的两种求解方法可以得到高质量的亮度本征图和反照率本征图,与已有方法的对比表明我们的基于能量优化的方法可以得到更清晰的亮度本征图和反照率本征图,并且更接近标准结果,解决了之前的交互式本征图像求解方法不能处理黑白图像区域的问题。

关键词：本征图像分类能量优化

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

基于深度学习的鲁棒性视觉跟踪方法

计算机学报 2016年第7期39卷 1419-1434页

作者：高君宇杨小汕张天柱徐常胜中国科学院自动化研究所模式识别国家重点实验室北京100190

传统的视觉跟踪方法(如L1等)大多直接使用视频序列各帧内的像素级特征进行建模,而没有考虑到各图像块内部的深层视觉特征信息.在现实世界的固定摄像头视频监控场景中,通常可以找到一块区域,该区域中目标物体具有清晰、易于分辨的表观.因... 详细信息

传统的视觉跟踪方法(如L1等)大多直接使用视频序列各帧内的像素级特征进行建模,而没有考虑到各图像块内部的深层视觉特征信息.在现实世界的固定摄像头视频监控场景中,通常可以找到一块区域,该区域中目标物体具有清晰、易于分辨的表观.因此,文中在各视频场景内事先选定一块可以清晰分辨目标表观的参考区域用以构造训练样本,并构建了一个两路对称且权值共享的深度卷积神经网络.该深度网络使得参考区域外目标的输出特征尽可能与参考区域内目标的输出特征相似,以获得参考区域内目标良好表征的特性.经过训练后的深度卷积神经网络模型具有增强目标可识别性的特点,可以应用在使用浅层特征的跟踪系统(如L1等)中以提高其鲁棒性.文中在L1跟踪系统的框架下使用训练好的深度网络提取目标候选的特征进行稀疏表示,从而获得了跟踪过程中应对遮挡、光照变化等问题的鲁棒性.文中在25个行人视频中与当前国际上流行的9种方法对比,结果显示文中提出的方法的平均重叠率比次优的方法高0.11,平均中心位置误差比次优的方法低1.0.

关键词：深度学习卷积神经网络视觉跟踪鲁棒性 L1跟踪系统计算机视觉

ChatGPT及生成式人工智能现状及未来发展方向

在线全文

学校读者我要写书评

暂无评论

中国科学基金 2023年第5期37卷 743-750页

作者：张熙杨小汕徐常胜中国科学院自动化研究所

生成式人工智能是一种能够自主生成内容的人工智能技术，可以应用于文本生成、图像生成等多个领域。近年来，随着预训练技术的发展和计算硬件的提升，生成式人工智能取得了突破性进展，特别是以ChatGPT为代表的生成式对话模型，取得了... 详细信息

生成式人工智能是一种能够自主生成内容的人工智能技术，可以应用于文本生成、图像生成等多个领域。近年来，随着预训练技术的发展和计算硬件的提升，生成式人工智能取得了突破性进展，特别是以ChatGPT为代表的生成式对话模型，取得了令人惊艳的效果，开始广泛应用于各行各业。生成式人工智能有广阔的发展前景，本文首先介绍了ChatGPT的研究进展，包括预训练语言模型、上下文学习和基于人类反馈的强化学习三个关键技术，以及ChatGPT对相关人工智能研究的影响。然后对ChatGPT及生成式人工智能在未来的应用发展进行了思考与总结，讨论了目前亟需解决的关键问题，包括更透彻的理解能力、模型轻量化、可控安全的内容生成、知识可持续学习、类脑化认知和可解释性等；希望通过本文的介绍能引起更多的研究人员关注生成式人工智能，进一步推动生成式人工智能的发展与应用。

关键词：生成式人工智能研究进展未来发展学术研究

同方期刊数据库

在线全文

学校读者我要写书评

暂无评论

多模态零样本人体动作识别

中国图象图形学报 2021年第7期26卷 1658-1667页

作者：吕露露黄毅高君宇杨小汕徐常胜郑州大学郑州450000 中国科学院自动化研究所模式识别国家重点实验室北京100190

目的在人体行为识别算法的研究领域,通过视频特征实现零样本识别的研究越来越多。但是,目前大部分研究是基于单模态数据展开的,关于多模态融合的研究还较少。为了研究多种模态数据对零样本人体动作识别的影响,本文提出了一种基于多模态... 详细信息

目的在人体行为识别算法的研究领域,通过视频特征实现零样本识别的研究越来越多。但是,目前大部分研究是基于单模态数据展开的,关于多模态融合的研究还较少。为了研究多种模态数据对零样本人体动作识别的影响,本文提出了一种基于多模态融合的零样本人体动作识别(zero-shot human action recognition framework based on multimodel fusion,ZSAR-MF)框架。方法本文框架主要由传感器特征提取模块、分类模块和视频特征提取模块组成。具体来说,传感器特征提取模块使用卷积神经网络(convolutional neural network,CNN)提取心率和加速度特征;分类模块利用所有概念(传感器特征、动作和对象名称)的词向量生成动作类别分类器;视频特征提取模块将每个动作的属性、对象分数和传感器特征映射到属性—特征空间中,最后使用分类模块生成的分类器对每个动作的属性和传感器特征进行评估。结果本文实验在Stanford-ECM数据集上展开,对比结果表明本文ZSAR-MF模型比基于单模态数据的零样本识别模型在识别准确率上提高了4%左右。结论本文所提出的基于多模态融合的零样本人体动作识别框架,有效地融合了传感器特征和视频特征,并显著提高了零样本人体动作识别的准确率。

关键词：零样本多模态融合动作识别传感器数据视频特征

在线全文

学校读者我要写书评

暂无评论

深度相对度量学习的视觉跟踪

中国科学：信息科学 2018年第1期48卷 60-78页

作者：郭文游思思高君宇杨小汕张天柱徐常胜山东工商学院信息与电子工程学院烟台264009 山东省高校感知技术与控制重点实验室烟台264009 中国科学院自动化研究所模式识别国家重点实验室北京100190

传统的基于检测的跟踪方法虽然具有较好的鲁棒性,但是这种直接将目标与背景简单分类的方式不能合理地考虑跟踪目标与背景的结构相对关系,而这种相对结构判别性信息的缺乏使得跟踪算法极易发生跟踪漂移,为了缓解这种问题,本文提出了一个... 详细信息

传统的基于检测的跟踪方法虽然具有较好的鲁棒性,但是这种直接将目标与背景简单分类的方式不能合理地考虑跟踪目标与背景的结构相对关系,而这种相对结构判别性信息的缺乏使得跟踪算法极易发生跟踪漂移,为了缓解这种问题,本文提出了一个基于深度相对度量学习的视觉跟踪方法.利用一个对称且权值共享的深度卷积神经网络构建深度相对度量学习模型,通过这个模型来挖掘跟踪目标在大尺度的图像块里的结构相对关系,然后在Bayes跟踪框架下利用这种相对度量最大值确定跟踪目标,整个跟踪算法简洁有效.通过在跟踪的基准视频序列库上的实验结果验证了本文算法在跟踪精度和跟踪成功率上的高性能.

关键词：相对属性度量学习卷积神经网络视觉跟踪

中药调控成骨细胞铁死亡治疗激素性股骨头坏死

在线全文

学校读者我要写书评

暂无评论

中国组织工程研究 2025年第1期29卷 185-192页

作者：张绵钰韩杰曾浩陈相汕高振罡广西中医药大学研究生学院广西壮族自治区南宁市530000 广西中医药大学附属瑞康医院广西壮族自治区南宁市530011

背景:有研究发现成骨细胞铁死亡可作为重要的发病机制诱导激素性股骨头坏死的发生与发展。随着祖国医学的发展,有学者发现某些中药单体、中药复方及中成药等可通过多种通路机制调控成骨细胞铁死亡,最终起到治疗激素性股骨头坏死的作用... 详细信息

背景:有研究发现成骨细胞铁死亡可作为重要的发病机制诱导激素性股骨头坏死的发生与发展。随着祖国医学的发展,有学者发现某些中药单体、中药复方及中成药等可通过多种通路机制调控成骨细胞铁死亡,最终起到治疗激素性股骨头坏死的作用。目的:探讨成骨细胞铁死亡与激素性股骨头坏死的关系及中草药调控成骨细胞铁死亡治疗激素性股骨头坏死的作用机制,为激素性股骨头坏死的诊治提供新的思路。方法:以“铁死亡,激素性股骨头坏死,成骨细胞,中草药,糖皮质激素,铁代谢,活性氧,谷胱甘肽过氧化物酶”为中文检索词,以“ferroptosis,Hormonal necrosis of the femoral head,osteoblast,Chinese herbal medicine,glucocorticoid,iron metabolism,ROS,GPX4”为英文检索词,检索中国知网、Pub Med、万方及维普数据库,筛选各数据库建库至2023年成骨细胞铁死亡与激素性股骨头坏死及中草药干预调控研究相关的文章,最终纳入74篇文献进行综述分析。结果与结论:(1)成骨细胞铁死亡在激素性股骨头坏死发病中起重要作用。(2)成骨细胞铁死亡的发生受到多种机制通路调控,如细胞内铁超载引起铁死亡;细胞发生脂质过氧化损伤细胞膜引起铁死亡;细胞膜上胱氨酸/谷氨酸逆向转运蛋白通过影响谷胱甘肽水平和谷胱甘肽过氧化物酶4活性,从而诱导铁死亡;细胞内发生芬顿反应产生大量活性氧引起铁死亡等。(3)中药单体淫羊藿苷等、中药复方青娥丸等及中成药补肾活血颗粒等均可通过调控成骨细胞铁死亡的发生,有助于防治激素性股骨头坏死。(4)目前关于成骨细胞铁死亡相关机制尚不明确,继续深入探明两者的作用机制,有望为临床治疗激素性股骨头坏死提供新选择。

关键词：股骨头坏死铁死亡中医药成骨细胞糖皮质激素铁代谢活性氧谷胱甘肽谷胱甘肽过氧化物酶脂质过氧化

在线全文

学校读者我要写书评

暂无评论

志愿服务参与能激发大学生创业吗

浙江学刊 2025年第1期 159-167页

作者：何伟臧小森中国社会科学院经济研究所中国社会科学院大学经济学院

培育和激发大学生的创业意愿，对于缓解就业压力、推动创新发展具有重要意义。本文基于2018年中国大学生追踪调查(PSCUS)的在校生数据及2019—2023年毕业生追踪数据，系统考察了志愿服务参与对大学生创业意愿和创业实践的影响及其作用... 详细信息

培育和激发大学生的创业意愿，对于缓解就业压力、推动创新发展具有重要意义。本文基于2018年中国大学生追踪调查(PSCUS)的在校生数据及2019—2023年毕业生追踪数据，系统考察了志愿服务参与对大学生创业意愿和创业实践的影响及其作用机制。实证研究发现：(1)志愿服务参与显著提高了大学生的创业意愿，这一结论在经过多种稳健性检验后依然成立；(2)志愿服务参与通过提升社会资本、心理资本和经济资本，实现对创业意愿的促进；(3)志愿服务参与对创业的影响存在显著的异质性，对女性、高年级以及人力资本状况较差和家庭经济困难的大学生群体，志愿服务的促进作用更为明显；(4)志愿服务参与具有显著的长期培育效应，不仅能提升创业意愿，还能影响毕业后的实际创业行为。上述发现为构建“志愿服务—创业教育”协同育人新模式、推动高校创新创业教育改革、缓解我国当前的大学生就业压力、促进国家创新创业高质量发展等，提供了重要启示。

关键词：志愿服务创业意愿创业资本大学生就业