检索结果-南通市图书馆

基于知识蒸馏的多模态预训练模型压缩方法研究

在线全文

学校读者我要写书评

暂无评论

基于知识蒸馏的多模态预训练模型压缩方法研究

作者：廖大伟云南大学

学位级别：硕士

多模态预训练模型在视觉语言分类、视觉语言生成等任务上表现出强大性能,可以实现视觉问答、视觉导航和视觉推理等应用。但目前参数过多导致模型推理速度慢,无法在运算资源有限的设备中进行运算。现有研究多采用早退、剪枝和知识蒸馏等... 详细信息

多模态预训练模型在视觉语言分类、视觉语言生成等任务上表现出强大性能,可以实现视觉问答、视觉导航和视觉推理等应用。但目前参数过多导致模型推理速度慢,无法在运算资源有限的设备中进行运算。现有研究多采用早退、剪枝和知识蒸馏等模型压缩技术来解决这个问题,其中以知识蒸馏效果最优。但由于多模态任务的特殊性,目前多模态知识蒸馏仍存在蒸馏过拟合和任务自适应差等问题。针对这些问题,本文基于知识蒸馏,研究特定模态层间蒸馏和多对多自适应层间蒸馏,主要内容包括:(1)现有的层间蒸馏方法虽然能缓解蒸馏中过拟合的问题,但是学生模型和教师模型在单模态输出上可能存在显著差异。仅仅采用多模态样本作为输入可能导致学生模型过拟合并且蒸馏效率低下。为此,本文提出了特定模态的层间蒸馏方法通过学习教师模型在每种模态中的表现,将知识从教师模型更好地转移到学生模型中。(2)在层间分布差异计算方式上,均方误差损失函数是否是最好的计算方式且是否能充分地让学生模型学习效率更高尚无充分的实验研究。为此,本文实验了四种层间分布差异计算方式验证了均方误差的有效性。在层间蒸馏的层间映射方式中,原始的跳步映射方式和最后步映射方式并不能充分学习教师模型的层间知识并且任务自适应性很差。为此,本文提出了基于Wasserstein距离的特定模态层间知识蒸馏,该方法充分考虑了的教师所有中间层对于所有学生中间层的影响,对于不同的任务自适应地产生不同的层间映射关系。(3)在移动计算环境下,视觉语言模型部署模型存在没有图像特征提取部分、无法在无网络的情况下推理等问题。为此,本文设计了视觉语言模型部署框架来统一解决这些问题。

关键词：预训练视觉语言模型知识蒸馏层间蒸馏多对多层间蒸馏

库拜煤层气示范区潜力煤层宏-微裂隙特征认识

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

非常规油气 2021年第6期8卷 52-59页

作者：赵正威秦大鹏潘晓飞廖正凯来鹏新疆维吾尔自治区煤田地质局一六一煤田地质勘探队乌鲁木齐830046 新疆维吾尔自治区地质环境监测院乌鲁木齐830000 新疆维吾尔自治区煤田地质局煤层气研发中心乌鲁木齐830091

裂隙对于煤层气开采的重要性相当于人体的血管。为了有效、科学地掌握研究区煤层气潜力层宏-微观裂隙特征,打通煤层气排采通道,以野外69个实测点、183个测量数据、40个煤岩样品的液氮等温吸附试验为依据,开展宏观节理认识基础上的微观... 详细信息

裂隙对于煤层气开采的重要性相当于人体的血管。为了有效、科学地掌握研究区煤层气潜力层宏-微观裂隙特征,打通煤层气排采通道,以野外69个实测点、183个测量数据、40个煤岩样品的液氮等温吸附试验为依据,开展宏观节理认识基础上的微观孔隙特征探索。结果表明:1)研究区节理发育的优势方向为NWW或NNE;随着岩石颗粒变细,节理裂隙线密度越大,反之亦然;随着岩层厚度的增加,节理裂隙发育的线密度呈指数递减,相关性系数为R;=0.873 2。2)根据地表围岩裂隙产状推断研究区煤层裂隙发育的优势方位的原则是岩性越细,优势方位越与煤层相一致。3)研究区三层煤样品的试验结果显示,A;和A;煤层3~4 nm的孔径孔隙对气体的储存贡献较大,孔径喉道对气体的脱附影响较大,开发过程中解析具有一定难度;A;孔径为70~600 nm,即以中、大孔径孔隙为主,解析脱附效果较好,是研究区三层煤中后期开发潜力最大的煤层。该成果认识对于煤层气有利区块的评价、优选以及开发方案的拟定极具指导价值。

关键词：宏-微观裂隙煤层气排采通道有利区块

充分发挥“半边天”在新时代的积极作用 001

在线全文

学校读者我要写书评

暂无评论

金融去杠杆、地方政府融资平台与经济波动--基于PVAR模型分析

乐山日报

作者：廖文凯

本报讯（廖文凯）昨（8）日，市委常委、宣传部长于丽赴井研县东林镇红花村，开展习近平新时代中国特色社会主义思想和党的十九大精神宣讲，特别是习近平总书记来川视察重要讲话精神宣讲，并携手女企业家协会开展“脱贫奔康·巾帼同行...

本报讯（廖文凯）昨（8）日，市委常委、宣传部长于丽赴井研县东林镇红花村，开展习近平新时代中国特色社会主义思想和党的十九大精神宣讲，特别是习近平总书记来川视察重要讲话精神宣讲，并携手女企业家协会开展“脱贫奔康·巾帼同行”主题活动，看望慰问基层优秀妇女代表，给

关键词：

来源： cnki报纸评论

在线全文

cnki报纸

学校读者我要写书评

暂无评论

统计与决策 2020年第7期36卷 123-127页

作者：孔薇扈文秀廖凯诚西安理工大学经济与管理学院西安710054 同济大学经济与管理学院上海200092

文章选取2014-2018年间31个省份的省级面板数据为样本,通过PVAR模型实证检验了金融去杠杆、地方政府融资平台与经济波动两两变量之间的关系。研究发现:金融去杠杆和地方政府融资平台都对经济波动具有显著正向影响,并且金融去杠杆比地方... 详细信息

文章选取2014-2018年间31个省份的省级面板数据为样本,通过PVAR模型实证检验了金融去杠杆、地方政府融资平台与经济波动两两变量之间的关系。研究发现:金融去杠杆和地方政府融资平台都对经济波动具有显著正向影响,并且金融去杠杆比地方政府融资平台对经济波动的影响大;金融去杠杆与地方政府融资平台呈负相关关系,即金融去杠杆规范了地方政府融资平台的债务规模,但影响程度较小;从子样本的实证结果来看,相较于中部、西部地区,东部地区金融去杠杆对经济波动的影响最大,并且在降低地方政府融资平台债务中取得了最显著的效果。

关键词：金融去杠杆地方政府融资平台经济波动

在线全文

学校读者我要写书评

暂无评论

福建开展实战大练兵达标互检 002

人民公安报

作者：郑明廖凯

本报讯记者郑明、通讯员廖凯报道：11月中下旬，福建省公安厅组织开展了全警实战大练兵达标互检。福建省9个设区市、平潭综合实验区公安局以警务实战教官为主组成互检组，按照地域邻近原则，分赴各地开展考核检查。福建省公安厅以随机... 详细信息

本报讯记者郑明、通讯员廖凯报道：11月中下旬，福建省公安厅组织开展了全警实战大练兵达标互检。福建省9个设区市、平潭综合实验区公安局以警务实战教官为主组成互检组，按照地域邻近原则，分赴各地开展考核检查。福建省公安厅以随机抽取的方式，确定10名县级公安机?

关键词：大练兵福建省公安厅

来源： cnki报纸评论

在线全文

cnki报纸

学校读者我要写书评

暂无评论

单片集成光—频率转换电路设计

单片集成光—频率转换电路设计

作者：廖凯电子科技大学

学位级别：硕士

光作为一种信号载体,属于模拟信号,无法直接被计算机处理,需要转换为数字信号。传统模拟信号转换成数字信号的方式离不开模/数转换器,但此种方法价格较高,功耗较大。因此直接把光信号转换为数字信号的方式也逐渐受到重视。光—频率转换... 详细信息

光作为一种信号载体,属于模拟信号,无法直接被计算机处理,需要转换为数字信号。传统模拟信号转换成数字信号的方式离不开模/数转换器,但此种方法价格较高,功耗较大。因此直接把光信号转换为数字信号的方式也逐渐受到重视。光—频率转换电路把光信号转变为可用于检测的数字方波信号,其频率大小和光强成线性关系。本文在同一个硅基衬底上设计了一种具有高线性、低功耗、低暗信号频率的单片集成的光—频率转换电路,整个电路主要由PN型光电二极管、电容反馈跨阻放大(Capacitive Feedback Transresistance Amplifier,CTIA)电路、积分电荷泄放电路、比较器电路、振荡器电路这五个模块组成。性能方面要求电路最大输出频率不小于1.0 MHz,输出占空比为50%的方波,误差小于等于5%,非线性度误差小于等于1%,在波长550 nm光照射下转换增益不小于1000Hz/(μW/cm),暗信号频率小于等于1 Hz。本文的研究工作主要包括以下三个方面:1.开展了单片集成光—频率转换电路的设计。依据给出的电路性能参数,搭建电路构架,并对光电二极管、CTIA电路、积分电荷泄放电路、比较器电路、振荡器电路等单元模块进行了设计和仿真,最终通过把各模块串连一起进行整体电路仿真,还研究了积分电容、泄放电容对电路性能的影响。2.完成了版图设计及后仿真。介绍了版图设计所涉及的原理和规则,根据搭建好的电路完成与之对应的版图设计,版图通过验证后提取所设计版图的寄生参数,最后再进行后仿真检验结果。3.对芯片样片进行了性能参数测试。通过搭建测试平台对流片的芯片样片进行测试,得到占空比、最大输出频率、非线性度、暗信号频率、转换增益等性能参数,并针对测试结果进行了分析,同时针对存在输出频率不稳定的缺点,给出了后续可能的解决办法。本文最终完成了单片集成光—频率转换电路的设计,并在0.6μm CMOS工艺上实现了流片,同时完成了芯片测试。最终流片出来的样品芯片测试性能达到占空比54.6%,最大输出频率1.005 MHz,非线性度0.42%,转换增益2190Hz/(μW/cm),暗信号频率小于0.1 Hz。

关键词：单片集成光频转换电容反馈跨阻放大低暗信号频率

马克思如何认识、使用与定义“Ideologe”——对《德意志意识形态》特别是“圣麦克斯章”的考察

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

哲学动态 2022年第2期 14-23页

作者：廖伟凯华侨大学哲学与社会发展学院

马克思在《德意志意识形态》德文版中共写下45处“Ideologe,-n”(意识形态家),内容涉及对其产生的原因、看待世界的方式及相关定义的阐释。马克思对该词的认识、使用与定义,通篇是一致的,亦即意识形态家是采用脱离现实基础后的观念与思... 详细信息

马克思在《德意志意识形态》德文版中共写下45处“Ideologe,-n”(意识形态家),内容涉及对其产生的原因、看待世界的方式及相关定义的阐释。马克思对该词的认识、使用与定义,通篇是一致的,亦即意识形态家是采用脱离现实基础后的观念与思想来认识与解释世界的一群人。马克思并没有对“意识形态家”的本质作过负面的指涉,而是统称哲学、政治、法律等领域的专家,只要从观念出发,颠倒现实与观念的主从关系,他们就是“意识形态家”。

关键词：思想家意识形态家意识形态《德意志意识形态》

在线全文

学校读者我要写书评

暂无评论

用精神指导实践加快转型升级 001

乐山日报

作者：廖文凯

本报讯（廖文凯）昨（23）日，市委常委、宣传部长于丽赴井研县调研，并就学习宣传贯彻党的十九大精神提出要求。于丽指出，要深入学习宣传贯彻好党的十九大精神，抢抓机遇，创新突破，以抓发展、抓项目、抓特色的成效推动重点项目，推...

本报讯（廖文凯）昨（23）日，市委常委、宣传部长于丽赴井研县调研，并就学习宣传贯彻党的十九大精神提出要求。于丽指出，要深入学习宣传贯彻好党的十九大精神，抢抓机遇，创新突破，以抓发展、抓项目、抓特色的成效推动重点项目，推动转型升级、美丽发展。看现场、问项

关键词：

来源： cnki报纸评论

在线全文

cnki报纸

学校读者我要写书评

暂无评论

拉班-芭特妮芙动作研究体系综述

北京舞蹈学院学报 2017年第3期 21-28页

作者：周宇凯伦·布拉德利廖彬彬(译) 亿派学院代尔夫特2624PJ 拉班-芭特妮芙动作研究院纽约11217 不详

本文全面介绍了拉班-芭特妮芙动作研究体系(LBMS)的历史起源、基本理论以及主要的实践应用。鲁道夫·拉班,一生致力于创立包括拉班舞谱、拉班动作分析、空间谐和在内的拉班动作理论,并几乎无意间将舞蹈和其他形式的动作表演从专门的技... 详细信息

本文全面介绍了拉班-芭特妮芙动作研究体系(LBMS)的历史起源、基本理论以及主要的实践应用。鲁道夫·拉班,一生致力于创立包括拉班舞谱、拉班动作分析、空间谐和在内的拉班动作理论,并几乎无意间将舞蹈和其他形式的动作表演从专门的技能培训变成了浅显易懂的动作教育。拉班的学生芭特妮芙及同僚将传统拉班理论进一步发扬光大,建立了拉班-芭特妮芙动作研究体系,微观层面包含了身体、力效、空间、形体四大元素,宏观层面概括了人体动作模式(主题/二元性、阶段、发展进化),揭示了人体动作的基本规律并提供了分析和整合的工具与方法,对很多学科和领域产生了深远的影响:人类学、舞蹈、心身实践、表演和编创、动作分析、领导力研究训练、外交学、社区工作、初级和中等教育、学习理论、舞蹈动作心理治疗、体育运动、工业设计和人机互动、动漫、神经科学等领域。

关键词：鲁道夫·拉班茵格·芭特妮芙拉班动作分析力效空间谐和