检索结果-南通市图书馆

维普期刊数据库

在线全文

学校读者我要写书评

暂无评论

面向深度强化学习的经验回放方法研究

面向深度强化学习的经验回放方法研究

作者：时圣苗苏州大学

学位级别：硕士

深度强化学习方法将深度学习与强化学习相结合,目前已在多种复杂决策任务的处理中展现出了强大的通用性并取得了突破性的进展。利用深度神经网络构建网络模型并根据强化学习算法进行决策,在没有任何先验知识的情况下,智能体可根据环境... 详细信息

深度强化学习方法将深度学习与强化学习相结合,目前已在多种复杂决策任务的处理中展现出了强大的通用性并取得了突破性的进展。利用深度神经网络构建网络模型并根据强化学习算法进行决策,在没有任何先验知识的情况下,智能体可根据环境反馈的奖赏信号学习执行策略。经验回放方法在网络训练过程中消除了样本之间的时序相关性,并使得一些样本可以重复利用,提高了数据的利用率。然而如何存储以及选取样本对网络训练有着显著的影响,为进一步提高深度强化学习中经验回放方法的性能,本文从以下三个方面进行研究并改进:（1）基于时序差分误差（Temporal Difference-error,TD-error）的优先级采样方法以TD-error绝对值衡量每个经验样本的重要性,然而神经网络参数的变化会影响经验缓冲池中样本的TD-error,导致在采样过程中会有偏差。针对该问题,以样本的立即奖赏值作为优先级采样的衡量标准,并通过经验样本中立即奖赏值的大小调整其采样概率,提出一种基于奖赏优先级采样的深度确定性策略梯度算法,通过在MuJoCo环境下的实验结果证明了该算法的有效性。（2）用于存储经验样本的经验缓冲池采用先进先出的存储方式,当经验样本变化时,优先级采样方法需要对新加入的样本赋予优先级并对原有的经验样本优先级进行修改,在获取样本时需要根据优先级进行采样,因此一定程度上增加了算法时间复杂度。为进一步提高算法效率,提出了采用分类经验回放的深度确定性策略梯度方法,分别根据经验样本中的TD-error和立即奖赏值两种分类标准进行分类,同样在具有连续状态动作空间的任务中验证了算法的有效性。（3）经验回放方法中,每一时间步将智能体Agent与环境交互产生的样本存入经验缓冲池中,当到达一定样本数量后从中选取每批次数量样本进行网络训练。为减小缓冲池中样本的冗余度,使每批次获取到的样本数据更丰富,设置多个钾能体Agent与环境交互产生经验样本,使网络训练能够拥有更充分和多样的样本数据,提出一种基于多Agent采样经验回放的深度Q网络方法,并在离散的强化学习任务中验证了算法的优越性。

关键词：深度强化学习经验回放优先级经验回放分类经验回放多Agent采样

同方学位论文库评论

在线全文

同方学位论文库

学校读者我要写书评

暂无评论

一种加速时间差分算法收敛的方法

自动化学报 2021年第7期47卷 1679-1688页

作者：何斌刘全张琳琳时圣苗陈红名闫岩苏州大学计算机科学与技术学院苏州215006 苏州大学江苏省计算机信息处理技术重点实验室苏州215006 吉林大学符号计算与知识工程教育部重点实验室长春130012 软件新技术与产业化协同创新中心南京210000

时间差分算法(Temporal difference methods,TD)是一类模型无关的强化学习算法.该算法拥有较低的方差和可以在线(On-line)学习的优点,得到了广泛的应用.但对于一种给定的TD算法,往往只能通过调整步长参数或其他超参数来加速收敛,这也就... 详细信息

时间差分算法(Temporal difference methods,TD)是一类模型无关的强化学习算法.该算法拥有较低的方差和可以在线(On-line)学习的优点,得到了广泛的应用.但对于一种给定的TD算法,往往只能通过调整步长参数或其他超参数来加速收敛,这也就造成了加速TD算法收敛的方法匮乏.针对此问题提出了一种利用蒙特卡洛算法(Monte Carlo methods,MC)来加速TD算法收敛的方法(Accelerate TD by MC,ATDMC).该方法不仅可以适用于绝大部分的TD算法,而且不需要改变在线学习的方式.为了证明方法的有效性,分别在同策略(On-policy)评估、异策略(Off-policy)评估和控制(Control)三个方面进行了实验.实验结果表明ATDMC方法可以有效地加速各类TD算法.

关键词：强化学习时间差分算法蒙特卡罗算法加速收敛

维普期刊数据库

中华民族视觉形象的文化叙事及实践——基于文化形象学的论析

在线全文

学校读者我要写书评

暂无评论

新疆师范大学学报（哲学社会科学版） 2025年第2期46卷 112-121页

作者：令小雄苗昕西北师范大学马克思主义学院教育部高校思想政治工作队伍培训研修中心(西北师范大学) 甘肃兰州730070

文本基于多维度理论系统梳理中华民族视觉形象的文化意蕴、内涵质态与构建策略,为铸牢中华民族共同体意识提供理论基础。一是运用文化符号学理论解析中华民族视觉形象的意涵及其历史演变,探赜“和合共生,合谐共美”价值理想承载的多元... 详细信息

文本基于多维度理论系统梳理中华民族视觉形象的文化意蕴、内涵质态与构建策略,为铸牢中华民族共同体意识提供理论基础。一是运用文化符号学理论解析中华民族视觉形象的意涵及其历史演变,探赜“和合共生,合谐共美”价值理想承载的多元一体文化格局,通过提炼核心符号,揭示视觉形象塑造在铸牢中华民族共同体意识中的重要作用。二是采用历史唯物主义方法论考察中华民族视觉形象在不同历史时期的构建与传播路径,通过文化形象考古学和文献学剖析视觉形象文化功能转变与价值重塑过程,探讨其在凝聚民族力量、强化国家认同中的重要意义。三是引入文化哲学、文化心理学视角分析视觉形象在增强社会凝聚力和心理认同中的内在机制,探究视觉符号通过激活集体记忆和情感共鸣、唤起民族自豪感和共同体意识成为社会整合的重要媒介。四是基于文化形象学视角提出构建中华民族视觉形象的策略:从中华文化形象本体论和认识论出发,提炼具有代表性的符号,利用现代数智科技和新媒体创新视觉形象的表达与传播,注重文化形象多样性的辩证统一,发掘整合各民族形象文化元素的共同意识。

关键词：中华民族视觉形象国家形象文化形象认同文化传播

维普期刊数据库

在线全文

学校读者我要写书评

暂无评论

人猿

江南 2025年第1期 21-37页

作者：孙一圣不详

没有窗子只有烟囱的厨屋就是白天也黑咕隆咚。屋顶的椽子和苇箔,还有门框统统被烟熏得黑咕隆咚。是以,厨屋里吊了一盏灯,灯罩以上照常黑咕隆咚,灯罩下头冒着昏黄散漫的光,很是不合时宜。刚刚进门,我便看见似乎有些冒险的妈妈。灯盏吊得... 详细信息

没有窗子只有烟囱的厨屋就是白天也黑咕隆咚。屋顶的椽子和苇箔,还有门框统统被烟熏得黑咕隆咚。是以,厨屋里吊了一盏灯,灯罩以上照常黑咕隆咚,灯罩下头冒着昏黄散漫的光,很是不合时宜。刚刚进门,我便看见似乎有些冒险的妈妈。灯盏吊得低低的,妈妈的脑袋别在灯罩边上,我能清楚看到妈妈肩膀以下,却看不到妈妈的脑袋。妈妈一手搅拌锅里,一手挥着蒸汽。那只灯盏就像妈妈的脑袋,晃来晃去。没错,看起来妈妈没有脑袋,只是长了一颗灯盏权作自己的脑袋。这可真是一颗明亮的脑袋呀。

关键词：搅拌锅灯罩烟熏

社会科学主体性的理论建构——中国式现代化的精神叙事

维普期刊数据库博看期刊评论

在线全文

学校读者我要写书评

暂无评论

浙江学刊 2025年第1期 24-34+239页

作者：周晓虹彭圣钦南京大学南京大学社会学院

对中国社会科学主体性的呼唤意味着将作为研究客体的中国转化为研究主体，是破除西方社会科学知识霸权和发展中国特色哲学社会科学的必由之路。本文从基本动因和理论资源的角度，梳理并整合了既有的主体性论述，将其概括为历史主体性和... 详细信息

对中国社会科学主体性的呼唤意味着将作为研究客体的中国转化为研究主体，是破除西方社会科学知识霸权和发展中国特色哲学社会科学的必由之路。本文从基本动因和理论资源的角度，梳理并整合了既有的主体性论述，将其概括为历史主体性和文化主体性两种策略。前者不满于诸如传统/现代二分法等西方理论框架对纷繁复杂的中国历史和现实经验的切割，后者则不满于西方理论背后的文化预设对中国社会和文化传统的曲解。在此基础上，本文试图超越二者，提出另一种以中华文明为基础、以提供中国式现代化的理论叙事为目标的文明主体性策略。

关键词：社会科学主体性历史主体性文化主体性文明主体性

神经外科患者术后感染病原菌特征及危险因素分析

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

中国病原生物学杂志 2025年第1期 86-89+94页

作者：时丽娜魏志玄张小燕南阳医学高等专科学校第一附属医院神经外科重症监护室南阳医学高等专科学校第一附属医院神经外科一病区

目的本研究旨在探讨神经外科术后颅内感染的病原生物学特征及危险因素，为临床预防和治疗提供科学依据。方法本研究是一项回顾性队列研究，纳入了2021年1月-2024年6月期间在某三级甲等医院神经外科接受手术治疗的患者200例。通过病历... 详细信息

目的本研究旨在探讨神经外科术后颅内感染的病原生物学特征及危险因素，为临床预防和治疗提供科学依据。方法本研究是一项回顾性队列研究，纳入了2021年1月-2024年6月期间在某三级甲等医院神经外科接受手术治疗的患者200例。通过病历回顾、实验室检查结果、影像学检查及随访信息收集了详细的数据。并统计术后并发颅内感染现况及病原菌分布等，采用卡方检验或Fisher精确检验进行单因素分析，条件Logistic回归模型进行多因素分析，以确定术后感染的相关危险因素。结果 200例患者中发生术后颅内感染的23例。主要病原体为金黄色葡萄球菌(43.48%),铜绿假单胞菌(26.09%),肠杆菌科(17.39%),真菌(8.70%),及其他病原体(4.34%)。感染部位主要集中在颅内(65.22%),其次是伤口(21.74%)。主要临床表现为发热(86.96%),头痛(65.22%)。单因素分析显示，手术时间>4 h(P=0.001)、ICU入住时间>7 d(P=0.01)、术前住院天数>7 d(P=0.03)、糖尿病患者(P=0.04)、术中输血(P=0.02)、术后使用机械通气(P=0.01)等均为术后感染的潜在危险因素。多因素分析进一步确认，手术时间>4 h(P=0.001)、ICU入住时间>7 d(P=0.02)、术中输血(P=0.03)、术后使用机械通气(P=0.01)是术后感染的独立危险因素。抗生素治疗效果在金黄色葡萄球菌感染中较好，但多重耐药性在部分病原体中较为常见。结论神经外科术后颅内感染的主要病原体为金黄色葡萄球菌，手术时间>4 h、ICU入住时间>7 d、术中输血和术后使用机械通气是术后感染的重要危险因素。本研究结果为临床预防和治疗提供了重要的参考依据。

关键词：神经外科术后颅内感染病原生物学特征危险因素分析抗生素敏感性

马克思主义生态学视域下的“西方气候正义话语”辨析

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

学习论坛 2025年第1期 14-24页

作者：苗旭琳郇庆治北京大学马克思主义学院

进入新世纪，一个带有浓郁“西方中心论”色彩、试图为欧美发达国家开脱义务责任并将全球气候治理责任“甩锅”给广大发展中国家的“西方气候正义话语”甚嚣尘上。它在简化或曲解发展中国家气候正义诉求的基础上对气候正义理念原则展开... 详细信息

进入新世纪，一个带有浓郁“西方中心论”色彩、试图为欧美发达国家开脱义务责任并将全球气候治理责任“甩锅”给广大发展中国家的“西方气候正义话语”甚嚣尘上。它在简化或曲解发展中国家气候正义诉求的基础上对气候正义理念原则展开重新诠释阐发，借助于“孤立主义方法”制造气候正义与社会正义间的对立，偏执于为气候应对中发达国家的历史责任进行辩解，突出或渲染一部分发展中国家的现实责任，并配合以代际责任之名来转嫁责任，向广大发展中国家的气候正义观点立场发起了严峻挑战。马克思主义生态学的分析方法及基本观点，不仅可以强有力地揭露这种貌似时尚话语的理论浅薄之处，重新规约气候正义理论在社会与生态双重向度上的伦理诉求，还可以对气候非正义的根源进行深层追问与追责，进而指明推进气候正义理论研究与实践的正确方向，即指向并挑战变革资本主义社会的生产生活方式及其所决定的严重不公正的国际经济政治秩序。

关键词：气候(环境)正义历史责任代际责任现实责任马克思主义生态学

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

基于数值分析法的水肥一体机设计研究

农机化研究 2025年第2期47卷 186-189,194页

作者：底慧萍李喆时河北地质大学华信学院石家庄050000 石家庄理工职业学院石家庄050000

以进一步提升水肥一体机的智能性、数字性作业为目标,针对整机的灌施精准性要求展开设计。充分考虑水肥一体机的运用特点和结构组成,结合水肥的参数融合关系,建立用于水肥一体机准确控制作业的状态方程模型,设计以数值分析处理函数为核... 详细信息

以进一步提升水肥一体机的智能性、数字性作业为目标,针对整机的灌施精准性要求展开设计。充分考虑水肥一体机的运用特点和结构组成,结合水肥的参数融合关系,建立用于水肥一体机准确控制作业的状态方程模型,设计以数值分析处理函数为核心的软件控制模块,搭建同步动作实施的硬件执行平台。展开多作物的灌施作业试验,结果表明:基于数值分析方法的水肥一体机系统架构设计合理,数值分析算法融入有效,整机试验的数值计算准确率可达98.00%以上;水肥混合均匀有度,整体管路灌施顺畅,灌施指令准确率可达99.00%以上,整机灌施效率较高,充分验证了数值分析方法应用的正确性与优越性,可以促进类似农机装备与高等数学多维度融合。

关键词：水肥一体机数值分析状态方程灌施指令准确率多维度融合

维普期刊数据库博看期刊

在线全文

学校读者我要写书评

暂无评论

职业教育“走出去”英语教学实践探讨

现代职业教育 2025年第02期 173-176页

作者：黄春苗广西交通职业技术学院

运用文献资料法、逻辑分析法等，探讨职业教育“走出去”英语教学实践策略，旨在助力“一带一路”建设。职业教育“走出去”对英语教学提出了诸多挑战，化挑战为机遇，提升人才培养质量，职业院校英语教育需注重英语与专业深度融合、学... 详细信息

运用文献资料法、逻辑分析法等，探讨职业教育“走出去”英语教学实践策略，旨在助力“一带一路”建设。职业教育“走出去”对英语教学提出了诸多挑战，化挑战为机遇，提升人才培养质量，职业院校英语教育需注重英语与专业深度融合、学生听说技能的培养以及不同文化的有机渗透。在职业教育“走出去”背景下进行英语教学，教师及时转变教育理念，与时俱进，合理地调整人才培养目标、丰富英语教学内容、创新课堂教学方法、构建多元评价体系等，使职业教育顺利“走出去”。

关键词：职业教育 “走出去” 英语教学多元评价 “一带一路”