检索结果-南通市图书馆

基于不确定性估计的离线确定型Actor-Critic

在线全文

学校读者我要写书评

暂无评论

计算机学报 2024年第4期47卷 717-732页

作者：冯涣婷程玉虎王雪松中国矿业大学信息与控制工程学院江苏徐州221116 江苏信息职业技术学院智能工程学院江苏无锡214153

Actor-Critic是一种强化学习方法,通过与环境在线试错交互收集样本来学习策略,是求解序贯感知决策问题的有效手段.但是,这种在线交互的主动学习范式在一些复杂真实环境中收集样本时会带来成本和安全问题离线强化学习作为一种基于数据驱... 详细信息

Actor-Critic是一种强化学习方法,通过与环境在线试错交互收集样本来学习策略,是求解序贯感知决策问题的有效手段.但是,这种在线交互的主动学习范式在一些复杂真实环境中收集样本时会带来成本和安全问题离线强化学习作为一种基于数据驱动的强化学习范式,强调从静态样本数据集中学习策略,与环境无探索交互,为机器人、自动驾驶、健康护理等真实世界部署应用提供了可行的解决方案,是近年来的研究热点.目前,离线强化学习方法存在学习策略和行为策略之间的分布偏移挑战,针对这个挑战,通常采用策略约束或值函数正则化来限制访问数据集分布之外(Out-Of-Distribution,OOD)的动作,从而导致学习性能过于保守,阻碍了值函数网络的泛化和学习策略的性能提升.为此,本文利用不确定性估计和OOD采样来平衡值函数学习的泛化性和保守性,提出一种基于不确定性估计的离线确定型Actor-Critic方法(Offline Deterministic Actor-Critic based on UncertaintyEstimation,ODACUE).首先,针对确定型策略,给出一种Q值函数的不确定性估计算子定义,理论证明了该算子学到的Q值函数是最优Q值函数的一种悲观估计.然后,将不确定性估计算子应用于确定型Actor-Critic框架中,通过对不确定性估计算子进行凸组合构造Critic学习的目标函数.最后,D4RL基准数据集任务上的实验结果表明:相较于对比算法,ODACUE在11个不同质量等级数据集任务中的总体性能提升最低达9.56%,最高达64.92%.此外,参数分析和消融实验进一步验证了ODACUE的稳定性和泛化能力.

关键词：离线强化学习不确定性估计分布外采样凸组合 Actor-Critic

科学命题:信息技术课程总结性评价研究的核心

在线全文

学校读者我要写书评

暂无评论

中小学信息技术教育 2006年第6期 16-19页

作者：冯伯虎李艺江苏连云港师范高等专科学校南京师范大学教育科学学院

继新课程实施以及针对信息技术新教材、教法进行多轮探讨之后,下一个热点将是什么?有人说是信息技术课程被纳入高考。的确,2005年山东省公布2007年信息技术将以3+X的形式进入高考,就着实让信息技术教师们兴奋了一把。今年3月,海南发布... 详细信息

继新课程实施以及针对信息技术新教材、教法进行多轮探讨之后,下一个热点将是什么?有人说是信息技术课程被纳入高考。的确,2005年山东省公布2007年信息技术将以3+X的形式进入高考,就着实让信息技术教师们兴奋了一把。今年3月,海南发布的信息技术高考方案在第一轮新课程实验即将完成的今天又掀起了一轮热潮。距离考试的时间越近,人们的好奇也越强烈,毕竟这是第一次"动真格"着手实施信息技术高考,尚且还有很多困难需要克服。海南省是否已做好准备,其他省从中可以借鉴哪些经验……带着同样的困惑,记者采访了组织实施海南信息技术高考方案的海南教研院段青老师以及国家普通高中信息技术课程标准研制组负责人李艺教授。与"喧闹"的高考相比,其他总结性评价方式则显得低调得多,在4月份刚结束的全国信息技术课程总结性评价研讨会上也是探讨高考者居多。是否其他总结性评价的方式就毫无探讨的价值可言?也不是。信息技术期末考试、会考、等级考试、水平考试等等,它们产生于不同的背景,在信息技术学科发展的不同阶段发挥着不同的作用,有着不同的适用性。处于摸索阶段的信息技术总结性评价需要这样的百家争鸣和百花齐放。广东教育厅教育教学研究室的朱光明老师和山东省邹平一中的郭凤广老师的文章就向我们展示了本地各具特色的总结性评价方案,从不同的角度启发着我们的思路。或许,仅仅探讨是此是彼已不再重要,现在迫切需要我们去寻找总结性评价的核心和关键。冯伯虎老师撰写的《科学命题:信息技术课程总结性评价研究的核心》一文的目的也在于此。

关键词：信息技术课程总结性评价科学命题纸笔考试高中信息技术典型试题研究报告调研考试高考方案香港地区

在线全文

学校读者我要写书评

暂无评论

长江经济带纺织服装产业发展路径研究

纺织导报 2016年第11期 44-48页

作者：冯德虎倪麟中国纺织建设规划院

经过多年发展,长江经济带纺织服装产业在规模、利润、投资、出口等方面,占据了全国总量的一半以上,但产业资源分布不均,呈现梯度分布。通过对上中下游纺织服装产业发展条件进行分析,本文指出上中下游地区纺织服装产业的发展路径,建议建... 详细信息

经过多年发展,长江经济带纺织服装产业在规模、利润、投资、出口等方面,占据了全国总量的一半以上,但产业资源分布不均,呈现梯度分布。通过对上中下游纺织服装产业发展条件进行分析,本文指出上中下游地区纺织服装产业的发展路径,建议建立跨长江经济带行政区域的纺织服装产业联动机制,筹建区域发展联盟,推进该经济带纺织服装产业的协同发展。

关键词：长江经济带纺织服装发展路径

课例反思研究:信息技术教师行动研究的新取向

在线全文

学校读者我要写书评

暂无评论

中国电化教育 2006年第9期 58-61页

作者：冯伯虎李艺连云港师范高等专科学校计算机系江苏连云港222006 南京师范大学教育技术系江苏南京210097

由于行动研究比较符合一线教师的工作与研究需求,因而深受课程专家的推崇和教师们的喜爱。课例反思研究,作为教师行动研究的新取向,不仅为新课改实验区广大信息技术教师所接受,而且,在传统模式的基础上,又推出了一课三议模式和基于网络... 详细信息

由于行动研究比较符合一线教师的工作与研究需求,因而深受课程专家的推崇和教师们的喜爱。课例反思研究,作为教师行动研究的新取向,不仅为新课改实验区广大信息技术教师所接受,而且,在传统模式的基础上,又推出了一课三议模式和基于网络平台的远程合作研究模式。本文从当前信息技术学科的现状分析入手,探讨了课例反思教学的概念和相关模式。

关键词：信息技术教师行动研究课例反思研究网络平台发布教学内容课程改革

利用农林废弃物创制水处理功能材料的研究进展

在线全文

学校读者我要写书评

暂无评论

环境工程 2025年

作者：陈一良宋文旭洪桐潇张磊凌晨丁大虎阮宏华南京林业大学生态与环境学院南京农业大学资源与环境科学学院

农林废弃物的高效资源化利用对于保护生态环境、开发生物质资源以及绿色低碳可持续发展具有重要意义，已受到世界各国科学家与产业界的高度关注。利用农林废弃物创制先进环境功能材料是当今重要且活跃的研究方向，前景十分广阔。本文在... 详细信息

农林废弃物的高效资源化利用对于保护生态环境、开发生物质资源以及绿色低碳可持续发展具有重要意义，已受到世界各国科学家与产业界的高度关注。利用农林废弃物创制先进环境功能材料是当今重要且活跃的研究方向，前景十分广阔。本文在深入调研国内外文献资料的基础上进行全面梳理分析和总结，系统阐述了基于农林废弃物构筑和制备水处理功能材料的研究现状与最新进展，包括农林废弃物预处理改性的技术方法，其在生物炭、吸附和絮凝、光催化和高级氧化、水环境生态修复、新型分离膜等方面的研究成果，重点关注废弃物原料的选用、材料制备策略与方法、应用途径及效果等。最后凝练出当前存在的主要问题以及未来有待探索的重要研究方向。

关键词：农林废弃物生物质环境功能材料水污染防治固废资源化利用

机器学习识别LRRC15和MICB为类风湿关节炎的免疫诊断标志物

在线全文

同方期刊数据库

学校读者我要写书评

暂无评论

中国组织工程研究 2025年第11期29卷 2411-2420页

作者：田彦虎黄心岸郭桐桐如斯坦木·阿合坦木罗江淼肖遥王超王维山石河子大学医学院新疆维吾尔自治区石河子市832008 石河子大学第一附属医院骨科新疆维吾尔自治区石河子市832008

背景:类风湿关节炎是一种慢性的自身免疫性疾病,早期诊断对于预防疾病进展和治疗至关重要。因此探究类风湿关节炎的诊断特征和免疫细胞浸润具有重要意义。目的:基于Gene Expression Omnibus(GEO)数据库,通过机器学习算法,筛选类风湿关... 详细信息

背景:类风湿关节炎是一种慢性的自身免疫性疾病,早期诊断对于预防疾病进展和治疗至关重要。因此探究类风湿关节炎的诊断特征和免疫细胞浸润具有重要意义。目的:基于Gene Expression Omnibus(GEO)数据库,通过机器学习算法,筛选类风湿关节炎潜在重要的诊断标记物,并探讨类风湿关节炎的诊断特征与免疫细胞浸润的关系。方法:从GEO数据库获取类风湿关节炎相关的滑膜组织的基因表达数据集,采用批量效应去除法对数据集进行合并,采用R软件进行差异表达基因的鉴定和功能相关性分析,通过生物信息学分析和3种机器学习算法进行疾病特征基因的提取,筛选出类风湿关节炎相关的关键基因。此外,对所有差异表达基因进行免疫细胞浸润分析,分析类风湿关节炎的炎症状态,并对其诊断特征与浸润性免疫细胞的关系进行研究。结果与结论:(1)在类风湿关节炎和正常滑膜组织中,获得了179个差异表达基因,其中124个基因表达上调,55个基因表达下调;(2)富集分析显示类风湿关节炎和免疫反应之间存在良好的相关性;(3)通过3种机器学习算法分析发现,LRRC15和MICB可能是类风湿关节炎潜在的标记物;(4)LRRC15(曲线下面积=0.964,95%CI:0.924-0.992)和MICB(曲线下面积=0.961,95%CI:0.923-0.990)在验证数据集上有着较强的诊断能力;(5)13种免疫细胞浸润发生改变,以巨噬细胞为主;(6)在类风湿关节炎中,免疫细胞功能的多数促炎途径被激活;(7)免疫相关性分析发现LRRC15和MICB与M1型巨噬细胞的相关性最强;(8)结果发现LRRC15和MICB被确定为类风湿关节炎潜在的诊断标记物,具有较强的诊断性能并且与免疫细胞浸润具有显著的相关性;通过机器学习及生物信息学分析加深了对类风湿关节炎免疫浸润的理解,为类风湿关节炎的诊断和治疗提供新的思路。

关键词：类风湿关节炎机器学习免疫浸润诊断标记物差异表达基因

氧化苦参碱对牙周膜干细胞干性标志物表达和成骨分化的作用

在线全文

学校读者我要写书评

暂无评论

中国组织工程研究 2025年第19期29卷 3992-3999页

作者：罗晶雍敏陈琦杨长怡赵恬马静梅冬兰虎金鹏杨昭君王钰然刘博宁夏医科大学口腔医学院宁夏回族自治区银川市750004 宁夏回族自治区干细胞与再生医学重点实验室宁夏回族自治区银川市750004 宁夏医科大学总医院口腔正畸科宁夏回族自治区银川市750004 宁夏医科大学总医院牙周病科宁夏回族自治区银川市750004

背景:人牙周膜干细胞是牙周再生组织工程潜在的功能细胞,然而长期体外培养会导致牙周膜干细胞干性减低并发生复制性衰老,从而影响其治疗效果。目的:探讨氧化苦参碱在体外对牙周膜干细胞干性维持和骨向分化的影响,并寻找潜在的影响机制... 详细信息

背景:人牙周膜干细胞是牙周再生组织工程潜在的功能细胞,然而长期体外培养会导致牙周膜干细胞干性减低并发生复制性衰老,从而影响其治疗效果。目的:探讨氧化苦参碱在体外对牙周膜干细胞干性维持和骨向分化的影响,并寻找潜在的影响机制。方法:采用组织块酶消化法从人牙周膜组织中分离、培养得到牙周膜干细胞,并使用流式细胞仪进行间充质细胞表面标志物鉴定。用0,2.5,5,10μg/mL氧化苦参碱孵育牙周膜干细胞,通过CCK8实验检测氧化苦参碱对牙周膜干细胞增殖活性的影响,筛选后续实验合适的药物质量浓度,采用Western blot检测牙周膜干细胞中干细胞非特异性蛋白SOX2和OCT4的表达,采用qRT-PCR、Western blot检测牙周膜干细胞中成骨相关基因和蛋白表达水平。结果与结论:①CCK8实验结果显示2.5μg/mL氧化苦参碱对牙周膜干细胞增殖活性有显著增强作用,后续实验选用2.5μg/mL氧化苦参碱进行干预;②与空白对照组相比,氧化苦参碱组牙周膜干细胞的干性标志物SOX2蛋白表达水平变化不明显(P>0.05),OCT4蛋白表达明显上调(P<0.05);③与成骨诱导组相比,氧化苦参碱+成骨诱导组牙周膜干细胞成骨相关基因ALP、RUNX2 mRNA表达及成骨相关蛋白ALP蛋白表达明显下调(P<0.05);④氧化苦参碱上调牙周膜干细胞干性标志物表达,抑制牙周膜干细胞骨向分化,高通量测序结果表明可能与WNT2、WNT16、COMP、BMP6有关。

关键词：牙周膜干细胞苦参碱类生物碱成骨细胞增殖氧化苦参碱干性维持高通量测序

在线全文

学校读者我要写书评

暂无评论

东北虎

北京文学（中篇小说月报） 2022年第11期 60-85页

作者：汤成难不详

1从家到动物园要穿过大半个城市,家在城东,动物园在城西,一路公交车连接着两头。他早早地上车,赶在上班高峰前。这时候的公交车上人少,都是一些赶着去晨练的老人,他们精神霞,大概与床铺的过分疏离而少了某种慵懒气。老人们坐在“老人座... 详细信息

1从家到动物园要穿过大半个城市,家在城东,动物园在城西,一路公交车连接着两头。他早早地上车,赶在上班高峰前。这时候的公交车上人少,都是一些赶着去晨练的老人,他们精神霞,大概与床铺的过分疏离而少了某种慵懒气。老人们坐在“老人座”上,腰上的剑和红绸扇支棱出来,和主人保持着一样的昂扬斗志。

关键词：晨练昂扬斗志公交车东北虎动物园老人

基于耦合关系挖掘的电力网络错误数据注入检测

维普期刊数据库评论

在线全文

维普期刊数据库

学校读者我要写书评

暂无评论

电子设计工程 2025年第1期33卷 127-131页

作者：程力李滢黄玉虎马李思思段伟安徽明生电力投资集团有限公司安徽合肥230071 安徽明生恒卓科技有限公司安徽合肥230031

为了提高电力网络稳定性和脆弱性评估的准确性,以及有效地检测和处理错误数据注入问题,提出了基于耦合关系挖掘的电力网络错误数据注入检测方法。根据电力网络与注入错误数据耦合关系,挖掘电力网络与错误注入数据之间一对一、一对多、... 详细信息

为了提高电力网络稳定性和脆弱性评估的准确性,以及有效地检测和处理错误数据注入问题,提出了基于耦合关系挖掘的电力网络错误数据注入检测方法。根据电力网络与注入错误数据耦合关系,挖掘电力网络与错误注入数据之间一对一、一对多、多对多对应关系。根据耦合关系挖掘结果,构建电力网络错误数据注入检测模型,结合时间更新数据完成电力网络错误数据注入检测。由检测评估结果可知,该方法能够确定所在区域是脆弱区域,与实际区域一致。网络崩溃指数在0.9~1.0范围内波动,与实际模块2所处情况一致,具有精准的检测结果。

关键词：耦合关系挖掘电力网络错误数据注入聚类中心