检索结果-南通市图书馆

马尔科夫决策过程在多路径冗余传输调度算法中的应用

在线全文

学校读者我要写书评

暂无评论

小型微型计算机系统 2012年第4期33卷 847-851页

作者：于波于东孙建伟中国科学院沈阳计算技术研究所沈阳110168 中国科学院研究生院北京100049

传统网络终端设备通常以单路径连接网络,因此在路径发生异常时通常严重影响数据传输质量.随着重叠网络和异构多接入网络的发展,多路径传输逐渐成为可能.多路径传输中数据发送端的多路径调度算法是研究多路径传输的核心问题.本文提出了... 详细信息

传统网络终端设备通常以单路径连接网络,因此在路径发生异常时通常严重影响数据传输质量.随着重叠网络和异构多接入网络的发展,多路径传输逐渐成为可能.多路径传输中数据发送端的多路径调度算法是研究多路径传输的核心问题.本文提出了一种基于马尔科夫决策过程的多路径冗余传输调度算法,通过分阶段采用稳态马尔科夫策略并对关键数据进行冗余传输,实现了实时性要求较高的数据传输,提高了数据传输可靠性.仿真实验表明当路径传输质量发生改变时,该调度算法能够正确感知并将数据更多的调度到传输质量较好的路径上,有效降低路径质量变差时对传输的影响.该算法可应用于音、视频等实时业务中,能够有效提高用户使用体验.

关键词：马尔科夫决策过程多路径冗余传输调度算法

基于马尔科夫决策过程的多传感器协同检测与跟踪调度方法

在线全文

学校读者我要写书评

暂无评论

电子与信息学报 2019年第9期41卷 2201-2208页

作者：徐公国单甘霖段修生乔成林王浩天陆军工程大学石家庄校区电子与光学工程系石家庄050003 石家庄铁道大学机械工程学院石家庄050003

针对多任务场景下的传感器调度问题,该文提出一种面向目标协同检测与跟踪的多传感器调度方法。首先,该方法基于部分可观马尔科夫决策过程(POMDP)构建传感器调度模型,并基于后验克拉美-罗下界(PCRLB)设计优化目标函数。其次,考虑传感器... 详细信息

针对多任务场景下的传感器调度问题,该文提出一种面向目标协同检测与跟踪的多传感器调度方法。首先,该方法基于部分可观马尔科夫决策过程(POMDP)构建传感器调度模型,并基于后验克拉美-罗下界(PCRLB)设计优化目标函数。其次,考虑传感器切换时间和目标数目的时变性,采用随机分布粒子计算新生目标的检测概率,给出了固定目标数目和时变目标数目情形下的传感器调度方法。最后,为满足在线调度的实时性需求,采用自适应多种群协同差分进化(AMCDE)算法求解传感器调度方案。仿真结果表明,该方法能够有效应对多任务场景,实现多传感器资源的合理调度。

关键词：检测与跟踪传感器调度马尔科夫决策过程差分进化

基于马尔科夫决策过程的ATO系统独立组件与产品双需求最优决策研究

在线全文

学校读者我要写书评

暂无评论

自动化学报 2016年第5期42卷 782-791页

作者：李稚谭德庆天津工业大学管理学院天津300387 西南交通大学经济管理学院成都610031

研究多维组件,单一产品的双需求型面向订单装配(Assemble-to-order,ATO)系统.产品需求为延期交货型,当其不被满足时将产生缺货等待成本;而独立组件需求为销售损失型,其不被满足时将产生缺货损失成本.该问题可以抽象成一个动态马尔科夫... 详细信息

研究多维组件,单一产品的双需求型面向订单装配(Assemble-to-order,ATO)系统.产品需求为延期交货型,当其不被满足时将产生缺货等待成本;而独立组件需求为销售损失型,其不被满足时将产生缺货损失成本.该问题可以抽象成一个动态马尔科夫决策过程(Markov decision process,MDP),通过对双需求模型求解得到状态依赖型最优策略,即任一组件的最优生产–库存策略由系统内其他组件的库存水平决定.研究解决了多需求复杂ATO系统的生产和库存优化控制问题.提出在一定条件下,组件的基础库存值可以等价于最终产品需求的库存配给值.组件的基础库存值与库存配给值随系统内其他组件库存的增加而增加,而产品需求的库存配给值随系统组件库存和产品缺货量的增加而减少.最后通过数值实验分析缺货量及组件库存对最优策略结构的影响,并得到了相应的企业生产实践的管理启示.

关键词：面向订单装配生产与库存优化控制马尔科夫决策过程

基于马尔科夫决策过程的家庭能量管理智能优化策略

在线全文

学校读者我要写书评

暂无评论

电力自动化设备 2020年第7期40卷 141-148页

作者：傅质馨李潇逸朱俊澎袁越河海大学能源与电气学院江苏南京211100 河海大学可再生能源发电技术教育部工程研究中心江苏南京211100

在迅速发展的通信技术和泛在电力物联网建设的背景下,结合多种信息交互方式和人工智能技术可为提高家庭能量管理的智能化程度提供新的思路。提出一种结合实时信息交互的家庭能量管理智能优化策略。首先,给出了以用户用能费用为基础的马... 详细信息

在迅速发展的通信技术和泛在电力物联网建设的背景下,结合多种信息交互方式和人工智能技术可为提高家庭能量管理的智能化程度提供新的思路。提出一种结合实时信息交互的家庭能量管理智能优化策略。首先,给出了以用户用能费用为基础的马尔科夫决策过程模型,采用动态规划方法求解模型,重点在家庭用电设备调度过程中考虑实时电价信息和用户的随机行为等不确定因素的影响;在此基础上,结合事件触发机制有效提高家庭能量管理系统的运行效率,进而给出从家庭能量管理控制中心到用电设备的智能优化调度方法;最后,通过仿真算例证实了所提方法的有效性,结果表明其能在减少用户用电费用的同时给出满足用户用电需求的优化用电策略。

关键词：家庭能量管理系统马尔科夫决策过程随机动态规划实时电价泛在电力物联网智能优化

基于马尔科夫决策过程的可适变业务流程建模及分析

在线全文

学校读者我要写书评

暂无评论

电子与信息学报 2013年第7期35卷 1760-1765页

作者：张红霞邹华林荣恒杨放春北京邮电大学网络与交换技术国家重点实验室北京100876 中国石油大学计算机与通信工程学院青岛266580

研究移动网络的适变业务流程的建模和模型分析对于部署和执行Web服务应用有着重要的意义。该文通过定义业务流程的相似性及数据类型的相容性,为可适变应用提供了候选集合,使得业务流程能够根据环境的变化动态地进行适变。为了有效地对... 详细信息

研究移动网络的适变业务流程的建模和模型分析对于部署和执行Web服务应用有着重要的意义。该文通过定义业务流程的相似性及数据类型的相容性,为可适变应用提供了候选集合,使得业务流程能够根据环境的变化动态地进行适变。为了有效地对适变业务流程实例进行分析,该文提出基于马尔科夫决策过程模型的适变业务流程建模方法,采用随机模型检测技术对模型的合理性进行验证和预测。针对具体实例,采用该文提出的方法对视频传输应用进行建模和分析验证,实验结果表明,该文为适变业务流程的建模和分析验证提供了一种有效的方法。

关键词：移动网络业务流程马尔科夫决策过程概率计算树逻辑随机模型检测

基于马尔科夫决策过程的带缓存双机系统不完美维护策略

在线全文

学校读者我要写书评

暂无评论

上海交通大学学报 2021年第4期55卷 480-488页

作者：田雪雁王孟雅潘尔顺上海交通大学机械与动力工程学院上海200240

为有效解决退化系统的设备维护优化问题,对带缓存双机系统的预防性维护策略进行研究.首先,考虑两设备的随机退化,针对不完美的小修和预防性维护,通过马尔科夫过程描述系统状态.然后,基于收入和成本,建立生产系统的利润模型.最后,通过最... 详细信息

为有效解决退化系统的设备维护优化问题,对带缓存双机系统的预防性维护策略进行研究.首先,考虑两设备的随机退化,针对不完美的小修和预防性维护,通过马尔科夫过程描述系统状态.然后,基于收入和成本,建立生产系统的利润模型.最后,通过最大化长期期望利润,确定不同系统状态下的预防性维护决策.采用值迭代方法对模型进行求解,数值分析结果表明,设备的维护决策不仅取决于自身状态,还受其他设备状态和缓存量的影响.

关键词：不完美维护缓存双机系统马尔科夫决策过程

在线全文

学校读者我要写书评

暂无评论

融合马尔科夫决策过程与信息熵的对话策略

计算机工程 2021年第3期47卷 284-290页

作者：朱映波赵阳洋王佩尹凯王振宇天翼爱音乐文化科技有限公司广州510081 华南理工大学软件学院广州510006

对话策略是人机对话系统中的重要组成成分,其性能的优劣直接影响对话系统的性能。在面对完全没有数据的冷启动场景时,收集对话数据进行对话策略学习的过程非常复杂和耗时。为在冷启动场景下能够保持良好性能,提出一种融合马尔科夫决策... 详细信息

对话策略是人机对话系统中的重要组成成分,其性能的优劣直接影响对话系统的性能。在面对完全没有数据的冷启动场景时,收集对话数据进行对话策略学习的过程非常复杂和耗时。为在冷启动场景下能够保持良好性能,提出一种融合马尔科夫决策过程与信息熵的对话算法。利用马尔科夫决策过程快速获得下一步最优对话状态,并结合知识库通过引入属性信息熵方法排除多个状态值函数相同的最优状态,从而获取最优的系统响应动作。在音乐搜索领域数据集上的实验结果表明,与随机策略、基于规则和基于信息熵的算法相比,该算法分别缩短了2.24、0.84和0.03个对话轮次,且能够有效提高对话任务完成率。

关键词：对话系统对话策略冷启动信息熵马尔科夫决策过程

在线全文

学校读者我要写书评

暂无评论

基于马尔科夫决策过程的货物流的配给策略

管理工程学报 2009年第4期23卷 142-147页

作者：徐东升周伟华中山大学管理学院广州510275 浙江大学管理学院杭州310028

随着全球化趋势和不断增长的运输量,许多大型货站已经开始使用综合自动化装运处理系统。在这些货站中,不同起点(如仓库入口点)和讫点(如仓储货架)之间的路径选择是一个至关重要的决策,本文中,我们研究此类路径最优问题,并提出了有效的... 详细信息

随着全球化趋势和不断增长的运输量,许多大型货站已经开始使用综合自动化装运处理系统。在这些货站中,不同起点(如仓库入口点)和讫点(如仓储货架)之间的路径选择是一个至关重要的决策,本文中,我们研究此类路径最优问题,并提出了有效的货物流配给策略。该策略中不同的货物有不同的路径集合与之对应,且只有在权重较高的路径的饱和度较低时,才允许权重较小的货物在权重较高的路径上运输,不允许权重高的货物在权重低的路径上运输。我们引入马尔可夫决策过程模型进行决策,并通过数值试验证明我们提出的路径策略的有效性。

关键词：货物流配给物料装运系统马尔科夫决策过程货站运作

基于马尔科夫决策过程的应急资源调度方案的动态优化

在线全文

学校读者我要写书评

暂无评论

南开大学学报（自然科学版） 2010年第3期43卷 18-23页

作者：王炜刘茂王丽南开大学城市公共安全研究中心天津300071

利用马尔科夫决策方法,对突发公共事件下的应急资源调度方案的动态优化过程进行研究,以期找到特定场景下最优应急资源调度方案,保证应急救援行动的时效性.通过实例分析表明,基于马尔科夫决策过程的应急资源调度方案动态优化方法可实现... 详细信息

利用马尔科夫决策方法,对突发公共事件下的应急资源调度方案的动态优化过程进行研究,以期找到特定场景下最优应急资源调度方案,保证应急救援行动的时效性.通过实例分析表明,基于马尔科夫决策过程的应急资源调度方案动态优化方法可实现应急资源调度方案的动态优化,未来通过采用本方法,可以为突发公共事件下的应急资源动态调度提供依据.

关键词：马尔科夫决策过程应急资源调度动态优化