半Markov控制过程在折扣代价准则下的最优平稳策略
Optimal stationary policies for semi-Markov control processes with discounted-cost criteria作者机构:中国科学技术大学自动化系安徽合肥230027
出 版 物:《控制与决策》 (Control and Decision)
年 卷 期:2004年第19卷第6期
页 面:691-694页
核心收录:
学科分类:0711[理学-系统科学] 07[理学] 08[工学] 070105[理学-运筹学与控制论] 081101[工学-控制理论与控制工程] 071101[理学-系统理论] 0811[工学-控制科学与工程] 0701[理学-数学]
基 金:国家自然科学基金资助项目(60274012) 安徽省自然科学基金资助项目(01042308)
主 题:半Markovr控制过程 折扣代价准则 折扣Poisson方程 α-势 最优性方程 最优平稳策略
摘 要:讨论一类半Markov控制过程(SMCP)的折扣代价性能优化问题.通过引入一个矩阵,该矩阵可作为一个Markov过程的无穷小矩阵,对一个SMCP定义了折扣Poisson方程,并由这个方程定义了α 势.基于α 势,给出了由最优平稳策略所满足的最优性方程.最后给出一个求解最优平稳策略的迭代算法,并提供一个数值例子以表明该算法的应用.