一种自治操作条件反射自动机
An autonomous operant conditioning automaton作者机构:北京工业大学电子信息与控制工程学院人工智能与机器人研究所北京100124
出 版 物:《控制理论与应用》 (Control Theory & Applications)
年 卷 期:2012年第29卷第11期
页 面:1452-1457页
核心收录:
学科分类:08[工学] 081202[工学-计算机软件与理论] 0812[工学-计算机科学与技术(可授工学、理学学位)]
基 金:国家自然科学基金资助项目(61075110) 北京市自然科学基金资助项目/北京市教育委员会科技计划重点资助项目(KZ201210005001) 北京市自然科学基金资助项目(4102011) 高等学校博士学科点专项科研基金资助项目(20101103110007)
摘 要:针对仿生自主学习控制问题,根据自动机的原理,以操作条件反射学习机制为基础,运用仿生的自组织学习方法,提出一种自治操作条件反射自动机(autonomous operant conditioning automata,AOCA)模型,主要包括:操作集合、状态集合、条件-操作规则集合、可观测的状态转移以及操作条件反射学习律;定义了基于AOCA状态取向值的操作熵;给出了AOCA操作熵收敛性证明;分析了AOCA自组织特性;规定了AOCA的递归运行程序.同时,将其应用于斯金纳动物实验的模拟,动物分阶段学习,并且成功习得技能,实验结果表明AOCA实现了模拟操作条件反射学习机制.