基于状态空间划分的预测状态表示模型获取研究

《基于状态空间划分的预测状态表示模型获取研究》由会员上传分享，免费在线阅读，更多相关内容在学术论文-天天文库。

1、厦门大学学位论文原创性声明本人呈交的学位论文是本人在导师指导下，独立完成的研究成果。本人在论文写作中参考其他个人或集体已经发表的研究成果，均在文中以适当方式明确标明，并符合法律规范和《厦门大学研究生学术活动规范(试行)》。另外，该学位论文为()课题(组)的研究成果，获得()课题(组)经费或实验室的资助，在()实验室完成。(请在以上括号内填写课题或课题组负责人或实验室名称，未有此项声明内容的，可以不作特别声明。)声明人(签名)：陈穆谫弘r妒年r月／)日厦门大学学位论文著作权使用声明本人同意厦门大学根据《中华人民共和国学位条例暂行实施办法》等

2、规定保留和使用此学位论文，并向主管部门或其指定机构送交学位论文(包括纸质版和电子版)，允许学位论文进入厦门大学图书馆及其数据库被查阅、借阅。本人同意厦门大学将学位论文加入全国博士、硕士学位论文共建单位数据库进行检索，将学位论文的标题和摘要汇编出版，采用影印、缩印或者其它方式合理复制学位论文。本学位论文属于：()1．经厦门大学保密委员会审查核定的保密学位论文，于年月日解密，解密后适用上述授权。()2．不保密，适用上述授权。(请在以上相应括号内打“、／”或填上相应内容。保密学位论文应是已经厦门大学保密委员会审定过的学位论文，未经厦门大学保密委

3、员会审定的学位论文均为公开学位论文。此声明栏不填写的，默认为公开学位论文，均适用上述授权。)声明人(签名)：随穆圬加r修年j一月c汩摘要预测状态表示(PredictiveStateRepresentation，PsR)方法是对动态系统建模的有效方法。相比其它建模方法，PSR具有表征能力强、模型易于学习等优点，可以有效地解决局部可观测问题。但传统的研究方法大都是在整体状态空间上获取系统的PsR模型，计算复杂、模型获取相对困难，己有相关算法通常仅适用于规模较小的系统。在本文工作中，通过研究系统状态空间划分机制，将整个状态空间划分为多个子状态空

4、间，降低了获取系统PSR模型的难度，进而提出基于状态空间划分的PSR模型算法及基于状态空间划分的转移预测状态表示(TransfomedPredictiveStateRepresentation，TPsR)模型获取算法，实现了较大规模系统中系统PSR模型的获取。本文主要研究内容及成果包括以下几个方面：(1)提出状态空间划分机制。通常情况下，系统的状态数量会随着系统规模的增大而增多，从而增加了获取系统整体的PSR模型的难度。本文根据Iandmark的特性，以landmark为划分状态空问的临界点，把整体状态空间划分为几个规模较小的子状态空间。

5、进行状态空间划分后，只需分别获取状态数量一般都小于整体状态空间的状态数量的各个子状态空间对应的PsR模型，降低了模型获取的难度。(2)提出一种基于状态空间划分的PSR模型获取算法。该算法根据状态空间划分机制，将较大规模系统的整体状态空间划分为几个较小的子状态空间，进而学习各子状态空间对应的PSR模型：并根据这些子状态空间的PsR模型，构建系统整体的PsR模型后，可对任意事件进行预测。实验仿真结果表明所提算法是有效的。(3)提出基于状态空间划分的TPSR模型获取算法。随着系统规模的增大，发现检验核这一过程的时间复杂度和计算量通常也相应增大，

6、为了进一步减小模型获取的复杂性，本文在对状态空问划分后，通过引入主成分分析(PrincipalComponentAnalysis，PCA)方法，提出基于状态空间划分的TPsR模型获取算法。该算法使用PCA方法对各个子状态空间的经历．检验矩阵进行降维，直接利用降维后的矩阵获取各个子状态空间的TPsR模型，无需发现检验核，简化了模型学习过程。实验仿真结果表明了所提算法的有效性。关键词：动态系统建模；状态空间划分；预测状态表示；转移预测状态表示AbstractPredictiveStateRepresentation(PSR)isanemcie

7、ntwayformodelingdynamicalsystems．Comparedtoothermodelingmethods，PSR，whichrepresentsstateusingonlyobsen，abledata，hasgreaterexpressiVepowerandleamingPSRmodelsofdynamicalsystemsshouldbeeasier．HoweVer，currentresearchmethodsinPSRmostlyfocusonleamingamodelbasedontheentirestates

8、pace．Commonly，itisdi币culttoobtainthePSRmodelbyusingtraditionaltechnique．Theexistingalgorithmsfor