| 查看: 1557 | 回复: 4 | ||
[求助]
自适应动态规划(ADP)方法处理化工对象，请教高手
|
|
以往做仿真时都给出具体模型，发现针对CSTR等对象采用自适应动态规划做仿真具体实现与以往不同，比如闭环数据采集和Q函数学习过程实现。求助各位高手，大牛啊~！！ 在自适应动态规划(ADP)中问题大多描述为Markov决策过程，其基本思想是通过前向仿真和采样辨识出相关区域并应用Bellman迭代去构造近似值函数，在智能体路径规划和任务调度应用比较多，当新信息添加进来通过强化学习来应对不确定性。但是针对Markov决策过程的ADP不能直接用于过程对象，主要是由于连续过程对象空间离散化使其空间维数快速上升加剧了“维数灾”。而且工业过程不允许传统动态规划搜索整个可行解空间进行学习的过程，这可能会带来安全性方面的风险。自2005年来，Jay. H. Lee就该领域进行一些分析和研究，根据闭环仿真得到的数据进行离线值函数迭代，流程图参考附图，设计思想大致为 改进的ADP算法具体过程为： 1. 在已知控制策略下进行闭环仿真，储存遍历状态{x(1),…,x(N)}=X并将执行动作应用到状态点x(j)中； 2. 代价函数J0(x(k))的初始化，其中T足够大; 3. 执行集初始化 对于每个x，从x的m个最近邻点构建执行集合Ax 4. 数据分析进行降维 5. 值迭代过程 这种思路下实现如果通过Matlab应该如何完成呢？求教各位高手,谢谢  s.png |
回复此楼» 本帖附件资源列表
-
欢迎监督和反馈：小木虫仅提供交流平台，不对该内容负责。
本内容由用户自主发布，如果其内容涉及到知识产权问题，其责任在于用户本人，如对版权有异议，请联系邮箱：xiaomuchong@tal.com - 附件 1 : 2009，ADP应用在实际化工对象.pdf
- 附件 2 : 2009，Lee&An_approximate_dynamic_programming_based_approach_to_dual_adaptive_control.pdf
2014-04-23 16:40:32, 498.66 K
2014-04-23 16:40:32, 262.9 K
» 猜你喜欢
93BebMhtakh前后11位开头都是大写
已经有5人回复
-
欢迎发来filecode的Mz6后的代码验证其规律
已经有86人回复
-
感觉是下周放榜了
已经有11人回复
-
filecode=后面第一个是大写字母
已经有10人回复
-
时间戳变了，能看出什么问题？
已经有4人回复
-
哪位老哥知道今年的国自然具体哪一天放榜？
已经有15人回复
-
今天系统多次维护，明天很可能放榜！
已经有9人回复
-
时间戳又变了8-15
已经有25人回复
-
2027广东省杰青
已经有6人回复
-
快农历七夕节了，轻松一下，男人悄悄话，女施主请不要进来。
已经有3人回复
» 本主题相关价值贴推荐，对您同样有帮助:
- 关于强化学习，自适应动态规划和在线学习
已经有30人回复
- 请问Asian Journal of Control 有几个审稿人？
已经有13人回复
1132520084
新虫 (小有名气)
- 应助: 3 (幼儿园)
- 金币: 2224.6
- 散金: 18
- 红花: 2
- 帖子: 127
- 在线: 37.1小时
- 虫号: 3328646
- 注册: 2014-07-18
- 专业: 动力学与控制
2楼2015-04-09 20:36:07
3楼2015-07-11 13:01:00
4楼2015-11-24 15:57:33
5楼2016-04-05 17:47:00
