| 查看: 1358 | 回复: 4 | ||
[求助]
自适应动态规划(ADP)方法处理化工对象，请教高手
|
|
以往做仿真时都给出具体模型，发现针对CSTR等对象采用自适应动态规划做仿真具体实现与以往不同，比如闭环数据采集和Q函数学习过程实现。求助各位高手，大牛啊~！！ 在自适应动态规划(ADP)中问题大多描述为Markov决策过程，其基本思想是通过前向仿真和采样辨识出相关区域并应用Bellman迭代去构造近似值函数，在智能体路径规划和任务调度应用比较多，当新信息添加进来通过强化学习来应对不确定性。但是针对Markov决策过程的ADP不能直接用于过程对象，主要是由于连续过程对象空间离散化使其空间维数快速上升加剧了“维数灾”。而且工业过程不允许传统动态规划搜索整个可行解空间进行学习的过程，这可能会带来安全性方面的风险。自2005年来，Jay. H. Lee就该领域进行一些分析和研究，根据闭环仿真得到的数据进行离线值函数迭代，流程图参考附图，设计思想大致为 改进的ADP算法具体过程为： 1. 在已知控制策略下进行闭环仿真，储存遍历状态{x(1),…,x(N)}=X并将执行动作应用到状态点x(j)中； 2. 代价函数J0(x(k))的初始化，其中T足够大; 3. 执行集初始化 对于每个x，从x的m个最近邻点构建执行集合Ax 4. 数据分析进行降维 5. 值迭代过程 这种思路下实现如果通过Matlab应该如何完成呢？求教各位高手,谢谢  s.png |
回复此楼» 本帖附件资源列表
-
欢迎监督和反馈：小木虫仅提供交流平台，不对该内容负责。
本内容由用户自主发布，如果其内容涉及到知识产权问题，其责任在于用户本人，如对版权有异议，请联系邮箱：xiaomuchong@tal.com - 附件 1 : 2009，ADP应用在实际化工对象.pdf
- 附件 2 : 2009，Lee&An_approximate_dynamic_programming_based_approach_to_dual_adaptive_control.pdf
2014-04-23 16:40:32, 498.66 K
2014-04-23 16:40:32, 262.9 K
» 猜你喜欢
085600 英一数二272求调剂
已经有15人回复
-
材料调剂
已经有3人回复
-
高分子化学与物理调剂
已经有15人回复
-
268求调剂
已经有7人回复
-
289求调剂
已经有8人回复
-
理学，工学，农学调剂，少走弯路，这里欢迎您！
已经有6人回复
-
中国科学技术大学材料与化工281求调剂，有科研和获奖经历
已经有4人回复
-
283求调剂
已经有4人回复
-
275求调剂
已经有6人回复
-
284求调剂
已经有5人回复
» 本主题相关价值贴推荐，对您同样有帮助:
- 关于强化学习，自适应动态规划和在线学习
已经有30人回复
- 请问Asian Journal of Control 有几个审稿人？
已经有13人回复
1132520084
新虫 (小有名气)
- 应助: 3 (幼儿园)
- 金币: 2224.6
- 散金: 18
- 红花: 2
- 帖子: 127
- 在线: 37.1小时
- 虫号: 3328646
- 注册: 2014-07-18
- 专业: 动力学与控制
2楼2015-04-09 20:36:07
3楼2015-07-11 13:01:00
4楼2015-11-24 15:57:33
5楼2016-04-05 17:47:00
10