| 查看: 1260 | 回复: 4 | ||
[求助]
自适应动态规划(ADP)方法处理化工对象，请教高手
|
|
以往做仿真时都给出具体模型，发现针对CSTR等对象采用自适应动态规划做仿真具体实现与以往不同，比如闭环数据采集和Q函数学习过程实现。求助各位高手，大牛啊~！！ 在自适应动态规划(ADP)中问题大多描述为Markov决策过程，其基本思想是通过前向仿真和采样辨识出相关区域并应用Bellman迭代去构造近似值函数，在智能体路径规划和任务调度应用比较多，当新信息添加进来通过强化学习来应对不确定性。但是针对Markov决策过程的ADP不能直接用于过程对象，主要是由于连续过程对象空间离散化使其空间维数快速上升加剧了“维数灾”。而且工业过程不允许传统动态规划搜索整个可行解空间进行学习的过程，这可能会带来安全性方面的风险。自2005年来，Jay. H. Lee就该领域进行一些分析和研究，根据闭环仿真得到的数据进行离线值函数迭代，流程图参考附图，设计思想大致为 改进的ADP算法具体过程为： 1. 在已知控制策略下进行闭环仿真，储存遍历状态{x(1),…,x(N)}=X并将执行动作应用到状态点x(j)中； 2. 代价函数J0(x(k))的初始化，其中T足够大; 3. 执行集初始化 对于每个x，从x的m个最近邻点构建执行集合Ax 4. 数据分析进行降维 5. 值迭代过程 这种思路下实现如果通过Matlab应该如何完成呢？求教各位高手,谢谢  s.png |
回复此楼» 本帖附件资源列表
-
欢迎监督和反馈：小木虫仅提供交流平台，不对该内容负责。
本内容由用户自主发布，如果其内容涉及到知识产权问题，其责任在于用户本人，如对版权有异议，请联系邮箱：xiaomuchong@tal.com - 附件 1 : 2009，ADP应用在实际化工对象.pdf
- 附件 2 : 2009，Lee&An_approximate_dynamic_programming_based_approach_to_dual_adaptive_control.pdf
2014-04-23 16:40:32, 498.66 K
2014-04-23 16:40:32, 262.9 K
» 猜你喜欢
之前让一硕士生水了7个发明专利，现在这7个获批发明专利的维护费可从哪儿支出哈？
已经有5人回复
-
博士读完未来一定会好吗
已经有29人回复
-
博士申请都是内定的吗？
已经有5人回复
-
到新单位后，换了新的研究方向，没有团队，持续积累2区以上论文，能申请到面上吗
已经有12人回复
-
投稿精细化工
已经有4人回复
-
高职单位投计算机相关的北核或SCI四区期刊推荐，求支招！
已经有4人回复
-
导师想让我从独立一作变成了共一第一
已经有9人回复
-
读博
已经有4人回复
-
JMPT 期刊投稿流程
已经有4人回复
-
心脉受损
已经有5人回复
» 本主题相关价值贴推荐，对您同样有帮助:
关于强化学习，自适应动态规划和在线学习
已经有30人回复- 请问Asian Journal of Control 有几个审稿人？
已经有13人回复
1132520084
新虫 (小有名气)
- 应助: 3 (幼儿园)
- 金币: 2224.6
- 散金: 18
- 红花: 2
- 帖子: 127
- 在线: 37.1小时
- 虫号: 3328646
- 注册: 2014-07-18
- 专业: 动力学与控制
2楼2015-04-09 20:36:07
3楼2015-07-11 13:01:00
4楼2015-11-24 15:57:33
5楼2016-04-05 17:47:00