| 查看: 1542 | 回复: 4 | ||
[求助]
自适应动态规划(ADP)方法处理化工对象，请教高手
|
|
以往做仿真时都给出具体模型，发现针对CSTR等对象采用自适应动态规划做仿真具体实现与以往不同，比如闭环数据采集和Q函数学习过程实现。求助各位高手，大牛啊~！！ 在自适应动态规划(ADP)中问题大多描述为Markov决策过程，其基本思想是通过前向仿真和采样辨识出相关区域并应用Bellman迭代去构造近似值函数，在智能体路径规划和任务调度应用比较多，当新信息添加进来通过强化学习来应对不确定性。但是针对Markov决策过程的ADP不能直接用于过程对象，主要是由于连续过程对象空间离散化使其空间维数快速上升加剧了“维数灾”。而且工业过程不允许传统动态规划搜索整个可行解空间进行学习的过程，这可能会带来安全性方面的风险。自2005年来，Jay. H. Lee就该领域进行一些分析和研究，根据闭环仿真得到的数据进行离线值函数迭代，流程图参考附图，设计思想大致为 改进的ADP算法具体过程为： 1. 在已知控制策略下进行闭环仿真，储存遍历状态{x(1),…,x(N)}=X并将执行动作应用到状态点x(j)中； 2. 代价函数J0(x(k))的初始化，其中T足够大; 3. 执行集初始化 对于每个x，从x的m个最近邻点构建执行集合Ax 4. 数据分析进行降维 5. 值迭代过程 这种思路下实现如果通过Matlab应该如何完成呢？求教各位高手,谢谢  s.png |
回复此楼» 本帖附件资源列表
-
欢迎监督和反馈：小木虫仅提供交流平台，不对该内容负责。
本内容由用户自主发布，如果其内容涉及到知识产权问题，其责任在于用户本人，如对版权有异议，请联系邮箱：xiaomuchong@tal.com - 附件 1 : 2009，ADP应用在实际化工对象.pdf
- 附件 2 : 2009，Lee&An_approximate_dynamic_programming_based_approach_to_dual_adaptive_control.pdf
2014-04-23 16:40:32, 498.66 K
2014-04-23 16:40:32, 262.9 K
» 猜你喜欢
售SCI一区文章，我:8O5.5.1.O5.4,科目全,可伽急
已经有9人回复
-
售SCI一区文章，我:8.O.551.O.5.4,科目全,可伽急
已经有10人回复
-
系统今天又提示维护了，估计离放榜不远了
已经有16人回复
-
一个有机合成实验室都需要哪些设备？
已经有10人回复
-
售SCI一区文章，我:8O5.5.1.O5.4,科目全,可伽急
已经有9人回复
-
售SCI一区文章，我:8.O.551.O.5.4,科目全,可伽急
已经有9人回复
-
售SCI一区T0P文章，我:8.O.55.1.O.54,科目齐全,可+急
已经有13人回复
-
基础研究怎么拉横向，学校到款任务越来越多，难以完成 拉横向，都有哪些途径啊
已经有13人回复
-
售SCI一区T0P文章，我:8.O55.1.O.54,科目全,可十急
已经有6人回复
-
售SCI一区T0P文章，我:8.O.55.1.O.54,科目齐全,可+急
已经有6人回复
» 本主题相关价值贴推荐，对您同样有帮助:
- 关于强化学习，自适应动态规划和在线学习
已经有30人回复
- 请问Asian Journal of Control 有几个审稿人？
已经有13人回复
1132520084
新虫 (小有名气)
- 应助: 3 (幼儿园)
- 金币: 2224.6
- 散金: 18
- 红花: 2
- 帖子: 127
- 在线: 37.1小时
- 虫号: 3328646
- 注册: 2014-07-18
- 专业: 动力学与控制
2楼2015-04-09 20:36:07
3楼2015-07-11 13:01:00
4楼2015-11-24 15:57:33
5楼2016-04-05 17:47:00
50