| 查看: 1263 | 回复: 4 | |||
[求助]
自适应动态规划(ADP)方法处理化工对象，请教高手
|
|
以往做仿真时都给出具体模型，发现针对CSTR等对象采用自适应动态规划做仿真具体实现与以往不同，比如闭环数据采集和Q函数学习过程实现。求助各位高手，大牛啊~！！ 在自适应动态规划(ADP)中问题大多描述为Markov决策过程，其基本思想是通过前向仿真和采样辨识出相关区域并应用Bellman迭代去构造近似值函数，在智能体路径规划和任务调度应用比较多，当新信息添加进来通过强化学习来应对不确定性。但是针对Markov决策过程的ADP不能直接用于过程对象，主要是由于连续过程对象空间离散化使其空间维数快速上升加剧了“维数灾”。而且工业过程不允许传统动态规划搜索整个可行解空间进行学习的过程，这可能会带来安全性方面的风险。自2005年来，Jay. H. Lee就该领域进行一些分析和研究，根据闭环仿真得到的数据进行离线值函数迭代，流程图参考附图，设计思想大致为 改进的ADP算法具体过程为： 1. 在已知控制策略下进行闭环仿真，储存遍历状态{x(1),…,x(N)}=X并将执行动作应用到状态点x(j)中； 2. 代价函数J0(x(k))的初始化，其中T足够大; 3. 执行集初始化 对于每个x，从x的m个最近邻点构建执行集合Ax 4. 数据分析进行降维 5. 值迭代过程 这种思路下实现如果通过Matlab应该如何完成呢？求教各位高手,谢谢  s.png |
回复此楼» 本帖附件资源列表
-
欢迎监督和反馈：小木虫仅提供交流平台，不对该内容负责。
本内容由用户自主发布，如果其内容涉及到知识产权问题，其责任在于用户本人，如对版权有异议，请联系邮箱：xiaomuchong@tal.com - 附件 1 : 2009，ADP应用在实际化工对象.pdf
- 附件 2 : 2009，Lee&An_approximate_dynamic_programming_based_approach_to_dual_adaptive_control.pdf
2014-04-23 16:40:32, 498.66 K
2014-04-23 16:40:32, 262.9 K
» 猜你喜欢
职称评审没过，求安慰
已经有22人回复
-
申请26博士
已经有4人回复
-
垃圾破二本职称评审标准
已经有15人回复
-
投稿Elsevier的Neoplasia杂志，到最后选publishing options时页面空白，不能完成投稿
已经有20人回复
-
EST投稿状态问题
已经有7人回复
-
毕业后当辅导员了，天天各种学生超烦
已经有4人回复
-
聘U V热熔胶研究人员
已经有10人回复
-
求助文献
已经有3人回复
-
投稿返修后收到这样的回复，还有希望吗
已经有8人回复
-
三无产品还有机会吗
已经有6人回复
» 本主题相关价值贴推荐，对您同样有帮助:
- 关于强化学习，自适应动态规划和在线学习
已经有30人回复
- 请问Asian Journal of Control 有几个审稿人？
已经有13人回复
1132520084
新虫 (小有名气)
- 应助: 3 (幼儿园)
- 金币: 2224.6
- 散金: 18
- 红花: 2
- 帖子: 127
- 在线: 37.1小时
- 虫号: 3328646
- 注册: 2014-07-18
- 专业: 动力学与控制
2楼2015-04-09 20:36:07
3楼2015-07-11 13:01:00
4楼2015-11-24 15:57:33
5楼2016-04-05 17:47:00