24小时热门版块排行榜    

Znn3bq.jpeg
汕头大学海洋科学接受调剂
查看: 1412  |  回复: 4

Johnny_蔚

新虫 (初入文坛)

[求助] 自适应动态规划(ADP)方法处理化工对象,请教高手

以往做仿真时都给出具体模型,发现针对CSTR等对象采用自适应动态规划做仿真具体实现与以往不同,比如闭环数据采集和Q函数学习过程实现。求助各位高手,大牛啊~!!

在自适应动态规划(ADP)中问题大多描述为Markov决策过程,其基本思想是通过前向仿真和采样辨识出相关区域并应用Bellman迭代去构造近似值函数,在智能体路径规划和任务调度应用比较多,当新信息添加进来通过强化学习来应对不确定性。但是针对Markov决策过程的ADP不能直接用于过程对象,主要是由于连续过程对象空间离散化使其空间维数快速上升加剧了“维数灾”。而且工业过程不允许传统动态规划搜索整个可行解空间进行学习的过程,这可能会带来安全性方面的风险。自2005年来,Jay. H. Lee就该领域进行一些分析和研究,根据闭环仿真得到的数据进行离线值函数迭代,流程图参考附图,设计思想大致为
改进的ADP算法具体过程为:
1.        在已知控制策略下进行闭环仿真,储存遍历状态{x(1),…,x(N)}=X并将执行动作应用到状态点x(j)中;
2.        代价函数J0(x(k))的初始化,其中T足够大;
3.        执行集初始化
对于每个x,从x的m个最近邻点构建执行集合Ax
4.        数据分析进行降维
5.        值迭代过程

这种思路下实现如果通过Matlab应该如何完成呢?求教各位高手,谢谢自适应动态规划(ADP)方法处理化工对象,请教高手
s.png
回复此楼

» 本帖附件资源列表

» 猜你喜欢

» 本主题相关价值贴推荐,对您同样有帮助:

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

1132520084

新虫 (小有名气)

楼主已经如此厉害了,我等还是膜拜吧!!
2楼2015-04-09 20:36:07
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

ucihqtep

新虫 (初入文坛)

不知道楼主是不是已经毕业,有问题想请教
3楼2015-07-11 13:01:00
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

Johnny_蔚

新虫 (初入文坛)

刚毕业不久,这一块内容与最优控制联系蛮紧密~

发自小木虫Android客户端
4楼2015-11-24 15:57:33
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

fenqubiao

新虫 (初入文坛)

引用回帖:
4楼: Originally posted by Johnny_蔚 at 2015-11-24 15:57:33
刚毕业不久,这一块内容与最优控制联系蛮紧密~

楼主,我想把动态规划用在电力系统方面,但不是特别了解,这个方法的具体到底怎么算的,是像遗传算法那些设初值,然后再改变参数,向最优方向变异;还是向分支定界那种比较启发式的算法,具体是个什么过程呢?想向楼主好好请教一下
5楼2016-04-05 17:47:00
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 学员58MgM9 的主题更新
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[考研] 材料工程085601,270求调剂 +42 @ASDF1234 2026-04-08 46/2300 2026-04-14 18:12 by 逍遥三郎
[考研] 332求调剂 +15 蕉蕉123 2026-04-10 15/750 2026-04-13 23:12 by pies112
[考研] 266调剂 +10 daya sun 2026-04-07 11/550 2026-04-13 10:12 by fenglj492
[考研] 一志愿华工085600 331分 +7 天下ww 2026-04-09 7/350 2026-04-13 09:01 by lhj2009
[考研] 368化学求调剂 +14 wwwwabcde 2026-04-07 15/750 2026-04-13 08:36 by lhj2009
[考研] 22408 352分求调剂 +5 努力的夏末 2026-04-09 5/250 2026-04-12 19:17 by wj165256
[考研] 0831生医工第一轮调剂失败求助 +12 小熊睿睿_s 2026-04-11 16/800 2026-04-12 16:28 by 钰璞
[考研] 电气工程专硕320求调剂 +5 小麻子111 2026-04-10 5/250 2026-04-12 10:47 by zhouyuwinner
[考研] 调剂 +5 文道星台 2026-04-11 5/250 2026-04-11 15:01 by 凯凯要变帅
[考研] 0854调剂 +5 音像店听花鼓戏 2026-04-10 5/250 2026-04-11 10:49 by qingpingzhu
[考研] 293求调剂 +6 勇远库爱314 2026-04-08 6/300 2026-04-11 10:08 by zhq0425
[考研] 中科院总分315求调剂 +8 lallalh 2026-04-09 8/400 2026-04-10 19:30 by dick_runner
[考研] 一志愿京区985,085401,与本科专业一致,电子信息工程, +4 阳光开朗的男孩 2026-04-10 4/200 2026-04-10 18:27 by shenrf
[考研] 一志愿京区985,085401电子信息,本科电子信息 +3 阳光开朗的男孩 2026-04-10 3/150 2026-04-10 16:29 by sophia_93
[论文投稿] mdpi小修rvr时间四五天了 20+3 哈哈high 2026-04-08 5/250 2026-04-10 16:02 by 北京莱茵润色
[考研] 293调剂 +25 yj1221 2026-04-08 26/1300 2026-04-10 15:02 by 柴小白
[考研] 求调剂 材料与工程 324分 专硕 +19 翩翩一书生 2026-04-10 21/1050 2026-04-10 11:41 by wp06
[考研] 调剂 +19 2261744733 2026-04-08 19/950 2026-04-09 19:11 by vgtyfty
[考研] 材料307分求大佬组收留 +17 Hll胡 2026-04-07 17/850 2026-04-09 10:53 by liuhuiying09
[考研] 296求调剂 +3 汪!?! 2026-04-08 3/150 2026-04-08 22:00 by zhouyuwinner
信息提示
请填处理意见