| 查看: 6852 | 回复: 2 | ||
| 【悬赏金币】回答本帖问题，作者n01096将赠送您 10 个金币 | ||
[求助]
matlab 并行计算中缓存一直增加，然后卡死，问题已解决
|
||
|
交代一下背景： 本人用服务器跑matlab程序，cpu10核，内存256G，程序用的m函数文件，调用函数的那种。我在A函数里调用B函数。B函数里有parfor循环。在parfor循环里，每次用完的那些变量我都及时赋成空值，[]. parfor循环结束后，将得到的变量通过assign返回A函数，也就是workspace，然后返回A函数。A函数里有个循环（循环变量为i），次数为6000，由于是用的龙格库塔迭代，A函数里不能用parfor并行计算。 当A循环里的次数比较小时，比如i<1000，运行效果还可以，，挺快的。 但是，我的系统是linux的，查看了linux系统的内存，发现缓存buffer、cache一直增加。。。基本每隔一会就增加几个G。。 随着循环的增加，内存占用越来越大。。。由最初的i=1的10G左右一直飙升到i=1000时的120G左右。最终，好像程序会在i=2000左右卡住，，不动。。。 PS：我在没有用并行计算时，也跑过，最终得到的数据量为8G左右，程序运行时的内存也就20G左右。。。 想问一下有没有大神知道这是啥原因呢，，求助  ============================================ 自己解决了。。。在调用并行程序之后，加一个clear functions,这样就可以清除并行程序里的进程及相关数据，要是不清除的话，并行程序里的进程会一直堆积在内存里。。。当然，考虑到每次清除内存的时间消耗，可以用外部循环的变量来判断，比如到了i=1000的时候再清理，当然，前提是i=1000的时候程序总的内存消化小于你的电脑可用内存。这个清除语句可以添加在函数A中。这样就可以使效率大大提高了。。。哈哈 希望对其他人有用 |
回复此楼» 猜你喜欢
女博士高校择业三天之内签合同，求支招
已经有25人回复
-
转发，”朋友说招呼都定点打到他那里了＂
已经有11人回复
-
TsCl保护羟基为什么不反应
已经有24人回复
-
苯磺酰氯与醇羟基反应
已经有12人回复
-
海南大学国家级人才田新龙教授团队氢燃料电池与器件方向招收科研助理 (重点支持方向)
已经有11人回复
-
为什么有的影响因子高的期刊分区不高呢？
已经有7人回复
-
化学B口多少分能上会呀
已经有14人回复
-
wiely投稿状态
已经有3人回复
-
答辩
已经有6人回复
-
博三一直没文章怎么办
已经有46人回复
2楼2015-08-25 11:40:40
3楼2020-12-01 16:40:39
5