| 查看: 1683 | 回复: 15 | |||
| 当前只显示满足指定条件的回帖，点击这里查看本话题的所有回帖 | |||
[交流]
MATLAB 存储10个G 以上数组怎么办？ 已有15人参与
|
|||
|
我现在有三个MAT文件，三个里面分别存放着具有相同行的数组，大小分别有2G,4G,5G。 我现在想把这三个MAT文件里面的数组合并成一个新的数组，那么这个数组大小应该就有11个G了，存储到一个新的MAT文件中，但是如果load每一个MAT文件的话，电脑内存直接卡机了。怎么处理呢？另外请假一个问题，虚拟内存有什么用呢？我这个好像虚拟内存挺大的，虚拟内存里面可以存储什么这么大的一个数组吗？ 这个是电脑内存 memory Maximum possible array: 9934 MB (1.042e+10 bytes) * Memory available for all arrays: 9934 MB (1.042e+10 bytes) * Memory used by MATLAB: 880 MB (9.230e+08 bytes) Physical Memory (RAM): 12205 MB (1.280e+10 bytes) 虚拟内存 >> feature('memstats') Physical Memory (RAM): In Use: 3280 MB ( cd02b000) Free: 8924 MB ( 22dcc5000) Total: 12204 MB ( 2facf0000) Page File (Swap space): In Use: 3868 MB ( f1c5d000) Free: 9936 MB ( 26d093000) Total: 13804 MB ( 35ecf0000) Virtual Memory (Address Space): In Use: 4221 MB ( 107d7a000) Free: 134213506 MB (7ffef8266000) Total: 134217727 MB (7ffffffe0000) Largest Contiguous Free Blocks: 1. [at 1800c2000] 134170621 MB (7ff47fd9c000) 2. [at 7ff5fffff000] 23220 MB ( 5ab451000) 3. [at 7ffbc565c000] 17321 MB ( 43a984000) 4. [at 140029000] 1023 MB ( 3ffd7000) 5. [at 11c000000] 576 MB ( 24000000) 6. [at 104000000] 128 MB ( 8000000) 7. [at 110000000] 128 MB ( 8000000) 8. [at 7ffbb0000000] 74 MB ( 4a70000) 9. [at b3ff0000] 64 MB ( 4000000) 10. [at 7ffbab6aa000] 46 MB ( 2e46000) ======= ========== |
回复此楼» 猜你喜欢
求调剂，一志愿 南京航空航天大学 ，080500材料科学与工程学硕，总分289分
已经有9人回复
-
材料科学与工程求调剂
已经有8人回复
-
一志愿大连理工大学材料求调剂
已经有3人回复
-
一志愿北化085600材料专硕275|有文章专利｜求调剂
已经有9人回复
-
材料求调剂 一志愿哈工大总分298分，前三科223分
已经有8人回复
-
274求调剂
已经有3人回复
-
合肥区域性重点一本招收调剂
已经有4人回复
-
085600材料与化工调剂
已经有10人回复
-
22408 359分调剂
已经有7人回复
-
抱歉
已经有4人回复
Scorpio_0
银虫 (著名写手)
- 应助: 25 (小学生)
- 金币: 2558.7
- 散金: 110
- 红花: 16
- 沙发: 1
- 帖子: 1282
- 在线: 179.4小时
- 虫号: 3932734
- 注册: 2015-06-20
- 性别: GG
- 专业: 计算机科学
★
小木虫: 金币+0.5, 给个红包，谢谢回帖
小木虫: 金币+0.5, 给个红包，谢谢回帖
|
如果你这些数据需要同时用，那你电脑配置不行，我笔记本都是16G 内存，大数据处理，一般电脑都32G 甚至是服务器。 如果不是同事处理，那就分成小文件处理好了。内存管理好就没问题 发自小木虫Android客户端 |
13楼2016-01-02 19:18:05
mygt_hit
专家顾问 (职业作家)
-
专家经验: +362 - 应助: 438 (硕士)
- 贵宾: 0.019
- 金币: 19571.1
- 散金: 5130
- 红花: 135
- 沙发: 3
- 帖子: 4938
- 在线: 990.5小时
- 虫号: 1489764
- 注册: 2011-11-13
- 性别: GG
- 专业: 结构工程
- 管辖: 土木建筑
2楼2015-12-30 22:17:26
★
小木虫: 金币+0.5, 给个红包，谢谢回帖
小木虫: 金币+0.5, 给个红包，谢谢回帖
|
最好是能变换处理公式，或者将矩阵分割的更小最好，现在限制你运算的是硬盘的IO速度了。 你说的虚拟内存是win将一部分硬盘作为内存开始用，如果你硬盘不是固态的话，由于机械硬盘读写速度小了内存条读写速度一个数量级，所以如果强行读取数据，在进行矩阵运算的时候会进一步变慢。 发自小木虫Android客户端 |
3楼2015-12-30 23:28:41
5楼2016-01-01 17:02:56
