| 查看: 1968 | 回复: 15 | |||
| 当前只显示满足指定条件的回帖，点击这里查看本话题的所有回帖 | |||
[交流]
MATLAB 存储10个G 以上数组怎么办？ 已有15人参与
|
|||
|
我现在有三个MAT文件，三个里面分别存放着具有相同行的数组，大小分别有2G,4G,5G。 我现在想把这三个MAT文件里面的数组合并成一个新的数组，那么这个数组大小应该就有11个G了，存储到一个新的MAT文件中，但是如果load每一个MAT文件的话，电脑内存直接卡机了。怎么处理呢？另外请假一个问题，虚拟内存有什么用呢？我这个好像虚拟内存挺大的，虚拟内存里面可以存储什么这么大的一个数组吗？ 这个是电脑内存 memory Maximum possible array: 9934 MB (1.042e+10 bytes) * Memory available for all arrays: 9934 MB (1.042e+10 bytes) * Memory used by MATLAB: 880 MB (9.230e+08 bytes) Physical Memory (RAM): 12205 MB (1.280e+10 bytes) 虚拟内存 >> feature('memstats') Physical Memory (RAM): In Use: 3280 MB ( cd02b000) Free: 8924 MB ( 22dcc5000) Total: 12204 MB ( 2facf0000) Page File (Swap space): In Use: 3868 MB ( f1c5d000) Free: 9936 MB ( 26d093000) Total: 13804 MB ( 35ecf0000) Virtual Memory (Address Space): In Use: 4221 MB ( 107d7a000) Free: 134213506 MB (7ffef8266000) Total: 134217727 MB (7ffffffe0000) Largest Contiguous Free Blocks: 1. [at 1800c2000] 134170621 MB (7ff47fd9c000) 2. [at 7ff5fffff000] 23220 MB ( 5ab451000) 3. [at 7ffbc565c000] 17321 MB ( 43a984000) 4. [at 140029000] 1023 MB ( 3ffd7000) 5. [at 11c000000] 576 MB ( 24000000) 6. [at 104000000] 128 MB ( 8000000) 7. [at 110000000] 128 MB ( 8000000) 8. [at 7ffbb0000000] 74 MB ( 4a70000) 9. [at b3ff0000] 64 MB ( 4000000) 10. [at 7ffbab6aa000] 46 MB ( 2e46000) ======= ========== |
回复此楼» 猜你喜欢
综述论文作为代表作会不会影响评审专家的印象分？
已经有12人回复
-
2019年青年基金涵评意见，大家看看几个A，几个B?
已经有4人回复
-
应该是93bebmhtak前后十一个字符比较关键
已经有29人回复
-
奇怪，两个人的filecode固定段从头到尾一模一样
已经有9人回复
-
是这周出结果还是下周出结果？
已经有3人回复
-
小木虫上这么多卖论文的，真有人买论文么？感觉没必要啊
已经有9人回复
-
有时候，自然基金真的不能太认真 （我的申报经验）
已经有4人回复
-
帮忙看看fileCode
已经有13人回复
-
为什么网上很多人说本周 12号出结果
已经有7人回复
-
读博的好处
已经有3人回复
Scorpio_0
银虫 (著名写手)
- 应助: 25 (小学生)
- 金币: 2558.7
- 散金: 110
- 红花: 16
- 沙发: 1
- 帖子: 1282
- 在线: 179.4小时
- 虫号: 3932734
- 注册: 2015-06-20
- 性别: GG
- 专业: 计算机科学
★
小木虫: 金币+0.5, 给个红包，谢谢回帖
小木虫: 金币+0.5, 给个红包，谢谢回帖
|
如果你这些数据需要同时用，那你电脑配置不行，我笔记本都是16G 内存，大数据处理，一般电脑都32G 甚至是服务器。 如果不是同事处理，那就分成小文件处理好了。内存管理好就没问题 发自小木虫Android客户端 |
13楼2016-01-02 19:18:05
mygt_hit
专家顾问 (职业作家)
-
专家经验: +362 - 应助: 438 (硕士)
- 贵宾: 0.019
- 金币: 19579.9
- 散金: 5130
- 红花: 135
- 沙发: 3
- 帖子: 4939
- 在线: 990.5小时
- 虫号: 1489764
- 注册: 2011-11-13
- 性别: GG
- 专业: 结构工程
- 管辖: 土木建筑
2楼2015-12-30 22:17:26
★
小木虫: 金币+0.5, 给个红包，谢谢回帖
小木虫: 金币+0.5, 给个红包，谢谢回帖
|
最好是能变换处理公式，或者将矩阵分割的更小最好，现在限制你运算的是硬盘的IO速度了。 你说的虚拟内存是win将一部分硬盘作为内存开始用，如果你硬盘不是固态的话，由于机械硬盘读写速度小了内存条读写速度一个数量级，所以如果强行读取数据，在进行矩阵运算的时候会进一步变慢。 发自小木虫Android客户端 |
3楼2015-12-30 23:28:41
5楼2016-01-01 17:02:56
100