| 查看: 1008 | 回复: 16 | ||||
| 当前只显示满足指定条件的回帖，点击这里查看本话题的所有回帖 | ||||
小小坌新虫 (正式写手)
|
[交流]
matlab数据提取速度问题已有7人参与
|
|||
|
情况是这样:从全国站点中提取某个变量日值数据，数据集是每个变量每个月一个txt文件，大小大概是8G，提取一遍一个站点6个变量要3个半小时，太慢了。。。大家有懂的可不可以给我提点建议 发自小木虫Android客户端 |
回复此楼» 猜你喜欢
博后面上今天下午会公布吗？大家有无消息？
已经有6人回复
-
高校辞职，要求赔偿，这到底合不合理
已经有28人回复
-
博后面上今天下午会公布吗？有无消息？
已经有23人回复
-
对象没有，还非常想读博，难以抉择
已经有40人回复
-
回家两天，不想呆了
已经有8人回复
-
今年什么时候会评啊
已经有7人回复
-
基你太美
已经有6人回复
-
求助析晶问题
已经有4人回复
-
评审专家会不会很在意申请人的单位啊
已经有7人回复
-
自然基金变化？？
已经有23人回复
小小坌
新虫 (正式写手)
- 应助: 1 (幼儿园)
- 金币: 3176.5
- 散金: 190
- 红花: 3
- 帖子: 304
- 在线: 72.6小时
- 虫号: 4439068
- 注册: 2016-02-26
- 专业: 水文、水资源
送红花一朵17楼2017-10-25 15:22:00
小小坌
新虫 (正式写手)
- 应助: 1 (幼儿园)
- 金币: 3176.5
- 散金: 190
- 红花: 3
- 帖子: 304
- 在线: 72.6小时
- 虫号: 4439068
- 注册: 2016-02-26
- 专业: 水文、水资源
2楼2017-10-19 19:32:05
somomo91
专家顾问 (职业作家)
-
专家经验: +3 - 应助: 144 (高中生)
- 金币: 19352.2
- 红花: 115
- 帖子: 3854
- 在线: 1053.2小时
- 虫号: 2399301
- 注册: 2013-04-03
- 专业: 动力学与控制
- 管辖: 计算模拟
★ ★ ★
小木虫: 金币+0.5, 给个红包，谢谢回帖
jjdg: 金币+2, 感谢参与 2017-10-20 08:02:39
小木虫: 金币+0.5, 给个红包，谢谢回帖
jjdg: 金币+2, 感谢参与 2017-10-20 08:02:39
|
好几个问题所在 1. 文件所在分区是 硬盘，还是固态硬盘，或者是网络，读取速度影响非常大，一般来说固态硬盘 400MB，硬盘 60-80MB，网络<10MB 2. 导入数字所用的函数，是 fscan 还是其他的， 3. 数据文件的 数据格式 也会影响读取和转换速度 4. 电脑的内存大小，如果小于 16GB 的话，那有非常大可能，MATLAB 没法利用 连续内存空间（不要和剩余内存空间混淆），这个时候系统会调用硬盘作为缓存，读取速度至少会下降一半 还有，你应该是顺序读取，如果多文件的话，可以考虑并行处理， |
3楼2017-10-19 22:11:25
ha0451
版主 (知名作家)
- 应助: 12 (小学生)
- 金币: 18651.2
- 散金: 59
- 红花: 33
- 沙发: 1
- 帖子: 6175
- 在线: 628.3小时
- 虫号: 824860
- 注册: 2009-08-09
- 专业: 数论
- 管辖: 文学芳草园
★ ★
小木虫: 金币+0.5, 给个红包，谢谢回帖
jjdg: 金币+1, 感谢参与 2017-10-20 08:03:25
小木虫: 金币+0.5, 给个红包，谢谢回帖
jjdg: 金币+1, 感谢参与 2017-10-20 08:03:25
|
网络数据下载用专门的软件，多线程并行，关键还受制于服务器端的网速，下载速度也就那样子了 发自小木虫Android客户端 |
4楼2017-10-19 22:24:57
5