应《网络安全法》要求，自2017年10月1日起，未进行实名认证将不得使用互联网跟帖服务。为保障您的帐号能够正常使用，请尽快对帐号进行手机号验证，感谢您的理解与支持！

24小时热门版块排行榜    

小木虫论坛-学术科研互动平台 » 计算模拟区 » 程序语言 » 其它 » 2013年第一天在线等待求助...
51/1返回列表
查看: 611  |  回复: 4
只看楼主 @他人 存档 新回复提醒 (忽略) 收藏    在APP中查看
当前只显示满足指定条件的回帖，点击这里查看本话题的所有回帖

gaoisbest

金虫 (小有名气)

[求助] 2013年第一天在线等待求助...

我要用java Swing做一个桌面应用软件，其中一个功能是分析大量数据。假设每次需要分析的数据大小约为几G，自己的一台计算机完成这个计算耗时太多，故想实现简单的并行计算功能，即利用局域网（局域网很小，比如就是一个办公室，共有5台个人PC组成的局域网）内其他电脑并分配计算任务给它们，最终返回计算结果。为了能与其他电脑通信，其他电脑中也安装该软件。分析数据时，处理数据的规则是固定的，其它电脑总是用需要执行完全相同的运算过程，而不是经常变化的。每个处理片段数据之间不存在依赖关系。
  
      java RMI可以实现简单的分布式计算，但是我想使用某个成熟的框架来实现，现在的问题就是，选用何种方式来实现？我查阅了相关的资料，下面是对各种可能方案的分析：

[1] MPI
      MPI传输数据和通信问题比较难解决；java 对MPI支持不足，java的一个框架实现MPJ Express(http://mpj-express.org/index.html)不太成熟，用户量不大。

[2] MapReduce  
      MapReduce支持处理T级数据量，其实现Hadoop 基于分布式文件系统，感觉它对于该软件来说有些复杂。

[3] 网格计算
      其java实现框架有GridGain(http://www.gridgain.com/) 和JPPF(http://www.jppf.org/)。

请问各位，上述三个解决方案中哪一个可以更适合的解决这个问题？是不是有其他更合适的解决方案和框架呢？
回复此楼

» 猜你喜欢

» 本主题相关价值贴推荐，对您同样有帮助:
当思考成为习惯，成功将随之而至！
1楼 2013-01-01 11:31:49
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

一鸿731

木虫 (著名写手)
这个问题至今还没解决吗？帮顶一下，对结果表示兴趣。
赞一下 回复此楼
5楼2013-05-15 21:59:24
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 5 个回答

yalefield

金虫 (文坛精英)

老汉一枚
俺不是应助，绝对不是应助。

首先，如果“每次”的数据都是几个GB，而每周或每月都有几次，那么，不如每次换一台电脑来做。没必要搞并行。
其次，如果每年才有几次，那么，不如就在一台电脑上算。没必要搞并行。

总之，没必要搞并行。
赞一下 回复此楼
2楼2013-01-01 16:33:42
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

wangww2011

木虫 (著名写手)
引用回帖:
2楼: Originally posted by yalefield at 2013-01-01 16:33:42
俺不是应助，绝对不是应助。

首先，如果“每次”的数据都是几个GB，而每周或每月都有几次，那么，不如每次换一台电脑来做。没必要搞并行。
其次，如果每年才有几次，那么，不如就在一台电脑上算。没必要搞并行。 ...

同意 哈哈
如果楼主实现了才用5台电脑一起算，那效率定小于5，说不定你算法上有什么优化就能提高这么多 假设算法不能再优化了 先考虑下GPU？
总之是能不并行就不并行 除非很有必要
赞一下 回复此楼
3楼2013-01-01 22:42:05
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

gaoisbest

金虫 (小有名气)
引用回帖:
3楼: Originally posted by wangww2011 at 2013-01-01 22:42:05
同意 哈哈
如果楼主实现了才用5台电脑一起算，那效率定小于5，说不定你算法上有什么优化就能提高这么多 假设算法不能再优化了 先考虑下GPU？
总之是能不并行就不并行 除非很有必要...

Hadoop的运行环境需要人工配置吧，但是我要做的这个软件是要挂在网上，是要供别人下载使用的，这样，用户肯定不会配置运行环境啊，求解释...
赞一下 回复此楼
当思考成为习惯，成功将随之而至！
4楼2013-01-03 17:29:06
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 5 个回答
普通表情 龙 兔 虎 猫
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[考研] 化学调剂一志愿上海交通大学336分-本科上海211 +4 小鱼爱有机 2026-03-25 4/200 2026-03-26 10:19 by aa331100
[硕博家园] 北京林业大学硕导招生广告 +4 kongweilin 2026-03-26 6/300 2026-03-26 10:06 by 咪呜喵呜
[考研] 考研调剂 +6 呼呼？~+123456 2026-03-24 6/300 2026-03-25 22:55 by 418490947
[考研] 335分 | 材料与化工专硕 | GPA 4.07 | 有科研经历 +6 cccchenso 2026-03-23 6/300 2026-03-25 22:25 by 544594351
[考研] 08工学调剂 +13 用户573181 2026-03-20 18/900 2026-03-25 22:00 by zbssa
[考研] 机械学硕总分317求调剂！！！！ +4 Acaciad 2026-03-25 4/200 2026-03-25 19:59 by hanserlol
[考研] 290分调剂求助 +3 吉祥止止陈 2026-03-25 3/150 2026-03-25 19:58 by barlinike
[考研] 材料学硕333求调剂 +4 北道巷 2026-03-24 4/200 2026-03-25 14:16 by mapenggao
[考研] 各位老师您好：本人初试372分 +5 jj涌77 2026-03-25 6/300 2026-03-25 14:15 by mapenggao
[考研] 085600材料与化工调剂 +9 A-哆啦Z梦 2026-03-23 15/750 2026-03-25 11:18 by Ainin_
[考研] 278求调剂 +4 我可以上岸的对� 2026-03-19 4/200 2026-03-25 11:01 by userper
[考研] 材料学求调剂 +6 Stella_Yao 2026-03-20 6/300 2026-03-25 00:37 by baoball
[考研] 求调剂 +5 林之夕 2026-03-24 5/250 2026-03-24 17:16 by dick_runner
[材料工程] 一志愿C9材料与化工专业总分300求调剂 +4 曼111 2026-03-24 5/250 2026-03-24 15:44 by 星空星月
[考博] 26申博自荐 +3 whh869393 2026-03-24 3/150 2026-03-24 09:55 by 21018060
[考研] 一志愿武理材料工程348求调剂 +6 ￣^￣゜汗 2026-03-19 9/450 2026-03-23 19:53 by pswait
[考研] 324求调剂 +6 lucky呀呀呀鸭 2026-03-20 6/300 2026-03-22 16:01 by ColorlessPI
[考研] 一志愿南大，0703化学，分数336，求调剂 +3 收到VS 2026-03-21 3/150 2026-03-21 18:42 by 学员8dgXkO
[考研] 材料 271求调剂 +5 展信悦_ 2026-03-21 5/250 2026-03-21 17:29 by 学员8dgXkO
[考研] 295材料求调剂，一志愿武汉理工085601专硕 +5 Charlieyq 2026-03-19 5/250 2026-03-20 20:35 by JourneyLucky
信息提示
关闭
请填处理意见
关闭