24小时热门版块排行榜    

查看: 2859  |  回复: 17
【奖励】 本帖被评价12次,作者yyallen2003增加金币 9.2
当前只显示满足指定条件的回帖,点击这里查看本话题的所有回帖

yyallen2003

木虫 (知名作家)


[资源] 【云计算论文:资源管理系统】Google Omega VS Apache Hadoop YARN

距离Google在OSDI2004上释出经典论文《MapReduce: Simplified Data Processing on Large Clusters》
已经有将近10年的时间了。(据Google学术统计,该论文被引用超过8000次)

在这期间,MapReduce并行计算技术进入战国时代,出现N多的改进模型:
内存/迭代计算:HaLoop、Twister、UCBerkeley Spark
实时/流式计算:Google Dremel、Apache Drill、Twitter Storm、Apache S4、Apache Samza、Cloudera Impala、Stinger Initiative
图计算:Google Prege、Yahoo! Giraph、Apache Hama
DAG计算:Apache Tez
……

2013年,Google和Apache Hadoop在半年时间内先后释出2篇重量级论文,
它们都是关于“集群资源统一管理/调度系统”的工业界产品,
其中Google Omega已用于生产,
Apache Hadoop YARN已发布beta版本。
这标致着云计算技术整体进入MRv2时代。

现在将这2篇论文分享给大家。

《Omega: flexible, scalable schedulers for large compute clusters》
Proceedings of the 8th ACM European Conference on Computer Systems
2013年4月14-17日

《Apache Hadoop YARN: Yet Another Resource Negotiator》(Best Paper)
Proceedings of the Fourth ACM Symposium on Cloud Computing(SoCC'13)
2013年10月1-3日
回复此楼

» 本帖附件资源列表

  • 欢迎监督和反馈:小木虫仅提供交流平台,不对该内容负责。
    本内容由用户自主发布,如果其内容涉及到知识产权问题,其责任在于用户本人,如对版权有异议,请联系邮箱:xiaomuchong@tal.com
  • 附件 1 : Omega&YARN.rar
  • 2013-10-08 16:48:48, 2.16 M

» 收录本帖的淘帖专辑推荐

IT学习资料

» 本帖已获得的红花(最新10朵)

» 猜你喜欢

» 本主题相关价值贴推荐,对您同样有帮助:

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yyallen2003

木虫 (知名作家)


yyallen2003: 回帖置顶 2013-10-08 20:03:03
引用回帖:
3楼: Originally posted by avadesian at 2013-10-08 18:49:54
下载不了啊,提示错误,资源不存在?

很奇怪啊,我是在小木虫直接上传的。

《Omega: flexible, scalable schedulers for large compute clusters》
在Google学术上下载到。

《Apache Hadoop YARN: Yet Another Resource Negotiator》
http://www.socc2013.org/home/program
这里能下载到。
4楼2013-10-08 20:02:39
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 18 个回答

avadesian

新虫 (初入文坛)


★ 一星级,一般

下载不了啊,提示错误,资源不存在?
3楼2013-10-08 18:49:54
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

happywind-75

金虫 (小有名气)


★★★★★ 五星级,优秀推荐

顶一下,感谢分享!期待和关注
6楼2013-10-12 08:41:18
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

零点钟

铁虫 (初入文坛)


★★★★★ 五星级,优秀推荐

楼主好强大;关于并行计算以及相关的研究能够给些建议;对操作系统、体系结构比较纯的计算机研究比较感兴趣,应该如何下手,出文章等等
12楼2014-03-24 15:49:05
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
简单回复
evenwang5楼
2013-10-09 08:53   回复  
五星好评  顶一下,感谢分享!
2013-10-23 11:38   回复  
顶一下,感谢分享!
2014-01-05 14:05   回复  
五星好评  顶一下,感谢分享!
ylxiong9楼
2014-02-13 14:51   回复  
五星好评  顶一下,感谢分享!
FMStation10楼
2014-02-26 07:53   回复  
五星好评  顶一下,感谢分享!
猪头昵11楼
2014-03-12 10:55   回复  
五星好评  顶一下,感谢分享!
☆ 无星级 ★ 一星级 ★★★ 三星级 ★★★★★ 五星级
普通表情 高级回复 (可上传附件)
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[基金申请] 欢迎发来filecode的Mz6后的代码验证其规律 +32 医学老男孩 2026-08-13 74/3700 2026-08-16 21:05 by 医学老男孩
[基金申请] 时间戳又变了8-15 +13 archvillain 2026-08-15 25/1250 2026-08-16 20:13 by zhaosm1982
[基金申请] 2027广东省杰青 +3 奶牛小黑 2026-08-15 6/300 2026-08-16 20:07 by 奶牛小黑
[基金申请] 快农历七夕节了,轻松一下,男人悄悄话,女施主请不要进来。 +3 Tide man 2026-08-14 3/150 2026-08-16 17:47 by jurkat.1640
[基金申请] 哪位老哥知道今年的国自然具体哪一天放榜? +9 Ldrop2023 2026-08-13 9/450 2026-08-16 13:24 by wukun_007
[基金申请] 咱们一起用铁证分析2026国家社科基金中标与否 +7 启萌科技 2026-08-12 26/1300 2026-08-16 12:35 by 启萌科技
[基金申请] 我的国基提前知道中了,可是同事的操作让我实在接受不了,怎么会有这样的人 +11 家与远方 2026-08-10 16/800 2026-08-16 10:28 by ray43
[基金申请] filecode=后面第一个是大写字母 +6 wangze12014 2026-08-14 7/350 2026-08-15 20:12 by gltch
[基金申请] 关于Filecode分析方法 +10 majunge000 2026-08-10 13/650 2026-08-15 12:26 by hanpeng972
[基金申请] 是这周出结果还是下周出结果? +4 yuleib84 2026-08-11 4/200 2026-08-14 23:05 by lfy8008
[基金申请] 奇怪,两个人的filecode固定段从头到尾一模一样 +8 布布和一二 2026-08-10 11/550 2026-08-14 14:58 by Equinoxhua
[硕博家园] 读博的好处 +4 lnee 2026-08-11 4/200 2026-08-14 10:20 by ahsoarli
[基金申请] filecode +15 documentary 2026-08-10 17/850 2026-08-14 10:08 by kissu88
[基金申请] 静等基金结果 +8 gjjjzhong 2026-08-10 21/1050 2026-08-13 17:56 by 且听虎啸
[基金申请] Filecode 又变了,巨变 +3 WH3796 2026-08-12 4/200 2026-08-13 14:13 by 小木虫6752397
[基金申请] 结合人工智能,周易传统文化,filecode打分制来了,3分以上希望很大。 +3 Tide man 2026-08-12 4/200 2026-08-13 08:35 by ZJTJZ
[基金申请] 帮忙看看fileCode +7 wwncly 2026-08-10 13/650 2026-08-11 19:36 by 冰心玉壶晴
[基金申请] 确定了,国自然21号放榜 +6 布布和一二 2026-08-10 7/350 2026-08-10 19:15 by 2000zf36392
[基金申请] 国自然结果 +4 Vierhys 2026-08-10 8/400 2026-08-10 15:06 by Vierhys
[基金申请] 据悉今年马上要出结果了 +7 瞬息宇宙 2026-08-10 8/400 2026-08-10 12:42 by Vivilian
信息提示
请填处理意见