自建的 Hadoop 平台与阿里云等云平台提供的 MapReduce 服务各有什么优劣?

2016-12-07 11:10:19 +08:00
 19zero

不求详细说明各云平台 MR 的特点,仅希望了解自建平台和云平台之间的优劣,以供做路径选择分析。

1993 次点击
所在节点    程序员
2 条回复
lucifer4he
2016-12-07 12:30:41 +08:00
说一点
运维 3 台机器要一个人,运维 300 台也是一个人,你有 300 台么=。=
jerryshao1984
2016-12-07 15:56:41 +08:00
阿里云或是 aws 等云服务商提供的是 elastic MR ,也就是说根据处理的数据量弹性申请计算资源,在 MR 作业完成后释放资源。通常来说相比于自建平台会便宜一点,同时也省去了运维成本。但是有一个要求就是数据得在他们的 storage 上面,比如 S3 等。如果你的数据是在你们自己的平台上产生的,就需要上传上去进行计算。

自建平台更灵活可配置,当然需要有更强的运维能力。一般的小公司如果没有大数据运维能力,使用 aws 或是 aliyun 是一个比较好的选择。但是如果公司规模较大的活自建平台的可控力更强,或许会更省成本。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/325847

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX