spark 是个什么玩意？可以用来干嘛？

2016-07-29 23:18:37 +08:00
 dbfox
最近老看到这个词
3828 次点击
所在节点    问与答
5 条回复
DingSoung
2016-07-29 23:40:09 +08:00
集群
ooonme
2016-07-30 00:44:24 +08:00
分布式计算，机器学习，人工智能
shakespaces
2016-07-30 00:46:21 +08:00
类似于 hadoop 的另一种实现，主要用 scala ，不过还不是非常的成熟
yyfearth
2016-07-30 08:35:53 +08:00
@shakespaces 虽然都是大数据处理引擎 但是和 Hadoop 还是很不一样的
Hadoop 一般用来后期处理数据 而 Spark 更偏向于实时处理
应用场景不完全一致 所以不应该说是 “类似于 hadoop 的另一种实现”
虽然很多简单的情况 两种都能做
xiamx
2016-07-30 09:09:44 +08:00
@shakespaces 不对的。已经很成熟了。百度，淘宝， Amazon ， Ebay 都部署了生产级别的 Spark 集群 https://cwiki.apache.org/confluence/display/SPARK/Powered+By+Spark

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/295911

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX