自我搭建 Spark 集群方案？

2016-11-01 15:34:23 +08:00
 anonymoustian

想学习一下 Hadoop Kafka Spark 的 Mlib 和 Streaming ， 自己一台笔记本的话如何搭建集群？

网上有没有便宜的 VPS 可以搭建么？

有没有合适的方案？

不要伪分布式

3139 次点击
所在节点    Hadoop
5 条回复
mortonnex
2016-11-01 15:46:13 +08:00
多 vp 开几台 vps ，花不了多少钱
学习是有成本的，况且这个成分又不高
mortonnex
2016-11-01 15:46:42 +08:00
上面回复删掉前面的 vp
fuling
2016-11-01 15:49:04 +08:00
一台机器的话，起几个 instance ，分配不同的端口就行了
hgrx
2016-11-01 15:52:44 +08:00
笔记本多开几台虚拟机
9hills
2016-11-01 16:37:33 +08:00
建议选择按时间付费的 VPS ，写个脚本一键创建。

不常用的话很便宜，另外建议上全套 yarn mr hdfs spark

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/317111

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX