如何低成本地搭建 hadoop、spark 等大数据集群学习

[einvince]

买了两个腾讯云等 1G1 核，发现跑不起来，默认配置太高，调来调去 demo 都 run 不起来

[einvince]

@bbx 谢谢，但现在的主要矛盾是机器 CPU 和内存资源有限
@yuanfnadi 老哥，你这方法有点 6，发现新大陆了，就这么搞

[startar]

学习的话，不用搭集群，搭伪分布式模式的 hadoop 就行了，毕竟你的关注点在于在于大数据处理，而不是主备高可用之类的工程问题。我家里的 4 核 16G 机器跑得很 ok。

[startar]

而且不建议用云主机。。还是太贵。自己配一台就是了。内存要尽可能大，其他无所谓

[bbx]

@einvince 目前好点的笔记本 4core 16Gb 外加 ssd 比便宜的所谓的云主机好不知道哪去。百万数据或者几个 G 左右的一台笔记本差不多就行了

[gabon]

1 核 1g。。

[yjd]

淘宝买台二手服务器。便宜

[einvince]

@yjd 666，好便宜

[autogen]

淘宝搜 X79 服务器(16 核 32 线程，64G 内存，整机 3000 元左右)或者 X58 服务器(12 核 /24 线程，48G 内存，整机 1000 元左右)