24 时跑爬虫程序，硬件自己组装， v 友们可有推荐

[liangmishi]

预算 2000 。
能跑 scrapy 框架写的程序就可
主要担心的还是长时间运行，硬件受不了。
跪求推荐。。

[shijingshijing]

@UnisandK 独服远程的话网络稍微不行就不好控制，本地的话还可以顺便再买两个大硬盘给大姐姐们住。

[shijingshijing]

@liangmishi 开多线程爬的时候，还是选低频多核带超线程的，肉测过，这个比高频少核的要 NB

[liangmishi]

@yeshang 兴趣，爬什么不重要，可能是微博
@gainsurier 感觉树莓派 hold 不住
@lan894734188 没看懂。。哥。。。
@UnisandK 是的，但是这个以后还会有用处的，比如放在家做做备份，或者其他，主要还是考虑到硬盘存储的原因，租的硬盘很小

[liangmishi]

@shijingshijing 非常感谢！！！ 顺便给大姐姐们住~
现在感觉你 HP 的 Gen 8 正好到我的预算，如果再加内存和硬盘，这预算就超得有点多了

[lan894734188]

@liangmishi 服务器 配置 加起来 1k 不到吧

[airqj]

爬虫又不计算密集型
把钱用在内存上

[dongfang]

这种 24 小时开机情况，不应该用服务器吗？
阿里云、腾讯云等等很多呀。

[liangmishi]

@lan894734188 您说的服务器是指云服务器吗，如果以长远来考虑还是自己组装来得划算，毕竟我只是需要向外访问，不需要外网能访问进来
@airqj 谢谢，提醒了我，没错，爬虫确实不是计算密集型的~感谢
@dongfang 云服务器不划算的，如果硬盘要加大点就会显得很贵

[3dwelcome]

我以前也考虑过， arm linux/android 或 intel atom cpu 平台比较合适，可以长期低功耗的运行，无风扇也挺稳定的。前提是你抓取后，并不需要大数据加工处理。

爬虫 only 的，上传统台式机总觉得没啥必要。。

[UnisandK]

@liangmishi 这是 KS-4C 优惠版的配置，现在收一个大概 350 软的样子，做了免税续费是 11 欧每月，机房有加拿大和法国


当然 2TB 硬盘依然觉得小的话那就没办法了

[em70]

市面上的云服务器上行带宽都是不限且免费的,不用这个跑爬虫,还自己搭建?

[3dwelcome]

云服务器 IP 是固定的，比如我以前爬 google map, 一段时间会封你的 IP ，在自己家搭建机器用 adsl ，重新拨号就换了个动态 IP ，比机房好，呵呵。

[liangmishi]

@UnisandK 果然不错性价比很高，其实我不只是有爬虫这个需求，如果以后不做爬虫了，这些硬件还可以改装成其他玩意，很好玩的，比如做个监控，比如可以放在家里可以控制某些智能的家具(虽然现在还没有)

@em70 爬虫只需要能访问公网即可，市面上的服务器我也买了个，专门用来跑 web 还不错
@3dwelcome 感觉自己搭建服务器很爽有没有~

[harry890829]

我就问下，买个家用服务器是不是就不需要 nas 了？

[Marfal]

楼主你还是上云吧，按小时付费的那种，等发现确实需要再买硬件或者是租独服，这样下来花不了多少钱也不用在这纸上谈兵。

[moosoome]

@Marfal 做爬虫上云的话还买可切换 ip 的 vps ，配置代理池，非商用爬虫的话还是自建吧

[xiaocsl]

@em70 并不是这样,我之前也这么认为,自从花钱买了美团云.

[em70]

@xiaocsl 我跟你保证阿里云和 linode 都是上行带宽无限且免费

[unfurl]

intel nuc 怎么样？

[SmiteChow]

@em70 你说的是下行吧，上行怎么可能无限。