最近谈了一个外包的活，爬一个网站，大概 400 万网页， 1000 元少不少？

[dt2vba]

网站没有防止爬取数据的措施。

客户要求，在他的 VPS 上安装 PostgreSQL，把爬取的数据存入该数据库。

VPS 的配置，1 个处理器，1024MiB 内存,20GiB 固态硬盘。这样的配置能应付 2 亿条记录的单表吗？

大佬们，说说你们的看法。非常期待你的建议。

[herozzm]

四百万 碰上反派 ip 限制什么的你 1 万成本未必做的出来
，1000 简直和免费差不多吧，你还不如免费

[10Buns]

这个价钱不如直接免费落个人情😂

[GM]

少了，加个零还差不多。
但是如果真的是没反爬措施的话，那也没啥技术难度，就当赚点零花钱吧。

[molvqingtai]

同意二楼

[persimmon]

Charging depends on impact on client.

[ghd700]

没反扒，这跟捡钱没区别

[opengps]

电费够吗？

[thulof]

1000 太少了，想起了大学的时候缺钱，500 帮人爬过新浪微博，做的舆情分析系统，动用了 cookie 池，代理库，Redis 等，还是分布式的，自然语言处理，还有个管理的前端系统！总给才 500 ！现在想想感觉自己好像是 sb，太单纯了

[wenbinwu]

我做过一个爬 6 个类似网站的，只爬两个关键字，几百条，第一版赚了一万

[6260628]

看你水平了

[dangyuluo]

@thulof 你学习到的技术远远超过 500，我觉得挺好的。

[smallX]

贱别人，贱己，贱行业...

[dsg001]

如果没有防爬措施，而且在对方 vps 上运行，爬虫也就是写写规则的事，1k 还能接受

至于数据单条数据 * 2 亿，恐怕怎么算硬盘都不够

[loading]

@wenbinwu 几百条，手工 CtrlCV 我都觉得赚!

[murmur]

2e 数据 1000 快 真便宜

[kingfsen]

至少 4000 才干

[StarRED]

软件工程师 和 硬件工程师 相比，软件开发在中国比较看轻

[V2exUser]

先看爬的东西是什么，违法不，不然

[akrlab]

如果没有反扒，有一说一，不费吹灰之力，这钱也就挣了。
不过，注意，1000 块现在能干毛线？连油钱都不够，还不如你免费做个人情，把对方变中介，以后有活让他推荐给你。

[Deathminip]

单核处理器？ 带宽多少？ 400 万页面，假如每个页面 2 秒钟处理速度，800 万秒 ／ 60 ／ 60 ／ 24 = ？