谁能说说 python 和 php 数据采集方面的各自特点吗?

2016-11-02 22:44:45 +08:00
 cnqncom
没研究过 python,数据采集都是用 php 的 curl 。感觉也是很强大的,不知道 python 数据采集相比有什么特点?
3267 次点击
所在节点    Python
3 条回复
gouchaoer
2016-11-02 23:53:08 +08:00
py 轮子多,用的人更多
php 的 web 相关库更强大,内容处理更方便吧
waytoexplorer
2016-11-02 23:59:50 +08:00
php 适合小规模小难度采集。 python 更容易以较少的资源和较高的并发实现大规模数据采集
Vanry
2016-11-03 11:21:35 +08:00
会啥用啥
数据采集无非是一个 http client 和一个 html parser
php 的 http client 有 php-curl-class, requests, httpful, buzz 和强大的 guzzle 大多都支持 multi curl 的多线程
html 解析可以用 symfony 的 dom crawler 和轻量小巧的 didom

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/317566

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX