Python 有什么开源的框架或包能够抓取全站所有链接？

2016-05-08 22:40:00 +08:00
 HanSonJ
PS ：别让我自己写了，老板要我明天汇报，我刚才写完毕业论文。。。
1411 次点击
所在节点    问与答
5 条回复
cxyfreedom
2016-05-08 22:54:07 +08:00
BeautifulSoup ？
sensui7
2016-05-08 23:10:47 +08:00
怎么才能赢取百富镁啊, 别让我目己努力了, 我朙天就想追到, 我才刚撸完
UnisandK
2016-05-08 23:19:32 +08:00
这是要做搜索引擎爬虫吗
我觉得单这么个小功能你现在开始写来得及的。。
HanSonJ
2016-05-08 23:25:06 +08:00
@cxyfreedom 这只是解析 html 的包而已，我想要的是给一个链接就拿到全站的所有链接

@UnisandK 不是搜索引擎，我觉得我现在用 pyspider+redis 似乎还来得及。。。
HanSonJ
2016-05-08 23:52:27 +08:00
@UnisandK 基本写好了。。。这贴可以终结了。。。

这是一个专为移动设备优化的页面（即为了让你能够在 Google 搜索结果里秒开这个页面），如果你希望参与 V2EX 社区的讨论，你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/277206

V2EX 是创意工作者们的社区，是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX