V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member Sign In
V2EX › 爬
 |
想从一个网站爬一个下载链接 程序员 • ridgebin • Jan 9, 2025 • Lastly replied by yunzaifei | 5 |
 |
Opensea 的数据如何爬（NFT 交易平台） Python • dogechai • Nov 22, 2023 • Lastly replied by dayeye2006199 | 7 |
 |
水平有限，请教一下关于爬虫、脚本相关问题 程序员 • callmejoejoe • Nov 16, 2023 • Lastly replied by callmejoejoe | 4 |
 |
家庭宽带对爬虫是不是有限制的？ 程序员 • hokman • Sep 5, 2023 • Lastly replied by busier | 6 |
 |
做爬学校课程表和成绩那种爬虫应用犯法吗？ Java • tiRolin • Aug 28, 2023 • Lastly replied by spannerc | 81 |
 |
微博上的谣言微博和非谣言微博如何区分爬取？ 问与答 • make1money • Jul 21, 2023 • Lastly replied by ysc3839 | 12 |
 |
有爬虫大佬吗？请教下 问与答 • jack4536251 • Jul 10, 2023 • Lastly replied by herozzm | 17 |
 |
写了个爬虫，爬了本站的所有帖子、评论和用户信息，简单分析了一下数据。公开数据库，开源
26 分享创造 • oldshensheep • Jul 17, 2023 • Lastly replied by gpt5
|
120 |
 |
招懂爬虫的兄弟，最好是在爬虫行业 5 年以上
1 酷工作 • sotiery996006 • Jun 27, 2023 • Lastly replied by opengps
|
12 |
 |
爬虫爬取社交软件法律问题 程序员 • huaxiaforming • Jun 8, 2023 • Lastly replied by huaxiaforming | 19 |
 |
眼看你都要爬完了，这次就算了 分享发现 • huiyanpohundh123 • Feb 3, 2023 • Lastly replied by XiFanL1 | 10 |
 |
爬虫爬 twitter 和 github 大家觉得现实不？ 程序员 • zhoudafa6780022 • Nov 29, 2022 • Lastly replied by zhoudafa6780022 | 18 |
 |
这是进虫子了吗 Apple • siwadiya • Sep 5, 2022 • Lastly replied by longgediyi999 | 9 |
 |
寻找爬虫开发人员，根据关键字爬取搜索引擎结果进行筛选入库 程序员 • jd186 • Jul 7, 2022 • Lastly replied by jd186 | 6 |
 |
py 去爬对象数据，总是被封 ip，爬着爬着爬不动。是不是只能买 ip 代理数据库？太贵了 问与答 • spotsung • May 30, 2022 • Lastly replied by sadfQED2 | 5 |
 |
新人学 Python 爬虫，用了 BS4，目前只会爬取具体的 url，求问如何爬取整个页面呢或者是某个日期呢 Python • kiko12324 • Apr 25, 2022 • Lastly replied by AmberJiang | 6 |
 |
go 写的爬虫工具，求赞 程序员 • PeterYang1996 • Jan 20, 2022 • Lastly replied by whyso | 18 |
 |
关于爬虫爬取数据的法律风险规避问题 问与答 • James369 • Apr 24, 2022 • Lastly replied by Nostalgia | 16 |
 |
求教如何爬取油管评论呢？ 程序员 • sjmcefc2 • Dec 14, 2025 • Lastly replied by gigode | 6 |
 |
在随想里爬了 73 页的楼 随想 • hellhyzcy66 • May 21, 2021 • Lastly replied by hellhyzcy66 | 2 |
 |
这个网站是怎么反爬取的鸭 问与答 • happydebug • Mar 18, 2021 • Lastly replied by cmostuor | 4 |
 |
有想要练习爬虫的嘛，专门练习爬虫的平台来啦！欢迎大家挑战！ 分享发现 • wendongZheng • Mar 4, 2021 • Lastly replied by wendongZheng | 2 |
 |
想问个问题，怎么爬张大妈 程序员 • galileo1214 • Dec 23, 2020 • Lastly replied by LikeMurphy | 8 |
 |
为什么 readhub 就可以爬大站，而不吃免费饭？
1 问与答 • i4oolish • Dec 2, 2020 • Lastly replied by TimePPT
|
5 |
 |
这种应该就是爬虫爬的好的结果吧 科技 • yhyh • Nov 20, 2020 • Lastly replied by 123jiayue | 4 |
 |
爬虫还能这么用， 666
1 分享发现 • v2defy • Nov 5, 2020 • Lastly replied by tuoov
|
4 |
 |
现在的公众号还能爬到信息吗 程序员 • gongfuxiongmao • Sep 29, 2020 • Lastly replied by gongfuxiongmao | 13 |
 |
手上有 50 台云服务器，爬点什么数据好 问与答 • jwdstefani • Jul 25, 2020 • Lastly replied by Seria | 10 |
 |
关于 scrapy 的几个问题 问与答 • 13936 • Jul 24, 2020 • Lastly replied by 13936 | 3 |
 |
大佬们，怎么提升爬虫和反爬技术啊 问与答 • yangva • Jul 16, 2020 • Lastly replied by yangva | 19 |
 |
中国人在境内爬国外网站有法律风险吗？ 问与答 • glp664186796 • Jul 15, 2020 • Lastly replied by mrrong | 2 |
 |
公司写爬虫到底是员工负责还是老板负责？
1 程序员 • jizhihaoSAMA • May 25, 2020 • Lastly replied by xpresslink
|
41 |
 |
怎么实时爬取网页数据 问与答 • t1thshy • May 7, 2020 • Lastly replied by mumbler | 5 |
|
现在爬虫有什么推荐学习的？ 程序员 • galileo1214 • Apr 30, 2020 • Lastly replied by XxxxD | 23 |
 |
爬虫写得好，坐牢坐到老。现在大家还敢干爬虫的活吗？ 程序员 • suanbing • Feb 25, 2022 • Lastly replied by yousabuk | 85 |
 |
有人试过批量爬某个元素的时候爬不下来但是单独爬的时候却可以爬的情况嘛 问与答 • Waihinchan • Apr 23, 2020 • Lastly replied by Waihinchan | 3 |
 |
如何纯前端实现爬虫 问与答 • easylee1996 • Apr 15, 2020 • Lastly replied by angryfish | 26 |
 |
开源爬虫框架是否有法律风险? 问与答 • rabbbit • Mar 7, 2020 • Lastly replied by Rorysky | 4 |
 |
爬虫管理平台 Crawlab v0.4.7 发布（界面上配置 Scrapy + Git 同步）
1 程序员 • tikazyq • Feb 24, 2020 • Lastly replied by tikazyq
|
2 |
 |
大家学爬虫的热情把文泉学堂爬挂了 Python • firejoke • Feb 5, 2020 • Lastly replied by Carnival000 | 24 |
 |
帮别人爬虫该收费多少？ Python • MonsterTan • Feb 15, 2020 • Lastly replied by aimoon16 | 45 |
 |
有人爬过探探吗？ 问与答 • Weixiao0725 • Jan 10, 2020 |
 |
有人能爬微博抽奖吗？ 问与答 • fbixiaoyu • Nov 14, 2019 • Lastly replied by Lunatic1 | 4 |
 |
关于爬虫 IP 代理的疑问 问与答 • lysS • Oct 29, 2019 • Lastly replied by lysS | 8 |
 |
北上广深等城市房价跟踪 20190920
2 微信 • yeshiwei • Sep 22, 2019 • Lastly replied by shell314
|
53 |
 |
为什么诸位老哥的爬虫的都是自己写的，不用 scrapy 呢？ 问与答 • wellhome • Sep 18, 2019 • Lastly replied by niknik | 26 |
|
如何快速搭建实用的爬虫管理平台
2 程序员 • tikazyq • Aug 14, 2019 • Lastly replied by tikazyq
|
8 |
 |
可能是 JS 生成得验证码该如何爬取 Python • yth492300648 • Aug 7, 2019 • Lastly replied by hongda0812 | 1 |
 |
关于复杂网站的前端并行爬取方式 分享创造 • webee • Jul 11, 2019 • Lastly replied by yangweijie | 9 |
 |
生活不易， Python 后端，全栈，逆向爬虫接活～ 酷工作 • roberts • Aug 20, 2019 • Lastly replied by boob | 32 |
 |
现在大家爬虫爬淘宝都是用什么办法能全站大量爬取啊?给个思路吧?能用手机 app 端爬取吗?
1 Python • z1421012325 • Jul 10, 2020 • Lastly replied by gxlonline
|
49 |
 |
有人用 Java 写爬虫吗？ 程序员 • wz497345846 • Jun 11, 2019 • Lastly replied by luozic | 11 |
 |
[爬虫与 5G] 5G 的到来会对爬虫速度有质的改变吗？？ Python • WaJueJiPrince • Jun 11, 2019 • Lastly replied by locoz | 91 |
|
爬虫平台 Crawlab v0.2.2 发布 Python • tikazyq • May 30, 2019 |
|
[爬虫手记] 我是如何在 3 分钟内开发完一个爬虫的 Python • tikazyq • May 27, 2019 • Lastly replied by tikazyq | 6 |
 |
请教 Python 爬虫，存在 js 反爬，除了 selenium 还有什么解决方案呢 Python • dylanhu • May 25, 2019 • Lastly replied by huaerxiela6 | 11 |
|
爬虫平台 Crawlab v0.2 发布 Python • tikazyq • May 10, 2019 |
 |
大家对爬微信朋友圈有什么思路吗 2019 • zcsnbb • May 9, 2019 • Lastly replied by misaka19000 | 2 |
 |
天猫爬虫封禁 一个都不给我 Python • Oane • Mar 7, 2019 • Lastly replied by cruithne | 10 |
 |
互联网大厂里面都有爬虫团队吗，主要负责爬什么样的数据啊 程序员 • snappyone • Mar 2, 2019 • Lastly replied by julyclyde | 13 |
 |
AI 爬虫 BEST 爬虫 程序员 • Outliver0 • Mar 1, 2019 • Lastly replied by picone | 4 |
 |
关于爬虫爬取最新电影资源 问与答 • 13160919135 • Feb 25, 2019 • Lastly replied by daqin | 7 |
 |
这个产品图片怎么爬下来？ Python • fan2006 • Dec 26, 2018 • Lastly replied by 15399905591 | 25 |
 |
爬虫工程师这个岗位是否对新手很不友好
1 Python • CharlieBrown • Mar 14, 2019 • Lastly replied by roberts
|
44 |
 |
爬虫爬的太多了，大家一般怎么应对这个问题。
程序员 • nicoljiang PRO |
17 |
 |
跑爬虫程序, 每天都要跑几千万条数据, 公司想要租个服务器,V 友们可有什么推荐 ? 问与答 • studyaa • Aug 28, 2018 • Lastly replied by tennc | 9 |
 |
记一次爬虫经历 Python • dzybiu • Aug 24, 2018 • Lastly replied by xianxiaobo | 23 |
 |
爬虫如何实现增量爬取？ 酷工作 • PHPer233 • Jul 27, 2018 • Lastly replied by fiht | 4 |
 |
如果爬取的网站源有几百多个，如何用 Python 建立爬虫? 问与答 • xanthu • Jul 10, 2018 • Lastly replied by cyspy | 4 |
 |
pyspider 爬去文章列表问题 问与答 • just1 • Jul 5, 2018 • Lastly replied by binux | 9 |
 |
怎么判断爬虫已经将网站的数据完整的爬取下来了 问与答 • diffworld • Jun 21, 2018 • Lastly replied by icy37785 | 5 |
 |
Python 爬虫问题 Python • bestehen • Jun 1, 2020 • Lastly replied by Dreamerwwr | 10 |
 |
Java 怎么爬取 websocket Java • richieboy • Jun 8, 2018 • Lastly replied by xxxy | 2 |
 |
关于使用协程(asyncio+aiohttp)爬虫的疑惑 Python • frank065 • May 30, 2018 • Lastly replied by rim99 | 3 |
Select Language