这是一个创建于 758 天前的主题，其中的信息可能已经有所发展或是发生改变。
爬虫爬 twitter 和 github
设定关键词，搜索特定博主 /作者
大家觉得现实不？
 |
1
SunsetShimmer 2022-11-25 10:25:16 +08:00
好像都有 API ，技术可行。
需求可能不大。 |
 |
2
limiter 2022-11-25 10:44:33 +08:00
爬 github 吃力不讨好，会用的都能自己访问，不会用的爬了也不会看，至于 twitter ，你爬了给谁用？不怕进局子？
|
 |
3
zhoudafa6780022 OP @SunsetShimmer 有 API 吗？哪里搜索？不是需要需要很多账号才能完成的吗？
|
|
4
zhoudafa6780022 OP @limiter 要快速搜索，人工无法实现。。有脚本或软件，就会看！
|
|
5
SunsetShimmer 2022-11-25 10:50:02 +08:00
|
|
6
SunsetShimmer 2022-11-25 10:50:51 +08:00
@zhoudafa6780022 当然是有 API 使用限制的，大量调用恐怕不行。
|
 |
7
lzgshsj 2022-11-25 10:53:07 +08:00
|
 |
8
ochatokori 2022-11-25 10:58:42 +08:00 via Android
github 直接用官方提供 api
推特官方 api 需要申请开发者，不申请开发者用普通用户网页 api 容易账号被封。 以前试过用游客账户网页 api 爬，除了一部分信息爬不到之外（推文和回复都可以）效果还行。 |
|
9
zhoudafa6780022 OP @SunsetShimmer 就是要收集 twitter 和 github 博主主页上留有 tg 联系方式的一类。使用 API ，是否可行？
|
|
10
zhoudafa6780022 OP @lzgshsj 想要收集 twitter 和 github 博主主页上 关键字+留有 tg 联系方式的一类
|
 |
11
v2defy 2022-11-25 13:22:14 +08:00  1
想那么多干嘛，api 都有了，想做就去实现啊
|
 |
12
youyelan9527 2022-11-25 15:55:11 +08:00
你这明目张胆的的说出来要爬人家的联系方式🙄
|
 |
13
haohh 2022-11-25 18:13:05 +08:00
twint 了解下
|
|
14
SunsetShimmer 2022-11-25 20:09:59 +08:00
@zhoudafa6780022 不建议做，最好别做。
|
 |
15
janus77 2022-11-26 12:56:10 +08:00
好小子，我收到的不知名猎头邮件就是你们发的吧
|
|
16
zhoudafa6780022 OP @SunsetShimmer 为什么？ 怕无法实现大量调用是吗？
|
|
17
SunsetShimmer 2022-11-28 23:02:39 +08:00 via Android
@zhoudafa6780022 API 有限制是一方面，另一方面是这个用途（获取联系方式）有点不太正当。
|
|
18
zhoudafa6780022 OP @SunsetShimmer 好的 谢谢
|
Select Language