首页   注册   登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
Coding
V2EX  ›  程序员

有什么靠谱的代理池开源项目推荐?免费获取大量可用的 ip 靠谱吗

  •  
  •   wyan453351466 · 81 天前 · 1712 次点击
    这是一个创建于 81 天前的主题,其中的信息可能已经有所发展或是发生改变。

    楼主最近需要采集一些数据。然后看了下 GitHub 上的一些 star 数较高的代理池项目,好像能很好地 work 的不多。 有什么好的开源项目推荐的吗?

    19 回复  |  直到 2019-09-26 08:33:46 +08:00
        1
    cwz88   81 天前
    掏点钱不好么?
        2
    wyan453351466   81 天前
    @cwz88 好呀。有免费得更好呀。没有的话我就直接掏钱买了。
    主要是采集的数据量大。如果长期付费是一笔不小的开支,能省则省嘛(手动狗头)
        3
    cwz88   81 天前   ♥ 1
    我研究过这个,免费的都不靠谱
        4
    andylsr   81 天前 via Android
    基本都是那几个网站的代理,结论是并没什么可以用的
        5
    scukmh   81 天前
    haipproxy, 其实 GitHub 上的此类项目都差不多,大家爬取的代理网站无非就那么几个,这样看来还不如选择一个简单易用的。
        6
    wafm   81 天前
    即使是付费的也一堆雷,免费的就别想了,有动手能力可以自己扫
        7
    itsjoke   80 天前
    动态 XXX 了解一下
        8
    kingfalse   80 天前
    直接花钱买吧,试那些就是浪费时间
        9
    wyan453351466   80 天前
    @kingfalse 嗯,我觉得也是。即使写出来一个代理池爬虫,维护这个代理池爬虫还有服务器成本其实也是一项开支
        10
    nullboy   80 天前
    收费的也是垃圾
        11
    lxghost   80 天前
    http://www.zhimaruanjian.com/ 每天可以领免费的
        12
    hanyu586   80 天前
    铜球
        13
    zsy979   80 天前
    免费的你短时间内发两次请求状态都可能一个成功一个失败 233
        14
    snxq1995   80 天前 via Android
    拨号上网了解一下
        15
    HuberyPang   80 天前
    https://github.com/pangxiaobin/proxy_ip_pool 我之前写了一个 不过也是爬取那几个免费代理网站 可以自己在找一些添加到项目中
        16
    sadfQED2   80 天前
    github 上免费的我基本上都试过,另外我也自己去各种地方收集过免费的,总结下来一句话就是:浪费时间

    然后我又用了给钱的,最后总结下来是:给钱也不咋地(每年 5 万,可能是我钱没给够)
        17
    jetpy   80 天前
    即使是自己做着玩耍的项目也建议付费的,免费的根本就是浪费时间,90%以上都不能用, 公司项目的话直接就不用考虑免费的,安心付费吧。
        18
    killlakilllike   80 天前
    https://www.zdaye.com/ 这个,有免费的
        19
    luckbbs   80 天前
    付费的,也很多爬的免费网站。
    关于   ·   FAQ   ·   API   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   2312 人在线   最高记录 5043   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.3 · 25ms · UTC 07:54 · PVG 15:54 · LAX 23:54 · JFK 02:54
    ♥ Do have faith in what you're doing.