V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
wo642436249
V2EX  ›  程序员

大家现在用爬虫主要做什么?还有......

  •  1
     
  •   wo642436249 · 2019-07-22 19:54:40 +08:00 via Android · 4567 次点击
    这是一个创建于 1028 天前的主题,其中的信息可能已经有所发展或是发生改变。

    个人开发了一款内容系统,但是个人目前写作水平渣渣,想通过爬虫爬一些内容,有什么建议和注意事项?另外想问问大家主要用爬虫做什么?

    17 条回复    2019-07-24 16:19:59 +08:00
    valueOne
        1
    valueOne  
       2019-07-22 20:28:35 +08:00 via Android
    爬不可思議的網站的內容
    Leigg
        2
    Leigg  
       2019-07-22 20:35:40 +08:00 via Android
    进一步来说,有什么 idea
    MorningBOBO
        3
    MorningBOBO  
       2019-07-22 20:42:16 +08:00
    就是一些有教育意义的
    limuyan44
        4
    limuyan44  
       2019-07-22 20:45:49 +08:00
    下片,下图,比如微博评论发的表情包就不错,个人爱好的爬虫本来就没什么用其实。。除非你想违法干一些事。另外,微博刚告了一家爬取微博内容放在自家 app 上的。有什么建议的话,就是抄作业不要全抄。
    ZY2071
        5
    ZY2071  
       2019-07-22 20:49:41 +08:00
    tomxin7
        6
    tomxin7  
       2019-07-22 20:50:12 +08:00
    用来找工作: http://jiandan.live/
    cwjokaka
        7
    cwjokaka  
       2019-07-22 21:05:35 +08:00
    爬取一些奇怪的东西
    orzorzorzorz
        8
    orzorzorzorz  
       2019-07-22 22:51:55 +08:00
    当然是用来娱乐啊: https://exhentai.org/?f_cats=1001&f_search=chinese&page=0
    有时候需要按时间搜,有时候种子坏了,这些都得自己动手
    ochatokori
        9
    ochatokori  
       2019-07-22 23:20:09 +08:00
    爬一下广播剧,漫画,小说,等的更新信息,统一推送...
    kppwp
        10
    kppwp  
       2019-07-22 23:47:40 +08:00 via iPhone
    爬取论文,用于自己检索查看
    https://github.com/suica/arxiver
    ericgui
        11
    ericgui  
       2019-07-23 01:03:31 +08:00
    github 上有个 avbook
    autogen
        12
    autogen  
       2019-07-23 04:39:11 +08:00
    爬 V 站
    jiangwei2222
        13
    jiangwei2222  
       2019-07-23 08:52:24 +08:00
    爬链接,智联,用来分析自己的薪资是不是合理 https://github.com/jiangwei1995910/getAwayBSG
    ctro15547
        14
    ctro15547  
       2019-07-23 09:50:12 +08:00
    爬各种手冲咖啡,琴瑟图片,植树造林种子图书馆等
    Cellei
        15
    Cellei  
       2019-07-23 10:51:49 +08:00
    爬招聘。。。
    www6688w
        16
    www6688w  
       2019-07-23 11:54:20 +08:00
    爬了豆瓣影视库,用于自己找找电影,做做分析 http://douban.aiyingso.com/
    wy7305e
        17
    wy7305e  
       2019-07-24 16:19:59 +08:00
    资讯阅读器
    关于   ·   帮助文档   ·   API   ·   FAQ   ·   我们的愿景   ·   广告投放   ·   感谢   ·   实用小工具   ·   4201 人在线   最高记录 5497   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 26ms · UTC 06:26 · PVG 14:26 · LAX 23:26 · JFK 02:26
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.