首页 注册 登录
V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
广告
bestehen
V2EX  ›  问与答

自己设计的爬虫框架

  •  1      
  •   bestehen · 2018-08-22 19:32:33 +08:00 · 846 次点击
    这是一个创建于 2312 天前的主题，其中的信息可能已经有所发展或是发生改变。

    现在是 5 个爬虫，当然现在我想并行，我写在一个 run 的文件里面，现在 5 个爬虫并行，是不是先把这 5 个爬虫执行写在一个函数里面，然后多线程处理？

    目前尚无回复
    爬虫并行函数run
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   1041 人在线   最高记录 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 27ms · UTC 19:41 · PVG 03:41 · LAX 11:41 · JFK 14:41
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.