推荐学习书目
Learn Python the Hard Way
Python Sites
PyPI - Python Package Index
http://diveintopython.org/toc/index.html
Pocoo
值得关注的项目
PyPy
Celery
Jinja2
Read the Docs
gevent
pyenv
virtualenv
Stackless Python
Beautiful Soup
结巴中文分词
Green Unicorn
Sentry
Shovel
Pyflakes
pytest
Python 编程
pep8 Checker
Styles
PEP 8
Google Python Style Guide
Code Style from The Hitchhiker's Guide
inksong
V2EX  ›  Python

我有个紧急的一次性扫描项目需要外包,有人可以接私活吗?项目需求很紧,工作量不大。

  •  
  •   inksong · Apr 22, 2018 · 7743 views
    This topic created in 2971 days ago, the information mentioned may be changed or developed.

    我有 3500 个网站的顶级域名,现在需要获取每个 website 内的全部子 url,并爬取子 url 内的 html 文字信息。

    举例来说,以 www.giftofwings.com 为例子: 得到一堆类似于 http://www.giftofwings.com/cgi-bin/SoftCart.exe/cam.html?L+mystore1+bkcm8438ffb2f5b2+1507421651 http://giftofwings.com/specials.html 的 url,注意这里不要.js 和.css 等,只要页面。 拿到这个 list 后在做一个简单的 html 爬取,最后提交的是这些 html 的源码,只要文字信息,不爬任何多媒体,所以应该比较快。

    详讯麻花腾:腰腰霸腰霸叁叁玲叁伍 null。

    22 replies    2018-04-23 18:50:18 +08:00
    hourann
        1
    hourann  
       Apr 22, 2018 via iPhone
    没法保证爬干净吧?
    zuoakang
        2
    zuoakang  
       Apr 22, 2018
    上价格呗
    xgzxy
        3
    xgzxy  
       Apr 22, 2018
    @inksong 你做过爬虫吗?
    Leigg
        4
    Leigg  
       Apr 22, 2018 via iPhone
    腰霸好评
    gdtv
        5
    gdtv  
       Apr 22, 2018
    假如这 3 千多个网站没有任何防爬虫措施,并且这 3 千多个网站服务器性能扛得住爬虫,那么的确挺简单的。
    sunsh2017
        6
    sunsh2017  
       Apr 22, 2018
    报价格。
    KKKKKK
        7
    KKKKKK  
       Apr 22, 2018 via iPhone   ❤️ 1
    我的需求只有一个,news.qq.com ,只爬文字,不需要多媒体,应该挺简单的,所以比较快。急
    exalex
        8
    exalex  
       Apr 22, 2018   ❤️ 1
    急 预算 200 块 需求很简单 最多几小时的事情。

    楼主大概就这意思
    exalex
        9
    exalex  
       Apr 22, 2018   ❤️ 7
    有个不是很紧急的少量页面的项目需要外包,有人可以接私活吗?项目需求不算很紧,工作量很小。
    inksong • 53 天前

    我有个紧急的一次性 mapreduce 项目需要外包,有人可以接私活吗?项目需求很紧,工作量很小。
    inksong • 80 天前

    我有个紧急的一次性爬虫项目需要外包,有人可以接私活吗?项目需求很紧,工作量很小。
    inksong • 88 天前

    戏精?已 block
    murmur
        10
    murmur  
       Apr 22, 2018
    @exalex 工作量很小
    厉害厉害
    wenzhoou
        11
    wenzhoou  
       Apr 22, 2018 via Android
    这是在测试自己的自动灌水机啊。
    stzz
        12
    stzz  
       Apr 22, 2018 via Android
    好奇这人干嘛的…
    jingrui
        13
    jingrui  
       Apr 22, 2018 via iPhone
    15w,3 天,还有惊喜,愿意私信
    summerwar
        14
    summerwar  
       Apr 22, 2018
    标题中,倒数第二句和倒数第一句内容冲突
    zwzmzd
        15
    zwzmzd  
       Apr 22, 2018 via iPhone
    @stzz 不出意料就是贩子,淘宝上接了单,转包给 v 友
    missdeer
        16
    missdeer  
       Apr 22, 2018 via Android
    @stzz
    @zwzmzd
    估计就是外包中介,赚中间差价
    huluhulu
        17
    huluhulu  
       Apr 22, 2018 via iPhone
    我正好有全套代码……只需要输入域名即可,10 万,2 天
    imkerberos
        18
    imkerberos  
       Apr 22, 2018
    我正好有全套写好的代码. 连 SERVER + Browser 界面. 10 万, 同楼上 2 天.
    DeWhite
        19
    DeWhite  
       Apr 22, 2018
    楼上这个价格合理
    Leigg
        20
    Leigg  
       Apr 23, 2018
    @exalex 我联系了他,说价格上 k,估计被吓到了,直接不理人了。。我也是醉了,自称一个博士给人干活,就这尿性。。
    PythonAnswer
        21
    PythonAnswer  
       Apr 23, 2018 via iPhone
    看来要价不能超过 200
    winglight2016
        22
    winglight2016  
       Apr 23, 2018
    @Leigg 很正常了,之前也是碰到一单,同样是爬网站,报价 500,我说我这里是现成的代码,还带个 GUI 管理界面,2k,然后就没消息了
    About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Solana   ·   3137 Online   Highest 6679   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 107ms · UTC 12:20 · PVG 20:20 · LAX 05:20 · JFK 08:20
    ♥ Do have faith in what you're doing.