V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX 提问指南
013231
V2EX  ›  问与答

怎样抓取这个网页上的数据?

  •  
  •   013231 · 2013-11-06 19:14:27 +08:00 · 2609 次点击
    这是一个创建于 3821 天前的主题,其中的信息可能已经有所发展或是发生改变。
    红岭创投的逾期名单:
    http://www.my089.com/Loan/BlackList.aspx?Time=all

    第一页很简单, 可是如何取得后面页面的数据? 找不到页码在哪个参数里:(
    4 条回复    1970-01-01 08:00:00 +08:00
    nodejx
        1
    nodejx  
       2013-11-06 20:10:13 +08:00
    我用chrome观察了下发现第一页是用get,之后都是post,那么模拟post提交应该是可以的吧?楼主可以验证下。
    ksc010
        2
    ksc010  
       2013-11-06 21:24:13 +08:00
    之后都是 ajax 获取的
    但是参数都是加密后提交的了
    你可以研究下js,获取加密方式
    或者写个插件,模拟点击,获取内容
    akira
        3
    akira  
       2013-11-06 22:44:01 +08:00
    如果参数是用js加密过的话,你需要自己处理一下js。或者找一个支持js的模拟提交页面的工具。
    jason52
        4
    jason52  
       2013-11-06 23:13:25 +08:00
    我很感兴趣 搜出了个这个 http://www.v2ex.com/t/55395
    关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   我们的愿景   ·   实用小工具   ·   3286 人在线   最高记录 6543   ·     Select Language
    创意工作者们的社区
    World is powered by solitude
    VERSION: 3.9.8.5 · 24ms · UTC 13:26 · PVG 21:26 · LAX 06:26 · JFK 09:26
    Developed with CodeLauncher
    ♥ Do have faith in what you're doing.