javascript 分页问题下的爬虫思路怎么解决?

[redhatping]

主页面:http://www.smeimdf.org.cn/news/notify.jsp?searchType=1
爬虫目标: 查询各个地区的企业.

遇到的问题:

1,无论查询什么,生成的页面都是: http://www.smeimdf.org.cn/news/searchEntpAudit.jsp (链接中没有参数),
爬虫如何抓取呢

2.查询后的页面-- 如 javascript 下的分页.
爬虫怎么抓取呢

[3dwelcome]

看了下、是 form post 提交、改一下页面 id 就可以了吧。

[lxy]

post 提交，页数参数应该是 cpf.cpage 。浏览器按 F12 看一下请求的地址和提交的内容。

[redhatping]

@3dwelcome 1. ( 网站数据 POST 提交-- 数据库查询--生成页面),抓取 POST action="searchEntpAudit.jsp" 就可以了嘛?

2. 分页怎么办呢?

[redhatping]

@lxy 好的, 我抓取看看,谢谢.

[miaotaizi]

他页面上不有分页信息么, 这都做不到?

[ZnZt]

直接抓接口数据