首页新闻找找看学习计划

jsoup抓取网站无法获取下一页的内容

0
[待解决问题]

刚做爬虫不久,希望大家多多指教。

页面类似这种翻页的url中没有参数提交,我只能获取第一页的东西,获取不到第二页,有什么解决办法吗?

菜鸟一号11111的主页 菜鸟一号11111 | 初学一级 | 园豆:184
提问于:2017-02-10 12:05
< >
分享
所有回答(4)
0

23333,也许是ajax,你可以悄悄看一下。有另一个地址。

长蘑菇星人 | 园豆:1822 (小虾三级) | 2017-02-10 12:18

href="javascript:__doPostBack('MoreInfoList1$Pager','2')" title="转到第2页"      是这样的

支持(0) 反对(0) 菜鸟一号11111 | 园豆:184 (初学一级) | 2017-02-10 14:41

@菜鸟一号11111: webfrom orz,你要看一下post的数据。


支持(0) 反对(0) 长蘑菇星人 | 园豆:1822 (小虾三级) | 2017-02-10 14:43

@长蘑菇星人: 方便加一下扣扣吗,这个说的太慢了,我着急用,也能说的清楚点,谢谢了804870643

支持(0) 反对(0) 菜鸟一号11111 | 园豆:184 (初学一级) | 2017-02-10 14:48
0

我觉得这个需要看一下网页的源码,一般做爬虫先研究网站规律很重要

Boblim | 园豆:492 (菜鸟二级) | 2017-02-10 13:41

规律这块到提取了,现在连获取都没有,所以还不用看规律吧?

支持(0) 反对(0) 菜鸟一号11111 | 园豆:184 (初学一级) | 2017-02-10 14:42
0

f12抓下数据就知道了

孤零落叶寒 | 园豆:564 (小虾三级) | 2017-02-11 13:44
0

可以模拟点击第二页后再用jsoup抓取


ycyzharry | 园豆:20553 (高人七级) | 2017-02-12 00:01

求demo

支持(0) 反对(0) 菜鸟一号11111 | 园豆:184 (初学一级) | 2017-02-23 11:00
清除回答草稿
   您需要登录以后才能回答,未注册用户请先注册