首页 新闻 会员 周边

爬虫如何爬取不同的网页数据

0
悬赏园豆:20 [待解决问题]

比如百度搜索关键词得到的快照信息,抓取快照链接到的网页数据需要每个网页都定义一个爬虫吗,有没有通用的办法

历史的醉人的主页 历史的醉人 | 初学一级 | 园豆:170
提问于:2019-07-05 09:46
< >
分享
所有回答(2)
0

提取一个公用 get 和 post 方法,把 请求地址、内容类型等作为参数传递

三人乐乐 | 园豆:4819 (老鸟四级) | 2019-07-05 09:57
0

1.可不需要;
2.肯定有;

花飘水流兮 | 园豆:13560 (专家六级) | 2019-07-05 09:59
清除回答草稿
   您需要登录以后才能回答,未注册用户请先注册