首页 新闻 赞助 找找看
1
回答数

已解决问题 30 爬虫爬取app

在爬取app的时候,手机流量可以正常显示数据,连wifi设置代理数据就为空,换个手机号开流量又可以正常显示数据了数据了,怎么解决
1
回答数

已解决问题 50 东方财富网。。

东方财富网站的所有上市公司在哪个链接里呀,一直找不到
0
回答数

已关闭问题 20 xshell

xshell连接linux终端在一个会话中怎么创建多个会话同时运行,昨天使用ctrl alt + t还是可以创建的,今天创建不了了,这是怎么回事。
3
回答数

回答被采纳 30 爬虫中获取页面的问题

爬取的页面中url有一个参数page=1。代表第一页,page=2代表第二页,但是访问第一页正常,访问第二页就获取不到页面了,这种问题怎么解决,可能出现的原因在哪。已知确实是通过url中参数的变化获取
1
回答数

已关闭问题 80 爬虫把数据存在excel表中

#列表页数据def start_html(url, headers, proxies): try: response = requests.get(url=url, headers=headers,
0
回答数

已关闭问题 30 python爬虫获取不到数据

拿单页爬的某网站,没用框架,列表页是post请求,数据在ajax里。找到详情页链接进入到详情页后(详情页是get请求),数据有时候可以获取到,有时候获取不到。详情页链接没有问题,可以输出出来。随机请求
0
回答数

已关闭问题 10 scrapy中dont_filter=True

利用scrapy爬取某网站全站,必须得在每个 scrapy.Request()里加dont_filter=True这个参数,爬虫才会正常运行,爬到数据。如果不加程序刚运行就会结束,也不报错,这是什么问
1
回答数

已解决问题 100 mongodb数据库存储问题

用scrapy爬虫取了淘宝上的数据,存在Mongo里面,在robo 3T中只能显示50条,怎么解决。 自己找的资料说,满50条就会覆盖前面的数据 求解
0
回答数

已关闭问题 5 python中re模块怎么匹配小括号里的内容

gallery: JSON.parse("{\"count\":9}“) 怎么获取到"{\"count\":9}“