首页 新闻 会员 周边 捐助
1
回答数

已解决问题 30 爬虫爬取app

在爬取app的时候，手机流量可以正常显示数据，连wifi设置代理数据就为空，换个手机号开流量又可以正常显示数据了数据了，怎么解决
陆无为的主页 陆无为
浏览(672) 6年前
1
回答数

已解决问题 50 东方财富网。。

东方财富网站的所有上市公司在哪个链接里呀，一直找不到
陆无为的主页 陆无为
浏览(256) 6年前
0
回答数

已关闭问题 20 xshell

xshell连接linux终端在一个会话中怎么创建多个会话同时运行，昨天使用ctrl alt + t还是可以创建的，今天创建不了了，这是怎么回事。
陆无为的主页 陆无为
浏览(193) 6年前
3
回答数

回答被采纳 30 爬虫中获取页面的问题

爬取的页面中url有一个参数page=1。代表第一页，page=2代表第二页，但是访问第一页正常，访问第二页就获取不到页面了，这种问题怎么解决，可能出现的原因在哪。已知确实是通过url中参数的变化获取
陆无为的主页 陆无为
浏览(437) 6年前
1
回答数

已关闭问题 80 爬虫把数据存在excel表中

#列表页数据def start_html(url, headers, proxies): try: response = requests.get(url=url, headers=headers,
python
陆无为的主页 陆无为
浏览(1389) 6年前
0
回答数

已关闭问题 30 python爬虫获取不到数据

拿单页爬的某网站，没用框架，列表页是post请求，数据在ajax里。找到详情页链接进入到详情页后（详情页是get请求），数据有时候可以获取到，有时候获取不到。详情页链接没有问题，可以输出出来。随机请求
python
陆无为的主页 陆无为
浏览(567) 6年前
0
回答数

已关闭问题 10 scrapy中dont_filter=True

利用scrapy爬取某网站全站，必须得在每个 scrapy.Request（）里加dont_filter=True这个参数，爬虫才会正常运行，爬到数据。如果不加程序刚运行就会结束，也不报错，这是什么问
陆无为的主页 陆无为
浏览(5602) 6年前
1
回答数

已解决问题 100 mongodb数据库存储问题

用scrapy爬虫取了淘宝上的数据，存在Mongo里面，在robo 3T中只能显示50条，怎么解决。 自己找的资料说，满50条就会覆盖前面的数据 求解
陆无为的主页 陆无为
浏览(480) 7年前
0
回答数

已关闭问题 5 python中re模块怎么匹配小括号里的内容

gallery: JSON.parse("{\"count\":9}“） 怎么获取到"{\"count\":9}“
陆无为的主页 陆无为
浏览(1913) 7年前
Top