1
回答数
10
关于Scrapy报错 Error while obtaining start requests
class SouthwestSpider(scrapy.Spider): name = 'southwest' # allowed_domains = ['www.xxx.com'] # start
0
回答数
1
回答数
0
回答数
2
回答数
为什么返回的数据只有第一个，不科学啊，大佬看看！
import requests from bs4 import BeautifulSoup def get_movie(): headers = {'user-agent':'Mozilla/5.0
0
回答数
3
回答数
如何实现一个爬虫系统，有帮忙解决的吗
需要的技术可以分享一下给我吗？谢谢 1、做一个新闻领域自动化爬虫框架，要求，一时间上不间断，二能够适配多个主流新闻网站源，爬下来后去标签化，统一存储。 2、程序需要有一定的健壮性，鲁棒性，因为要7*2
1
回答数
50
Python爬虫,用scrapy框架和scrapy-splash爬豆瓣读书设置代理不起作用，有没有大神帮忙看一下，谢谢
用scrapy框架和scrapy-splash爬豆瓣读书设置代理不起作用，代理设置后还是提示需要登录。 settings内的FirstSplash.middlewares.FirstsplashSpi
1
回答数
2
回答数
5
selenium技术求助
1 from selenium import webdriver 2 3 browser = webdriver.Chrome() 4 print("Test-1") 5 browser.get("h
0
回答数
5
scrapy-splash总是报504 Gateway Time-out
使用的scrapy-splash 渲染的页面，总是出现http://localhost:8050/render.html> (failed 2 times): 504 Gateway Time-out
3
回答数
4
回答数
15
c#如何下载动态生成的附件
我想在c#代码中下载该附件 http://www.nbcs.gov.cn/module/download/downfile.jsp?classid=0&filename=44950b3deb254b6
2
回答数
20
关于 python 爬虫中json的keyerror疑问
今天在模仿一本书上的爬虫例程练习时发现了一个问题， 下面是出现问题的那段代码所在定义的函数 执行程序后发现返回了下面的错误， 我就输出了一下content的内容，发现返回None 但是网页json格式
