0
回答数
3
回答数
1
回答数
10
关于Scrapy报错 Error while obtaining start requests
class SouthwestSpider(scrapy.Spider): name = 'southwest' # allowed_domains = ['www.xxx.com'] # start
0
回答数
1
回答数
2
回答数
为什么返回的数据只有第一个，不科学啊，大佬看看！
import requests from bs4 import BeautifulSoup def get_movie(): headers = {'user-agent':'Mozilla/5.0
0
回答数
3
回答数
如何实现一个爬虫系统，有帮忙解决的吗
需要的技术可以分享一下给我吗？谢谢 1、做一个新闻领域自动化爬虫框架，要求，一时间上不间断，二能够适配多个主流新闻网站源，爬下来后去标签化，统一存储。 2、程序需要有一定的健壮性，鲁棒性，因为要7*2
1
回答数
50
Python爬虫,用scrapy框架和scrapy-splash爬豆瓣读书设置代理不起作用，有没有大神帮忙看一下，谢谢
用scrapy框架和scrapy-splash爬豆瓣读书设置代理不起作用，代理设置后还是提示需要登录。 settings内的FirstSplash.middlewares.FirstsplashSpi
1
回答数
2
回答数
5
selenium技术求助
1 from selenium import webdriver 2 3 browser = webdriver.Chrome() 4 print("Test-1") 5 browser.get("h
0
回答数
5
scrapy-splash总是报504 Gateway Time-out
使用的scrapy-splash 渲染的页面，总是出现http://localhost:8050/render.html> (failed 2 times): 504 Gateway Time-out
