首页 新闻 会员 周边 捐助
0
回答数

待解决问题 50 pyspider的分布式运行成功,2台slave跑,但是时间并没有缩短问题?

1台master,2台slave,虚拟机ubuntu下,配置如下:一。master的config.json:{ "taskdb": "mysql+taskdb://pyspider:pyspider-
2
回答数

待解决问题 10 python多线程爬虫,提高效率,怎么写?

1 import requests 2 from scrapy.selector import Selector 3 import scrapy,datetime 4 import threading