首页 新闻 会员 周边 捐助
2
回答数

待解决问题 30 python进程池爬取速度比单线程还要慢，求一个可实现的代码方案。

一开始，我用的是单线程，爬完整个397页数据用时，其中如果不向数据库写入是62秒左右，如果要向数据库插入文件需要82秒 后来我改成了进程池模式，4进程爬取，其中不向数据库写入用时22秒左右 ,进程池4
python mysql 进程池 爬虫
Champion321的主页 Champion321
浏览(2169) 6年前