使用代理ip
还是一样的会被封啊
@菇凉很好: 你找一个代理ip库,每次请求随机取出一条代理ip
其中一个方法就是楼上说的.另外一个就是摸清楚网站的反爬虫机制.
可以购买代理或者采集代理,每次随机从这些代理里面取一条使用
推荐使用神箭手云爬虫,完全在云上编写和执行爬虫,不需要配置任何开发环境,快速开发快速实现。
简单几行 javascript 就可以实现复杂的爬虫,同时提供很多功能函数:反反爬虫、 js 渲染、数据发布、图表分析、反防盗链等,这些在开发爬虫过程中经常会遇到的问题都由神箭手帮你解决