朋友写的爬虫程序,非常想学习,借鉴代码,奈何不开源,求助大神帮忙
链接: https://pan.baidu.com/s/18dwvDvjh5xUrEwKeeROp1g 提取码: y9x8
学爬虫没必要看源码对你没多大帮忙,可以去学下正向开发,web前端,app开发,后面爬虫只是用工具而已
找你朋友要阿
天天都见py爬虫,感觉很多人认为这就是写程序了,我甚至基本就没见过py用tcp玩爬的(自己思考为什么需要tcp),所以没什么借鉴头。
通信原理更值得学习,然后才是工具(不然你都不知道怎么回事),普通网站爬个数据,py http reqeust模式基本没有什么优势,你还不如直接py+js+dom等等,真正需要效能呢,你py不还得慢慢看别个的js,http request用什么代码实现都是几行代码的事。最重要的是原理,下一步才是工具(包括通信包、代码逆向、写代码等等)。