目录

爬虫流程及方法06(Scrapy进阶爬虫)(实时更新)

二叉树上的我收录于 Python 爬虫

2020-04-21 约 75 字预计阅读 1 分钟

目录

提高爬取速度的方法

1.在setting.py文件里修改并发选项

2.使用scrapy-*的高级补充库，特化某方面，提升速度

3.选择合适的技术路线进行爬虫