您的位置: 首页 > IT文章 > 十七 Python分布式爬虫打造搜索引擎Scrapy精讲—深度优先与广度优先原理 十七 Python分布式爬虫打造搜索引擎Scrapy精讲—深度优先与广度优先原理 分类: IT文章 • 2022-06-07 23:52:41 网站树形结构 深度优先 是从左到右深度进行爬取的,以深度为准则从左到右的执行(递归方式实现)Scrapy默认是深度优先的 广度优先 是以层级来执行的,(列队方式实现)