文章浏览阅读602次。1、 ** scrapy框架的架构图示：**它的组成部分：Scrapy Engine（引擎）：用来处理整个系统的数据流处理、触发事务，是整个框架的核心。Item（项目）：定义了爬取结果的数据结构，爬取的数据会被赋值成该对象。Scheduler（调度器）：用来接受引擎发过来的请求并加入队列中，并在引擎再次请求的时候提供给引擎。Item Pipeline（项目管道）：负责处理由蜘蛛从网页中抽取的项目，它的主要任务是清洗、验证和存储数据。Downloader（下载器）：用于下载网页内容，并将网页内_scrapy框架中 默认情况采用如下哪种机制进行爬取数据