文章浏览阅读3.7w次。既然是标准化作业，就必须要有一个标准化的模板。依照此本文的模板可以做到无脑复制到Scrapy项目中，将每个spider文件修改目录下的每一个项目文件即可。只需要修改列表业页和详情页中需要每个页面抓取的部分，确定他们的标签和属性在模板中进行替换，即可实现单一网站整体快速的数据抓取和采集。不过在这之前还是要确认好标准化作业中处理的爬虫抓取目标，精准定位。不仅抓取的数据可以便于项目中的应用，也方便后期的爬虫脚本的维护。_舆情分析-mvp-数据采集 脚本怎么写