特牛生活网

scrapy之settings参数-CSDN博客

网友收藏
文章浏览阅读149次。#==>第一部分:基本配置<===#1、项目名称,默认的USER_AGENT由它来构成,也作为日志记录的日志名BOT_NAME = 'Amazon'#2、爬虫应用路径SPIDER_MODULES = ['Amazon.spiders']NEWSPIDER_MODULE = 'Amazon.spiders'#3、客户端User-Agent请求..._scrapy cookie
标签:scrapy cookie