scrapy log日志重定向，设置全局日志等级_scrapy log_level-CSDN博客

网友收藏2024-01-25 01:45

链接地址：https://blog.csdn.net/jerry3747/article/details/108796520
链接标题：scrapy log日志重定向，设置全局日志等级_scrapy log_level-CSDN博客
所属网站：blog.csdn.net
被收藏次数：9807

文章浏览阅读1.1k次。问题描述：今天接到运维同事反馈，有个scrapy项目产生了大量日志，占用了100多g内存。查看日志文件发现全是第三方模块的debug信息，而这个第三方模块是直接用的logging。解决思路：既然直接使用的logging，那我只要在scrapy 项目里面设置日志等级就可以了，经过各种尝试发现还是有debug日志，而且还有scrapy框架的debug信息，那估计就是因为这个导致后面的所有日志等级设置都无效。那既然找到问题源头，就想办法把scrapy框架的默认debug日志等级给改了，直接在setting文_scrapy log_level

本文地址：https://tebull.com/detail/571194.html

标签：scrapy log_level