Scrapy深入之认识程序的debug信息
[scrapy.utils.log] INFO:Overridden settings:自己设置的setting的信息[scrapy.middleware]INFO:Enabled extensions:启动的扩展，默认有一堆
[scrapy.middleware] INFO:Enabled downloader middlewares:启动的下载中间价，默认一堆[scrapy.middleware] INFO:Enabled spider middlewares:启动的爬虫中间件，默认一堆[scrapy.middleware] INFO:Enabled item pipelines:启动的管道
scrapy.extensions.telnet]DEBUG:爬虫运行的时候能够使用talent命令对爬虫做一些控制，比如暂停等
[scrapy.statscollectors] INFO:Dumping Scrapystats:爬虫结束时候的一些统计信息，比如请求响应数量等
scrapy.core.scraper DEBUG:Scraped from <200 http://wz.sun0769.com/html/question/201707
40346.shtml>{'content':.....} :每次yielditem的时候回提示item的内容以及这个item来自的url地址
相关