Scrapy数据流转分析(一)

很多scrapy初学者经常在其他博客看到这张图:


Scrapy架构概览

这张图很清晰的展示了Scrapy中几个组件的关系以及一个请求是怎样从发起到结束的。Scrapy是怎么实现这样功能的呢(一个请求是如何从Schedule经过Downloader Middlewares跑到Downloader的)?本文将从源码入手分析上面这张图,欢迎各路大佬、萌新点评指正,谢谢!

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
平台声明:文章内容(如有图片或视频亦包括在内)由作者上传并发布,文章内容仅代表作者本人观点,简书系信息发布平台,仅提供信息存储服务。

推荐阅读更多精彩内容