240 发简信
IP属地:广东
  • 安装mysqlclient遇到的问题:ld: library not found for -lssl

    最近换了mac自带的python2.7,升级为3.6.2,在安装mysqlclient的时候报错:ld: library not found f...

  • Scrapy数据流转分析(三)

    上一篇文章简单介绍了下Scrapy的启动,我们知道了scrapy.crawler.CrawlerProcess这个类是启动爬虫的幕后黑手。本文将...

  • Scrapy数据流转分析(二)

    这篇文章将简单介绍一下Scrapy的启动过程。Scrapy是如何启动的?在Scrapy的Tutorial中使用了这样几行代码来启动爬虫: 这里看...

  • Resize,w 360,h 240
    Scrapy数据流转分析(一)

    很多scrapy初学者经常在其他博客看到这张图: 这张图很清晰的展示了Scrapy中几个组件的关系以及一个请求是怎样从发起到结束的。Scrapy...