items设计思想（目录4-10至4-12）1.在spiders里爬取目标返回值；2.把返回值传递到item里：可以利用Request（meta...

创建main函数，调试scrapy -- coding: utf-8 -- author = 'wujiee' from scrapy.cmdl...

1.首先更改虚拟环境创建的默认位置新建系统变量WORKON_HOME，值为E:\Envs（默认位置） 2.安装虚拟环境管理包virtualenv...

1.将访问过的url保存到数据库中，每次访问的时候通过数据库查询；效率低，使用少。2.将访问过的url保存到Set中，内存使用很大。3.url经...

1.特殊字符（1）^$*+?{2}{2,}{2,5}|^ 限定开头字符$ 限定结尾字符 前面字符出现任意多次（包括0次） 至少匹配1次?...

源码摘记如下： -- coding: utf-8 -- import scrapyimport refrom scrapy.http impor...

使用豆瓣源安装插件 # pip install virtualenv # 豆瓣源：https://pypi.douban.com/simple ...