首先通过virtualenv 建立虚拟环境
cd /var/virtualenvs
virtualenv scrapy_venv
source scrapy_venv/bin/activate
scrapy需要lxml和openssl支持
我们进入python3的虚拟环境后,需要首先
pip install lxml
pip install pyOpenSSL
系统自身是安装有openssl的,如果不行可能需要
apt-get update
apt-get install openssl
apt-get install python-dev libffi-dev libssl-dev
pip install pyOpenSSL
来尝试更新一下..
完成后进入python,
输入
import lxml
import OpenSSL
看看是否引用正常,是的话就继续
pip install scrapy
一般就能正常安装完成了。