python scrapy 在centos下安装

因为CentOS默认是python2
安装装python3的环境

yum install -y gcc,zlib*,openssl*

一，下载：[wget https://www.python.org/ftp/python/3.6.0/Python-3.6.0.tgz](https://www.python.org/ftp/python/3.6.0/Python-3.6.0.tgz)
二，解压压缩包
 tar -xf python3.6.1.tar
三、创建安装文件的路径。
mkdir /usr/local/python3
四、编译。
./configure --prefix=/usr/local/python3
五、安装。
make && make install
六、创建新版本的软连接。
1、修改旧版本
mv /usr/bin/python /usr/bin/python_bak
2、创建新的软连接
ln -s /usr/local/python3/bin/python3 /usr/bin/python
3、检查python的版本
python -V
python-3.6.0

至此python3安装完毕，我们开始安装scrapy

  下载：wget https://twistedmatrix.com/Releases/Twisted/17.1/Twisted-17.1.0.tar.bz2
  解压：tar -jxvf Twisted-17.1.0.tar.bz2  
  cd Twisted-17.1.0  
  python3 setup.py install
  安装 scrapy
  pip3.6 install scrapy

安装 scrapy-redis

pip3.6 install scrapy-redis

一点点安装心得，希望对你有所帮助