ubuntuscrapy开发环境搭建

1.更新系统

　　 ##如果系统没有换国内下载路径需要换下系统的更新下载路径　　

　　sudo apt-get update 更新系统

　　sudo apt-get upgrade

2.安装pip scrapy的一些包需要用pip命令来安装

1. sudo apt-get install python-pip 安装命令

2. pip -V 这是查看pip版本信息命令

3.安装srapy相关依赖

　　1.sudo apt-get install python-dev python-pip libxml2-dev libxslt1-dev zlib1g-dev libffi-dev libssl-dev

　　2.如果python3环境上也想安装scrapy 那么需要执行下面命令

　　　　sudo apt-get install python3 python3-dev

4.安装scrapy

　　sudo pip install scrapy

scrapy环境安装完成

检查scrapy是否安装成功 在控制台输入：scrapy

如果有提示相应版本信息就成功了 不需要看下面

在安装scrapy过程中，可能会出现OP_NO_TLSv1_1,一般是twisted版本高于，

1.最简单的方法是卸载twisted，然后重新安装较低版本的，sudo pip install twisted==16.04(这里16.04是我们现在用的)

2/还有一种方法，但是没有实验，就是删除pyopenssl再次运行sudo pip install scrapy