python中安装Scrapy模块依赖包汇总

本文整理自网络，侵删。

本地虚拟环境开发完成之后，上线过程中需要一一安装依赖包，做个记录如下：

CentOS 安装python3.5.3

wget https://www.python.org/ftp/python/3.5.3/Python-3.5.3.tgz
tar -xf Python-3.5.3.tgz cd Python-3.5.3
./configure --prefix=/usr/local/python353 make & make install

完成安装python3.5.3，在不删除系统自带的python2.x情况下，做几个软链：

#做python3软链
ln -s /usr/local/python353/bin/python3 /usr/local/bin/
#pip3软链
ln -s /usr/local/python353/bin/pip3 /usr/local/bin/

上传程序，安装scrapy及其依赖包：

#user agent包
pip3 install fake-useragent -i https://pypi.douban.com/simple/
#pymysql包
pip3 install pymysql -i https://pypi.douban.com/simple/
#PooledDB依赖包
pip3 install DBUtils -i https://pypi.douban.com/simple/
#PIL模块依赖包
pip3 install Image -i https://pypi.douban.com/simple/

在Centos系统中安装过程中，出现一个较为淡疼的问题：系统没有安装sqlite3，故此一直提示：
解决上面问题，下载sqlite3

sudo wget http://www.sqlite.org/2017/sqlite-autoconf-3190300.tar.gz

编译安装：

tar zxvf sqlite-autoconf-3190300.tar.gz cd sqlite-autoconf-3190300
./configure --prefix=/usr/local/sqlite3
make && make install

重新编译Python，找到Python3.5.3的安装文件路径，编辑setup.py脚本，找到 “sqlite3”

sqlite_inc_paths = [ '/usr/include',
'/usr/include/sqlite',
'/usr/include/sqlite3',
'/usr/local/include',
'/usr/local/include/sqlite',
'/usr/local/include/sqlite3',
]

在最后一行加入sqlite3编译安装路径，如下：

sqlite_inc_paths = [ '/usr/include',
'/usr/include/sqlite',
'/usr/include/sqlite3',
'/usr/local/include',
'/usr/local/include/sqlite',
'/usr/local/include/sqlite3',
'/usr/local/sqlite3',
]

重新编译Python3.5.3:

./configure --prefix=/usr/local/python353
make && make install

标签：SQLite

相关阅读 >>

android 数据存储方式有哪几种

android开发笔记之 数据存储方式详解

python实现读取txt文件数据并存进内置数据库Sqlite3的方法

简单分析Sqlite4的一些设计改变

将txt文本内容导入Sqlite的方法

android开发之Sqlite的使用方法

Sqlite3 api 编程手册

Sqlitestudio优雅调试android手机数据库Sqlite（推荐）

Sqlite数据库常用语句及mac上的Sqlite可视化工具meassqllite使用方法

navicat for Sqlite导入csv中文数据的方法

更多相关阅读请进入《Sqlite》频道 >>

书籍

数据库系统概念 第6版

￥41.1元   机械工业出版社

本书主要讲述了数据模型、基于对象的数据库和XML、数据存储和查询、事务管理、体系结构等方面的内容。

转载请注明出处：木庄网络博客 » python中安装Scrapy模块依赖包汇总