Python 用pip批量安装包 requirements.txt（python查看安装的第三方扩展包）| 利用requirements.txt离线安装依赖包

文章目录

一、python用pip批量安装包
- pip freeze 为什么比 pip list 的包少几个呢？
二、[推荐]使用pipreqs 写入requirements.txt
三、利用requirements.txt离线安装依赖包
- 1. 使用 pip wheel 实现 Python 依赖包的离线安装
- 2. 下载命令
四、pip install 工作常见报错
- Python.h: No such file or directory报错

一、python用pip批量安装包

python查看安装的第三方扩展包,就是使用命令 pip freeze。

在已经配置好的一台机器上，将需要的包导出到requirements.txt

./pip freeze > requirements.txt

此种方式会将环境中所有的包都打包进去，适合单虚拟环境（每个项目都处在不同的虚拟环境里，这个环境里是这个项目所需要的所有包）。因此，如果不是Python虚拟环境Virtualenv。我们不推荐这么使用，推荐使用使用pipreqs 写入requirements.txt。

pip安装包的方式中，有如下一种安装方式：

pip install -r requirements.txt

而文件requirement.txt里面内容的格式和pip freeze的格式完全一样。因此我们可以将pip freeze的内容输出至requirements.txt。

推荐如下使用方式

./pip freeze | tee requirements.txt # 输出本地包环境至文件
./pip install -r requirements.txt # 根据文件进行包安装

pip freeze 为什么比 pip list 的包少几个呢？

因为pip , wheel , setuptools 等包，是自带的而无法(un)install的。考虑到pip freeze的用途，所以这些包并没有显示。

ps：
如果一定要用pip freeze来显示所有包，可以加上参数-all，即pip freeze -all

二、[推荐]使用pipreqs 写入requirements.txt

使用pipreqs 写入requirements.txt，只是程序中所用到的包，并不是电脑中安装的所有的包。

pip install pipreqs

cd 到程序所在的文件夹位置
执行下面的语句，Windows下得加encoding=utf8，不然会出现编码问题。

pipreqs ./ --encoding=utf8

三、利用requirements.txt离线安装依赖包

下载离线的包到指定目录
将requirements.txt中导入的包离线下载到 package_tmp_dir 文件夹

pip wheel -w package_tmp_dir -r requirements.txt
pip download -d package_tmp_dir -r requirements.txt

安装离线的包

pip install --no-index --find-links=package_tmp_dir  -r requirements.txt

1. 使用 pip wheel 实现 Python 依赖包的离线安装

Wheel 也是一种 built 包，而且是官方推荐的打包方式。也许你曾经遇见或使用过 egg 包，但现在 wheel 是官方推荐的打包方式（https://wheel.readthedocs.io/en/stable/）。
wheel 包的优点：
1.更快地安装纯 Python 和本机 C 扩展包。
2.避免安装时执行任意代码。（避免 setup.py）
3.在 Windows 或 macOS 上安装 C 扩展不需要编译器。
4.为测试和持续集成提供更好的缓存。
5.创建 .pyc 文件作为安装的一部分，以确保它们与使用的 Python 解释器匹配。
6.跨平台和机器的更一致的安装。

没有网络连接, 借助 wheel把整个 Python 应用做成离线安装包。

安装 wheel:

pip install wheel

下载依赖包的 wheel 文件

pip wheel -r requirements.txt

默认情况下, 上述命令会下载 requirements.txt 中每个包的 wheel 包到当前目录的 wheelhouse 文件夹, 包括依赖的依赖。

在你的安装脚本中执行:

pip install --use-wheel --no-index --find-links=wheelhouse -r requirements.txt

2. 下载命令

一、对于单个包的安装
1、离线
(1)pip离线下载
pip download 你的包名 -d “下载的路径(windows下双引号来表示文件夹)”

pip download pymysql -d "D:\pipDownloadTest"

(2)pip 离线安装
pip install 包路径

pip install PyMySQL-0.9.3-py2.py3-none-any.whl

2、在线

pip install pymysql

二、对于多个包的安装与下载
1、离线
离线下载

pip download -d packages -r requirements.txt

离线安装

pip install --no-index --find-links=packages -r requirements.txt

2、在线

pip install -r requirements.txt

总结：多个包下载就多了一个 -r requirements.txt。

四、pip install 工作常见报错

Python.h: No such file or directory报错

centos7 pip3 安装psycopg2出错

参考URL: https://www.jianshu.com/p/fbbe3bdf1905
原因是：

As mentioned in psycopg documentation http://initd.org/psycopg/docs/install.html

C compiler
Python header files

没有安装python的环境：
For apt (Ubuntu, Debian…):

sudo apt-get install python-dev # for python2.x installs
sudo apt-get install python3-dev # for python3.x installs
For yum (CentOS, RHEL…):

sudo yum install python-devel # for python2.x installs
sudo yum install python3-devel # for python3.x installs