【Linux】非root安装Python3及其包管理
阅读原文时间:2023年07月10日阅读:1

源码安装常规操作:

wget -c https://www.python.org/ftp/python/3.8.1/Python-3.8.1.tgz
tar -xvf Python-3.8.1.tgz
mkdir -p /my/python/
cd Python-3.8.1
./configure --prefix="/my/python/"
make
make install

make后没报错,但出现了如下提示:

Could not build the ssl module!
Python requires an OpenSSL 1.0.2 or 1.1 compatible libssl with X509_VERIFY_PARAM_set1_host().
LibreSSL 2.6.4 and earlier do not provide the necessary APIs, https://github.com/libressl-portable/portable/issues/381

下载libssl(替代openssl)

https://ftp.openbsd.org/pub/OpenBSD/LibreSSL/

源码编译安装成功。我想指定libssl来编译python3,做了如下尝试:

export LDFLAGS=" -L/zfssz3/SP_MSI/USER/pengjianxiang/software/INSTALL/LibreSSL23/lib"
export CPPFLAGS=" -I/zfssz3/SP_MSI/USER/pengjianxiang/software/INSTALL/LibreSSL23/include"
export PKG_CONFIG_PATH="/zfssz3/SP_MSI/USER/pengjianxiang/software/INSTALL/LibreSSL23/lib/pkgconfig"

然后加参数试试。

./configure –prefix=/my/python –enable-shared CFLAGS=-fPIC #提示没这个参数
./configure –prefix=/my/python --with-openssl=/my/libssl/path #编译报错

看一些教程,修改Modules/Setup文件,把这些行取消注释。

#SSL=/usr/local/ssl  #改为我安装的ssl路径,尝试了也没用
#_ssl _ssl.c \
#       -DUSE_SSL -I$(SSL)/include -I$(SSL)/include/openssl \
#       -L$(SSL)/lib -lssl -lcrypto

以上方法都不行。

最后干脆忽略make提示的这一句,反正它又不是error,直接安装。装成功了。

Python 3.8.1 (default, Feb 12 2020, 13:03:12)
[GCC 4.9.3] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>> print("hello python3")
hello python3
>>>

但是这个SSL的问题在后续会显现。有答案(https://www.cnblogs.com/zhangweiyi/p/10614658.html)说安装python时,应该加这么个参数,否则后续有很多包安装不上:

./configure --prefix=/my/path/python38 --with-ssl # pip3会用到ssl模块,没有指定的话后续该功能不能使用

将python3加入环境变量

系统中我还有个python2.7在用,也加入了环境变量。为了使用的时候能区分版本,加入的时候要注意名字的差异。

python2的bin目录如下,可知用python/python2以及pip/pip2均可:

成功安装后的python3的bin目录如下,可以用python3/python3.8以及pip3/pip3.8。

如果安装的python3和python2有重名的话,最好是重命名一下区分后再加入环境中。这里因为我安装后的名字本来就有区分,就可直接加入环境变量了。

环境变量在bash_profile或bashrc中设置都可以,我习惯了bashrc了:

vim ~/.bashrc
# python3/pip3 环境变量
export PATH=/my/path/Python38/bin:$PATH
source ~/.bashrc

查看下是否可以:

which python
>>>/my/path/Python-2.7.15/bin/python
which python2
>>>/my/path/Python-2.7.15/bin/python2
which pip
>>>/my/path/Python-2.7.15/bin/pip
which pip2
>>>/my/path/Python-2.7.15/bin/pip2

which python3
>>>/my/path/Python38/bin/python3
which pip3
>>>/my/path/Python38/bin/pip3

所以若要用python2时,使用python或python2;若用python3时,使用python3即可。

包的路径设置

除了python要设置外,python包的位置也需要定义,不同版本无法相互安装,容易发生冲突。

export PYTHONPATH=/my/path/Python38/lib/python3.8/site-packages

site-packages是python默认安装包的位置,可查看已安装哪些包。也可用pip3 list查看安装包列表。

包的安装

设置python3的包路径之后,有些包如果直接用pip3 install安装也会出现问题。

建议用某一个版本安装包时,最好是在.bashrc将另一个版本的python和pythonpath注释掉,以免冲突。安装完成或者需要互换时再切换回来。

pip3 install numpy


ERROR: Could not find a version that satisfies the requirement numpy (from versions: none)
ERROR: No matching distribution found for numpy
WARNING: pip is configured with locations that require TLS/SSL, however the ssl module in Python is not available.

这很有可能是网络的问题,需要使用国内的镜像源来加速,比如豆瓣源。

pip3 install numpy -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com

总之,安装包首先需要联网,如果安装失败,多种方法都可以尝试下,包括加国内镜像源,或者换镜像源:

pip3 install numpy
pip3 install numpy -i http://pypi.douban.com/simple
pip3 install numpy -i http://pypi.douban.com/simple/ --trusted-host pypi.douban.com
pip3 install numpy -i https://pypi.tuna.tsinghua.edu.cn/simple

国内的镜像源有:

清华:https://pypi.tuna.tsinghua.edu.cn/simple

阿里云:http://mirrors.aliyun.com/pypi/simple/

中国科技大学 https://pypi.mirrors.ustc.edu.cn/simple/

华中理工大学:http://pypi.hustunique.com/

山东理工大学:http://pypi.sdutlinux.org/

豆瓣:http://pypi.douban.com/simple/

如果觉得每次安装包都需要加镜像源很麻烦,也可进行一次性永久性修改,在~/.pip/pip.conf (没有就创建一个文件夹及文件。文件夹要加“.”,表示是隐藏文件夹)中添加内容:

[global]
index-url = https://pypi.tuna.tsinghua.edu.cn/simple
[install]
trusted-host=mirrors.aliyun.com

但不建议这么做,因为我觉得各个镜像源的包都不是很全,安装时可以互相补充。很多包其实用默认的反而能安装成功。

如果不确定包名(python2可能与python3有出入),可用pip search package来查看,再安装功能相同的包。比如smtplib模块(发送邮件),如果直接用install是安装不上的:

$ pip3 install smtplib
ERROR: Could not find a version that satisfies the requirement smtplib (from versions: none)
ERROR: No matching distribution found for smtplib

pip3 search smtplib后,可以看到这么多功能类似的包。这里我们安装PyEmail

就可以直接导入smtplib模块了。

Python 3.8.1 (default, Feb 13 2020, 10:49:45)
[GCC 4.9.3] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>> import OptionParser
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
ModuleNotFoundError: No module named 'OptionParser'
>>> import smtplib
>>> exit()

同样地,如果直接安装MIMEMultipart包会失败,search一下。

安装这个包后,可导入我们之前用的许多python2模块了。

Python 3.8.1 (default, Feb 13 2020, 10:49:45)
[GCC 4.9.3] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>> import email.mime.multipart
>>> from optparse import OptionParser
>>> from email.mime.multipart import MIMEMultipart
>>> from email.mime.text import MIMEText

导入包

安装好的包导入试试:


问题

很多包装不上,报如下错:

WARNING: Retrying (Retry(total=0, connect=None, read=None, redirect=None, status=None)) after connection broken by 'SSLError("Can't connect to HTTPS URL because the SSL module is not available.")': /simple/optionparser/
  Could not fetch URL https://pypi.mirrors.ustc.edu.cn/simple/optionparser/: There was a problem confirming the ssl certificate: HTTPSConnectionPool(host='pypi.mirrors.ustc.edu.cn', port=443): Max retries exceeded with url: /simple/optionparser/ (Caused by SSLError("Can't connect to HTTPS URL because the SSL module is not available.")) - skipping
  ERROR: Could not find a version that satisfies the requirement optionparser (from versions: none)
ERROR: No matching distribution found for optionparser
WARNING: You are using pip version 19.2.3, however version 20.0.2 is available.
You should consider upgrading via the 'pip install --upgrade pip' command.

简单说就是Can't connect to HTTPS URL because the SSL module is not available,这是因为安装python时未能安装ssl的遗留问题(上面那个答案说加--with-ssl选项,然而并没有这个选项)。python3的ssl模块(ssl用来采集https后缀的链接)必须用openssl并且版本必须大于等于1.02或者libressl2.64(不含)以后的版本,而默认linux的是1.01。有回答说openssl貌似有漏洞,建议用libressl来替代。

系统自带的openssl版本与python3的版本不匹配,所以这里只要安装libressl就可以解决问题。网上教程都是有root权限修改配置文件,再建立硬链接,但我因为没有root权限,还是比较麻烦的。

下一篇(Linux非root安装Python3以及解决SSL问题)将通过升级openssl,并重新编译python3来彻底解决这个问题。

Ref: https://blog.csdn.net/love_cjiajia/article/details/82254371

https://www.cnblogs.com/Caiyundo/p/9469711.html

https://blog.csdn.net/qq_38486203/article/details/88864506

https://www.cnblogs.com/lijinze-tsinghua/p/8666558.html

https://www.cnblogs.com/songzhixue/p/11296720.html

https://www.cnblogs.com/mengzhilva/p/11059329.html