猫先生头条

解决conda环境包冲突问题

2024-10-16 13:38 由 论语 发表于 #后端开发

当我们将一个包安装到我们指定的虚拟环境中时，我们可能会发现它们会被安装到同一个目录中，并且不同版本的这些包之间会存在冲突。此外，我们可能会获取到不属于我们创建的环境的包信息。
首先，我们需要知道，如果USER_SITE存在，所有的包都会被安装在其中，这就是为什么会导致版本冲突的原因。
要解决这个问题，首先我们需要使用下面的命令来查看是否存在可能导致冲突的目录。

python -m site

然后我们会看到下面的输出:

sys.path = [
    '/home/lunyu',
    '/home/lunyu/miniconda3/envs/test/lib/python310.zip',
    '/home/lunyu/miniconda3/envs/test/lib/python3.10',
    '/home/lunyu/miniconda3/envs/test/lib/python3.10/lib-dynload',
    '/home/lunyu/miniconda3/envs/test/lib/python3.10/site-packages',
]
USER_BASE: '/home/lunyu/.local' (doesn't exist)
USER_SITE: '/home/lunyu/.local/lib/python3.10/site-packages' (doesn't exist)
ENABLE_USER_SITE: True

如果我们看到这样的结果:

  • USER_BASE和USER_SITE都不存在。

  • ENABLE_USER_SITE等于True。

    我们不禁用ENABLE_USER_SITE, 否则会出现莫名奇妙的问题。

  • sys.path中没有USER_SITE对应的路径。

那么这个的环境满足我们的需求，即这个环境的包都会被独立安装。
如果我们有USER_BASE或USER_SITE存在，我们应该删除它们。

rm -rf /home/lunyu/.local

rm -rf /home/lunyu/.local/lib/python3.10/site-packages

QA

ERROR: Could not install packages due to an OSError: [Errno 13] Permission denied: '/usr/local/lib/python3.10'

问题复现：

在我们设置并sourceexport PYTHONNOUSERSITE=1来禁用ENABLE_USER_SITE并获取如下的站点信息后:

sys.path = [
    '/home/lunyu',
    '/home/lunyu/miniconda3/envs/test/lib/python310.zip',
    '/home/lunyu/miniconda3/envs/test/lib/python3.10',
    '/home/lunyu/miniconda3/envs/test/lib/python3.10/lib-dynload',
    '/home/lunyu/miniconda3/envs/test/lib/python3.10/site-packages',
]
USER_BASE: '/home/lunyu/.local' (exists)
USER_SITE: '/home/lunyu/.local/lib/python3.10/site-packages' (doesn't exist)
ENABLE_USER_SITE: False

当我们任意安装一个包（例如wget）时:

pip install wget

我们得到如下的错误信息:

ERROR: Could not install packages due to an OSError: [Errno 13] Permission denied: '/usr/local/lib/python3.10'
Consider using the --user option or check the permissions.

问题解决：

如果我们按照它告诉我们的命令运行:

pip install wget --user

它可以成功安装wget，但 我们会遇到另一个问题，即当我们想要检查安装情况时，我们什么也得不到。

pip show wget

输出结果是:

WARNING: Package(s) not found: wget

情况变得更糟了，我们知道包被安装在某个地方(可能是/usr/local/lib/python3.10，我们不确定具体位置)，但我们无法获取该包的信息。

要解决这个问题，我们需要：

  • 启用ENABLE_USER_SITE，将其设置为True:

    设置并source export PYTHONNOUSERSITE=0。

  • 删除USER_BASE，使其不存在。

  • 重新启动终端以确保所有设置都已应用。