【问题标题】:How to make setuptools install a wheel containing multiple packages?如何让 setuptools 安装一个包含多个包的轮子?
【发布时间】:2019-05-04 18:34:44
【问题描述】:

假设这个轮子:

M Filemode      Length  Date         Time      File
- ----------  --------  -----------  --------  -------------------------------------------
  -rw-rw-r--      1358  26-Sep-2018  21:08:40  azure/common/__init__.py
  -rw-rw-r--       327  26-Sep-2018  21:08:40  azure/common/_version.py
  -rw-rw-r--      8737  26-Sep-2018  21:08:40  azure/common/client_factory.py
  -rw-rw-r--       755  26-Sep-2018  21:08:40  azure/common/cloud.py
  -rw-rw-r--      2479  26-Sep-2018  21:08:40  azure/common/credentials.py
  -rw-rw-r--       805  26-Sep-2018  21:08:40  azure/common/exceptions.py
  -rw-rw-r--      6079  26-Sep-2018  21:08:40  azure/profiles/__init__.py
  -rw-rw-r--      3943  26-Sep-2018  21:08:40  azure/profiles/multiapiclient.py
  -rw-rw-r--         6  26-Sep-2018  21:21:54  azure_common-1.1.16.dist-info/top_level.txt
  -rw-rw-r--       110  26-Sep-2018  21:21:54  azure_common-1.1.16.dist-info/WHEEL
  -rw-rw-r--      3805  26-Sep-2018  21:21:54  azure_common-1.1.16.dist-info/METADATA
  -rw-rw-r--       997  26-Sep-2018  21:21:54  azure_common-1.1.16.dist-info/RECORD
- ----------  --------  -----------  --------  -------------------------------------------
                 29401                         12 files

里面有三个不同的包:

  • azure.common
  • azure.profiles
  • azure_common

所有伟大的名字和伟大的布局。此外,许多伟大的思想毫无疑问地投入到了现代软件工程这一奇迹的工程中。

此轮子以名称azure-common 分发。所以,当你像这样依赖 setup.py 时:

setup(
    ...
    install_requires=['azure-common'],
    ...
)

您只会安装azure_common 包。可能是。我真的不知道,似乎是这样,但我尝试过几次似乎只安装了azure.common,或者我可能只是目不转睛地盯着它……很难遵循 setuptools 对包所做的所有操作。

因此问题是:如何强制setuptools 安装在这种轮子中找到的所有软件包?此外,顺序很重要,因为有时需要将这些垃圾与其他软件包一起安装,这些软件包也提供azure.something 软件包,这些软件包可能会覆盖azure 目录中的内容。所以,理想情况下,我还想控制 install_requires 依赖项的处理顺序。


这是开始的地方:How to specify bracket dependencies in setup.py?

【问题讨论】:

    标签: python azure setuptools


    【解决方案1】:

    当您通过setup.py 和install_requires=['azure-common'] 安装依赖项时,听起来像azure.common 这样的子目录很少安装到您的环境中。我试图重现此问题,但未能安装此包中的所有文件。

    下面是我在本地Windows机器上的步骤,大家可以参考一下。

    1. 创建目录mkdir setuptmp,创建虚拟环境virtualenv setuptmp,然后到cd setuptmp。
    2. 创建一个setup.py 文件,内容如下。\

      from setuptools import setup, find_packages  
      
      setup(
          name = "setuptmp",
          install_requires = ['azure-common']
      )
      
    3. 通过Scripts\activate.bat激活虚拟环境。

    4. 运行python setup.py install 以安装我的setup.py 中描述的依赖项。
    5. 运行python打开REPL解释器来测试你说的所有包,

      (setuptmp) D:\projects\setuptmp>python
      Python 3.7.1 (v3.7.1:260ec2c36a, Oct 20 2018, 14:57:15) [MSC v.1915 64 bit (AMD64)] on win32
      Type "help", "copyright", "credits" or "license" for more information.
      >>> import azure.common
      >>> import azure.profiles
      >>> azure.common.__file__
      'D:\\projects\\setuptmp\\lib\\site-packages\\azure_common-1.1.16-py3.7.egg\\azure\\common\\__init__.py'
      >>> azure.profiles.__file__
      'D:\\projects\\setuptmp\\lib\\site-packages\\azure_common-1.1.16-py3.7.egg\\azure\\profiles\\__init__.py'
      >>> import azure_common
      Traceback (most recent call last):
        File "<stdin>", line 1, in <module>
      ModuleNotFoundError: No module named 'azure_common'
      

    注意:azure_common 不是一个模块,只是一个鸡蛋信息目录。

    1. 通过cd Lib\site-packages、dir和tree azure_common-1.1.16-py3.7.egg /F检查安装在我的环境中的软件包,如下所示。

      (setuptmp) D:\projects\setuptmp\Lib\site-packages>dir
       Volume in drive D is Data
       Volume Serial Number is BA4B-64AA
      
       Directory of D:\projects\setuptmp\Lib\site-packages
      
      2018/12/26  14:48    <DIR>          .
      2018/12/26  14:48    <DIR>          ..
      2018/12/26  14:48    <DIR>          azure_common-1.1.16-py3.7.egg
      2018/12/26  14:48                61 easy-install.pth
      2018/12/26  14:46               126 easy_install.py
      2018/12/26  14:46    <DIR>          pip
      2018/12/26  14:46    <DIR>          pip-18.1.dist-info
      2018/12/26  14:46    <DIR>          pkg_resources
      2018/12/26  14:48               965 setuptmp-0.0.0-py3.7.egg
      2018/12/26  14:46    <DIR>          setuptools
      2018/12/26  14:46    <DIR>          setuptools-40.6.3.dist-info
      2018/12/26  14:46    <DIR>          wheel
      2018/12/26  14:46    <DIR>          wheel-0.32.3.dist-info
      2018/12/26  14:46    <DIR>          __pycache__
                     3 File(s)          1,152 bytes
                    11 Dir(s)  80,896,319,488 bytes free
      
      (setuptmp) D:\projects\setuptmp\Lib\site-packages>tree azure_common-1.1.16-py3.7.egg /F
      Folder PATH listing for volume Data
      Volume serial number is BA4B-64AA
      D:\PROJECTS\SETUPTMP\LIB\SITE-PACKAGES\AZURE_COMMON-1.1.16-PY3.7.EGG
      ├─azure
      │  ├─common
      │  │  │  client_factory.py
      │  │  │  cloud.py
      │  │  │  credentials.py
      │  │  │  exceptions.py
      │  │  │  _version.py
      │  │  │  __init__.py
      │  │  │
      │  │  └─__pycache__
      │  │          _version.cpython-37.pyc
      │  │          __init__.cpython-37.pyc
      │  │
      │  └─profiles
      │          multiapiclient.py
      │          __init__.py
      │
      └─EGG-INFO
              PKG-INFO
              RECORD
              requires.txt
              top_level.txt
              WHEEL
      
    2. 上面与从Pypi网站link下载的azure-common包的文件结构比较。我使用7-Zip将azure_common-1.1.16-py2.py3-none-any.whl文件解压到一个临时目录并tree它。

      D:\tmp>tree azure_common-1.1.16-py2.py3-none-any /F
      Folder PATH listing for volume Data
      Volume serial number is BA4B-64AA
      D:\tmp\AZURE_COMMON-1.1.16-PY2.PY3-NONE-ANY
      ├─azure
      │  ├─common
      │  │      client_factory.py
      │  │      cloud.py
      │  │      credentials.py
      │  │      exceptions.py
      │  │      _version.py
      │  │      __init__.py
      │  │
      │  └─profiles
      │          multiapiclient.py
      │          __init__.py
      │
      └─azure_common-1.1.16.dist-info
              METADATA
              RECORD
              top_level.txt
              WHEEL
      

    然后你会发现步骤6和7的文件结构几乎一样。

    希望对您有所帮助。如果您有任何疑问,请随时告诉我。


    我在 Linux 上做了同样的事情,得到了同样的结果。我在运行python setup.py install 之前和之后保存了我的Linux setuptmp 的tree lib/ &gt; lib_[before|after].txt 的输出,然后使用diff lib_*.txt 进行比较,如下所示。

    (setuptmp) peter@peterpc:~/setuptmp$ diff lib*.txt
    92a93,111
    >     │   ├── azure_common-1.1.16-py3.6.egg
    >     │   │   ├── EGG-INFO
    >     │   │   │   ├── PKG-INFO
    >     │   │   │   ├── RECORD
    >     │   │   │   ├── WHEEL
    >     │   │   │   ├── requires.txt
    >     │   │   │   └── top_level.txt
    >     │   │   └── azure
    >     │   │       ├── common
    >     │   │       │   ├── __init__.py
    >     │   │       │   ├── _version.py
    >     │   │       │   ├── client_factory.py
    >     │   │       │   ├── cloud.py
    >     │   │       │   ├── credentials.py
    >     │   │       │   └── exceptions.py
    >     │   │       └── profiles
    >     │   │           ├── __init__.py
    >     │   │           └── multiapiclient.py
    >     │   ├── easy-install.pth
    827a847
    >     │   ├── setuptmp-0.0.0-py3.6.egg
    1043c1063
    < 118 directories, 922 files
    ---
    > 123 directories, 937 files
    

    【讨论】:

    • 哦,来吧...谁在乎它是否适用于 Windows?您正在使用完全不同的安装程序安装一个完全不同的软件包:/
    • @wvxvw 嗨,我在 Linux 上做了同样的事情,得到了同样的结果。我不明白你所说的a different package using different installer 是什么意思。
    • 当你在 Windows 上安装时,你会得到不同的包(轮子区分平台,你可以将几乎不相关的东西塞进不同平台的包中)。同样,setuptools 在 Windows 上所做的任何事情都与它在 Linux 上所做的事情不太相关。在两个平台上定位各种目录会导致不同且不一致的结果。但是,如果它以某种方式对您有用,那么您使用的是哪个版本的 setuptools?什么Linux?你安装了哪个版本的azure-common?因为,很明显,它不会为我安装任何组合的上述软件包。
    猜你喜欢
    • 1970-01-01
    • 2011-03-29
    • 2023-03-26
    • 2013-04-04
    • 2016-06-24
    • 1970-01-01
    • 2015-05-16
    • 2016-06-08
    • 2021-04-24
    相关资源
    最近更新 更多