【问题标题】:ModuleNotFoundError after packaging using setuptools in Python 3.6在 Python 3.6 中使用 setuptools 打包后的 ModuleNotFoundError
【发布时间】:2018-08-03 18:41:29
【问题描述】:

我正在尝试使用 setuptools 从 Python3.6 应用程序生成一个包。虽然打包终止时没有错误,但 setuptools 生成的命令行程序无法导入包中的模块。 以下是我的项目的目录树。

.
├── MANIFEST.in
├── README.md
├── README.rst
├── contributors.txt
├── setup.cfg
├── setup.py
├── sonicparanoid
│   ├── __init__.py
│   ├── __pycache__
│   │   ├── __init__.cpython-36.pyc
│   │   ├── inpyranoid.cpython-36.pyc
│   │   ├── length_difference_filter.cpython-36.pyc
│   │   ├── ortholog_detection.cpython-36.pyc
│   │   ├── reads_stats.cpython-36.pyc
│   │   ├── seq_tools.cpython-36.pyc
│   │   ├── sonicparanoid.cpython-36.pyc
│   │   ├── sys_tools.cpython-36.pyc
│   │   └── workers.cpython-36.pyc
│   ├── bin
│   │   └── mmseqs
│   ├── blast_tools.py
│   ├── compile_inpyranoid_c.py
│   ├── compile_mmseqs_parser_c.py
│   ├── config.json
│   ├── example
│   │   ├── test_input
│   │   │   ├── chlamydia_trachomatis
│   │   │   ├── deinococcus_radiodurans
│   │   │   ├── gloeobacter_violaceus
│   │   │   └── thermotoga_maritima
│   │   └── test_output
│   │       └── README.txt
│   ├── inpyranoid.py
│   ├── inpyranoid_c.c
│   ├── inpyranoid_c.cpython-36m-darwin.so
│   ├── inpyranoid_c.pyx
│   ├── length_difference_filter.py
│   ├── mmseqs2_src
│   │   ├── README.txt
│   │   └── mmseqs.tar.gz
│   ├── mmseqs_parser_c.c
│   ├── mmseqs_parser_c.cpython-36m-darwin.so
│   ├── mmseqs_parser_c.pyx
│   ├── mmseqs_parser_cython.py
│   ├── ortholog_detection.py
│   ├── quick_multi_paranoid
│   │   ├── Makefile
│   │   ├── Makefile.in
│   │   ├── config
│   │   ├── dump.cpp
│   │   ├── gen_header.cpp
│   │   ├── hashtable.c
│   │   ├── hashtable.h
│   │   ├── hashtable.o
│   │   ├── hashtable_itr.c
│   │   ├── hashtable_itr.h
│   │   ├── hashtable_private.h
│   │   ├── ortholog.c
│   │   ├── qa.h
│   │   ├── qa1
│   │   ├── qa1.cpp
│   │   ├── qa2
│   │   ├── qa2.cpp
│   │   ├── qp
│   │   ├── qp.c
│   │   └── qps.c
│   ├── reads_stats.py
│   ├── seq_tools.py
│   ├── setup_sonicparanoid.py
│   ├── sonicparanoid.py
│   ├── sys_tools.py
│   ├── test_blast_tools.py
│   ├── test_length_difference_filter.py
│   ├── test_ortholog_detection.py
│   ├── test_reads_stats.py
│   ├── test_seq_tools.py
│   ├── test_sonicparanoid.py
│   ├── test_sys_tools.py
│   └── workers.py
└── user_manual.pdf

如果我运行python3 sonicparanoid.py,它可以正常工作,但如果我使用 setuptools 创建发行版,每当主程序 (sonicparanoid.py) 尝试导入包内的任何其他 .py 模块时,我都会收到导入错误 ( sonicparanoid) 目录。

以下是我的 setup.py:

enter code here
from setuptools import setup, find_packages
from setuptools.extension import Extension
from Cython.Build import cythonize
import numpy

extensions = [
    Extension(
        "sonicparanoid.inpyranoid_c",
        ["sonicparanoid/inpyranoid_c.pyx"],
        include_dirs=[numpy.get_include()],
    ),
    Extension(
        "sonicparanoid.mmseqs_parser_c",
        ["sonicparanoid/mmseqs_parser_c.pyx"],
        include_dirs=[numpy.get_include()],
    ),
]


from codecs import open
from os import path

here = path.abspath(path.dirname(__file__))

# Get the long description from the README file
with open(path.join(here, 'README.rst'), encoding='utf-8') as f:
    long_description = f.read()

setup(
    name='sonicparanoid',
    version='0.0.2',  # Required
    description='Whatever',
    long_description=long_description,  # Optional
    url='http://iwasakilab.bs.s.u-tokyo.ac.jp/sonicparanoid/',  # Optional
    author='Me',
    author_email='my@email.com',
    classifiers=[  # Optional
        'Development Status :: 5 - Production/Stable',
        'Environment :: Console',
        'Intended Audience :: Science/Research',
        'Topic :: Scientific/Engineering :: Bio-Informatics',
        'License :: OSI Approved :: GNU General Public License v3 (GPLv3)',
        'Programming Language :: Python :: 3.4',
        'Programming Language :: Python :: 3.5',
        'Programming Language :: Python :: 3.6',
    ],
    packages = ['sonicparanoid',], # Required
    install_requires=['numpy>=1.14.0', 'pandas>=0.22.0', 'cython>=0.27.0',     'sh>=1.12.14', 'setuptools>=24.2.0'], # specify minimum version
    python_requires='>=3.5, <3.7',
    ext_modules = cythonize(extensions, compiler_directives={'language_level': 3}),
    package_dir={'sonicparanoid': 'sonicparanoid/'},
    include_package_data=True,
    package_data={'sonicparanoid': ['example/test_output/*', 'example/test_input/*', 'mmseqs2_src/*', 'quick_multi_paranoid/*']
                },
    entry_points={  # Optional
        'console_scripts': [
            'sonicparanoid = sonicparanoid.sonicparanoid:main',
        ],
    },
)

sonicparanoid.py 中的 import 语句如下所示:

import os
import sys
import platform
import seq_tools as seqtools

如果我执行python3 sonicparanoid.py,目前一切正常,但是当我使用使用 setuptools 生成的程序时,我收到以下错误:

Traceback (most recent call last):
  File "/usr/local/bin/sonicparanoid", line 11, in <module>
    load_entry_point('sonicparanoid==0.0.2', 'console_scripts',     'sonicparanoid')()
  File "/usr/local/lib/python3.6/site-packages/pkg_resources/__init__.py", line 572, in load_entry_point
    return get_distribution(dist).load_entry_point(group, name)
  File "/usr/local/lib/python3.6/site-packages/pkg_resources/__init__.py", line 2755, in load_entry_point
    return ep.load()
  File "/usr/local/lib/python3.6/site-packages/pkg_resources/__init__.py", line 2408, in load
    return self.resolve()
  File "/usr/local/lib/python3.6/site-packages/pkg_resources/__init__.py",     line 2414, in resolve
    module = __import__(self.module_name, fromlist=['__name__'], level=0)
  File "/usr/local/lib/python3.6/site-packages/sonicparanoid-0.0.2-py3.6-    macosx-10.13-x86_64.egg/sonicparanoid/sonicparanoid.py", line 5, in <module>
    import seq_tools as seqtools
ModuleNotFoundError: No module named 'seq_tools'

我已尝试使用question 中提出的解决方案, 但是如果我更改导入,例如from sonicparanoid import seq_tools as seqtools 并运行python3 sonicparanoid.py,我会收到导入错误ImportError: cannot import name 'seq_tools'

任何帮助将不胜感激,这是我第一次尝试包装,非常令人沮丧。

【问题讨论】:

    标签: python python-3.x setuptools


    【解决方案1】:

    Python 使用sys.path 查找模块/包,并将脚本目录添加到sys.path 的开头。考虑到这一点,让我来看看导入的细节。

    当您运行python sonicparanoid/sonicparanoid.py 时,Python 会将目录sonicparanoid/ 添加到sys.path。现在当目录在sys.path 中时,脚本可以直接导入seq_tools,因为模块seq_tools.pysys.path 中的目录中。

    当您安装包并运行生成的入口点sonicparanoid 时,目录sonicparanoid/ 不在sys.path 中(但它的父目录在)并且Python 无法导入seq_tools。您必须将其导入为sonicparanoid.seq_tools。但这意味着当您将sonicparanoid.py 作为脚本运行时,您无法从sonicparanoid.py 导入它!

    底线:不要将sonicparanoid.py 作为脚本运行,因为sys.path 与运行入口点导入sonicparanoid 包的差别太大。

    此外,您的脚本不得与 Python 包命名相同。当你有一个包sonicparanoid 和一个脚本sonicparanoid.py 并且脚本尝试import sonicparanoid 时——Python 尝试从脚本中导入(因为它是sys.path 中的第一个)而不是包并且失败了。

    您可以将脚本命名为sonicparanoid(没有.py 扩展名,Python 不会尝试从中导入)或sonic_paranoid.py,但不能命名为sonicparanoid.py

    【讨论】:

    • 你好@phd,谢谢。我已按照您的建议重命名了主脚本 sonic_paranoid.py,现在错误不同了。它现在似乎与我更改为“sonicparanoid = sonicparanoid.sonic_paranoid:main”的 entry_point 有关。现在看来,它似乎根本找不到该脚本并退出并出现错误“ModuleNotFoundError:没有名为“sonicparanoid.sonic_paranoid”的模块。在这一点上,我真的很困惑。请注意,我没有更改导入并且仍然如问题中所述。
    • ModuleNotFoundError: 没有名为“sonicparanoid.sonic_paranoid”的模块。我已将 entry_point 更改为 'sonicparanoid = sonicparanoid.sonic_paranoid:main'。
    • 您似乎重命名了sonicparanoid.py,但没有重新安装软件包,所以安装时它仍然是sonicparanoid/sonicparanoid.py。是吗?
    • 你好@phd,非常感谢。似乎错误消失了。我可以用'from package import module_name as new_name'替换所有导入。非常棘手,对我来说莫名其妙的部分是 python3 解释器不允许我以旧方式使用该导入样式运行脚本,但是在构建和安装 bdist 之后,脚本也可以以“旧方式”运行.现在仍然有一些问题,因为我也在使用 Cython,但是很高兴我能在你的帮助下解决这个起始问题。非常感谢。
    • 现在修复后我更新了我的答案以提供有关导入的更多详细信息。您可以将sonic_paranoid.py 重命名为sonicparanoid.py,但不能将其作为脚本运行。
    猜你喜欢
    • 2017-07-12
    • 1970-01-01
    • 1970-01-01
    • 2019-02-07
    • 2012-04-01
    • 2015-10-02
    • 2010-12-16
    • 1970-01-01
    • 2020-08-20
    相关资源
    最近更新 更多