【问题标题】:Importing module with "current-directory" imports使用“当前目录”导入导入模块
【发布时间】:2016-08-06 09:52:09
【问题描述】:

我有以下代码来动态加载模块:

def load_module(absolute_path):
    import importlib.util
    module_name, _ = os.path.splitext(os.path.split(absolute_path)[-1])
    try:
        py_mod = imp.load_source(module_name, absolute_path)
    except ImportError:
        module_root = os.path.dirname(absolute_path)
        print("Could not directly load module, including dir: {}".format(module_root))
        spec = importlib.util.spec_from_file_location(
            module_name, absolute_path, submodule_search_locations=[module_root, "."])
        py_mod = importlib.util.module_from_spec(spec)
        spec.loader.exec_module(py_mod)
    return py_mod

它工作得非常好,除了它试图在同一个文件夹中导入脚本(而不是同名包的一部分)的情况。例如,脚本a.py 正在执行import b。它会导致错误 ImportError: No module named 'b'(这在 Python 3 中很常见)。

但我真的很想找到解决这个问题的方法吗?可以通过添加以下内容来解决:

import sys
sys.path.append(".")

为“a”编写脚本。

虽然我希望它可以通过以下方式解决:

submodule_search_locations=[module_root, "."]

哦,是的,理由是我还想支持导入不是正确的包/模块的模块,而只是一些可以在解释器中工作的脚本。

可重现的代码

~/example/a.py

​​>
import b

~/example/b.py

​​>
print("hi")

~/somewhere_else/main.py(与a/b不同)

import sys, os, imp, importlib.util

def load_module(absolute_path) ...

load_module(sys.argv[1])

然后在命令行运行:

cd ~/somewhere_else
python3.5 main.py /home/me/example/a.py

导致ImportError: No module named 'b'

下面的代码解决了这个问题,但是我们当然不能在所有脚本中手动添加sys.path的东西。

~/example/a.py (2)

import sys
sys.path.append(".")
import b

我真的希望其他人可能有一个我还没有想到的解决方案。

附录

def load_module(absolute_path):
    import importlib.util
    module_name, _ = os.path.splitext(os.path.split(absolute_path)[-1])
    try:
        py_mod = imp.load_source(module_name, absolute_path)
    except ImportError as e:
        if "No module named" not in e.msg:
            raise e

        missing_module = e.name
        module_root = os.path.dirname(absolute_path)

        if missing_module + ".py" not in os.listdir(module_root):
            msg = "Could not find '{}' in '{}'"
            raise ImportError(msg.format(missing_module, module_root))

        print("Could not directly load module, including dir: {}".format(module_root))
        sys.path.append(module_root)
        spec = importlib.util.spec_from_file_location(module_name, absolute_path)
        py_mod = importlib.util.module_from_spec(spec)
        spec.loader.exec_module(py_mod)
    return py_mod

【问题讨论】:

  • 请不要乱跑;删除然后重新发布以逃避您收到的投票。是的,如果您想从同一目录导入但没有包,则需要操作 sys.path
  • @MartijnPieters 考虑到我对它进行了巨大的改造,不得不等待让它暂停有点愚蠢。
  • 这就是审查队列的用途。像这样删除和重新发布可以并且将使您进入(自动)问题禁令。

标签: python import python-3.5 python-importlib


【解决方案1】:

你在这里使用动态导入并不重要;同样的问题适用于任何关于当前目录在路径上的假设的代码。这些脚本有责任确保当前目录位于路径上。

不要使用'.'(当前工作目录),而是使用__file__全局将目录添加到路径中:

import os.path
import sys

HERE = os.path.dirname(os.path.abspath(__file__))
sys.path.insert(0, HERE)

可以在您有ImportError(可能是detecting it was a transient import that failed)时,通过将os.path.dirname(absolute_path) 添加到sys.path 来重试动态导入,但这是一个巨大的飞跃,尽你所能' t 区分缺失的依赖项和对sys.path 做出假设的模块。

【讨论】:

  • 也许作为安全措施,可以扫描该文件夹(在我的脚本中称为module_root)是否包含名称不存在的文件(如您的链接所指出的) .那应该是非常安全的;否则脚本无论如何都不会运行。我没有意识到我应该在执行该命令之前添加 sys.path.append(module_root) (但前提是该名称的文件存在)。所以非常感谢,它确实澄清了。它还回答了为什么我能够在解释器中进行此类导入的问题:Emacs 将当前目录添加到路径。
  • 在运行脚本时,定义脚本的目录也会自动添加到sys.path,但这不是我所依赖的。
  • 是的,但我希望这可以从命令行运行,因此可以从不同的目录运行。我仔细修补过,见附录。
【解决方案2】:

就我而言,有效的是importlib.import_module('file_basename') — 没有指定任何包。请参阅下面的试错和成功:

>>> importlib.import_module('.trainer', '.')
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "/usr/lib/python3.8/importlib/__init__.py", line 127, in import_module
    return _bootstrap._gcd_import(name[level:], package, level)
  File "<frozen importlib._bootstrap>", line 1014, in _gcd_import
  File "<frozen importlib._bootstrap>", line 991, in _find_and_load
  File "<frozen importlib._bootstrap>", line 961, in _find_and_load_unlocked
  File "<frozen importlib._bootstrap>", line 219, in _call_with_frames_removed
  File "<frozen importlib._bootstrap>", line 1014, in _gcd_import
  File "<frozen importlib._bootstrap>", line 991, in _find_and_load
  File "<frozen importlib._bootstrap>", line 973, in _find_and_load_unlocked
ModuleNotFoundError: No module named '.'

>>> importlib.import_module('.trainer', None)
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "/usr/lib/python3.8/importlib/__init__.py", line 122, in import_module
    raise TypeError(msg.format(name))
TypeError: the 'package' argument is required to perform a relative import for '.trainer'

>>> importlib.import_module('.trainer', '')
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "/usr/lib/python3.8/importlib/__init__.py", line 122, in import_module
    raise TypeError(msg.format(name))
TypeError: the 'package' argument is required to perform a relative import for '.trainer'

>>> importlib.import_module('trainer')
<module 'trainer' from '/home/ubuntu/project1/trainer.py'>

【讨论】:

    猜你喜欢
    • 2012-12-22
    • 2021-01-14
    • 2015-12-09
    • 2020-11-03
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    • 1970-01-01
    相关资源
    最近更新 更多