Windows 上 pkgutil.iter_modules() 的路径问题

Question

我正在尝试在运行时动态导入与模式匹配的 Python 模块。这些模块位于 Python 包中。

我用来查找模块的函数是：

def load_modules_from_dir(dirname, pattern=""):
    modules = []
    for importer, package_name, _ in pkgutil.iter_modules([dirname]):
        if re.search(pattern, package_name):
            full_package_name = '%s.%s' % (dirname, package_name)
            if full_package_name not in sys.modules:
                module = importer.find_module(package_name).load_module(full_package_name)
                modules.append(module)
    return modules

我这样称呼它：

module_dir = os.path.join(os.path.dirname(__file__))
modules = utils.load_modules_from_dir(module_dir, "jscal$")

在 Linux 上它会找到所有模块，但在 Windows 上它根本找不到任何模块。如果我在函数load_modules_from_dir 中打印dirname，我得到：H:\temp\linx\dist\calibrate\dcljscal

我已经在 Windows 上的 Python shell 中复制了它，并将其固定在路径分隔符上。以下内容一无所获：

>>> for x in pkgutil.iter_modules(['H:\temp\linx\dist\calibrate\dcljscal']):print x
...
>>> 

如果我用 Linux 替换 Windows 路径分隔符，它可以工作：

>>> for x in pkgutil.iter_modules(['H:/temp/linx/dist/calibrate/dcljscal']):print x
...
(<pkgutil.ImpImporter instance at 0x00AD9C60>, 'demojscal', True)
(<pkgutil.ImpImporter instance at 0x00AD9C60>, 'dx2cremjscal', True)
(<pkgutil.ImpImporter instance at 0x00AD9C60>, 'linxjscal', True)
>>>

如果我用\\ 替换\ 也可以，基本上是转义Windows 路径分隔符：

>>> for x in pkgutil.iter_modules(['H:\\temp\\linx\\dist\\calibrate\\dcljscal']):print x
...
(<pkgutil.ImpImporter instance at 0x00AD9E68>, 'demojscal', True)
(<pkgutil.ImpImporter instance at 0x00AD9E68>, 'dx2cremjscal', True)
(<pkgutil.ImpImporter instance at 0x00AD9E68>, 'linxjscal', True)
>>>

看来os.path.join(os.path.dirname(__file__))生成的路径是不可移植的。
我希望os.path.join() 会给我一条正确的路径，我可以在pkgutil.iter_modules() 中原封不动地使用它。我在这里做错了什么？

我在 Windows XP 上使用 Python 2.7.11。

Answer 1

简短的回答是：这个问题没有答案。表示路径名的字符串总是可以包含特殊字符，这些字符随时会咬你。

有很多 SE 帖子试图给出解决方案。他们中的大多数修复了一个特殊情况，一般不工作。关于什么是最好的方法没有达成共识。请参阅：
- Unpredictable results from os.path.join in windows
- Python windows path slash
- Path Separator in Python 3
- Windows path in python
- mixed slashes with os.path.join on windows
- Why not os.path.join use os.path.sep or os.sep?

这篇博文也值得一提，因为作者使用了一种略有不同的方法来表达他的观点：backslashes-in-windows-filenames

处理路径名的一种实用方法是将 Windows 路径分隔符替换为 Linux 分隔符：path_name = path_name.replace('\\', '/')
Windows XP 和更高版本的 Windows 上的 Python 使用 C:/tab/newline/return/012/x012 没有问题。

只有当您必须打印或记录路径时，您才可以使用os.path.normpath() 将路径转换为您运行 Python 的操作系统或平台的表示形式。