无法将 Scrapy Spider 导入脚本

Question

除了将classSomeSpider从spider/src.py导入main/main.py之外，我所有的导入都在工作。当我在终端中调用 scrapy crawl somespider 时，蜘蛛本身就会运行。 python 不能识别 modules 和 scrapy.spider 吗？

我的文件结构：

/whiskers
-/venv
--/bin
--/include
--/lib
--/whiskers
---/whiskers
----/main
-----/main.py
----/spiders
-----/__init__.py
-----/src.py
----/__init__.py
----/items.py
----/middlewares.py
----/pipelines.py
----/settings.py
---/scrapy.cfg
--/pyvenv.cfg

将其中任何一个放入main/main.py：

from whiskers.spiders.src import SomeSpider
   
(or) 

from whiskers.whiskers.spiders.src import SomeSpider

(or) 

from whiskers.venv.whiskers.whiskers.spiders.src import SomeSpider

给出错误：

ModuleNotFoundError: No module named 'whiskers'

尝试：

from ..spiders.src import SomeSpider

(or)

from .. import LawSpider

给出错误：

ImportError: attempted relative import with no known parent package

在spider/src.py中，蜘蛛本身只是一个名为SomeSpider的基本scrapy.Spider：

class SomeSpider(scrapy.Spider):

Answer 1

将您的 main.py 脚本放在包文件夹之外。包文件夹是包含__init__.py 的文件夹。 Guido van Rossum 对此的想法是，脚本 - 起点，__name__ == '__main__' 的模块 - 不应该驻留里面但外部包。包应仅包含导入到脚本或其他包中的库代码。

在这种情况下，最简单的方法是将 main.py 向上移动两层：

whiskers/
  venv/
    bin/
    include/
    lib/
    whiskers/
      main.py  <-- put it here
      whiskers/
        __init__.py
        spiders/
          __init__.py
          src.py
        items.py
        middlewares.py
        pipelines.py
        settings.py
      scrapy.cfg
    pyvenv.cfg

然后在 main.py 中执行from whiskers.spiders.src import SomeSpider