错误：pyMySQL 在爬虫的蜘蛛中不起作用

Question

当我在 python 的 scrapy 项目中导入 pyMysql 库时，它会给出一个错误，即找不到模块。我想问如何在scrapy项目的python文件中导入pyMysql库。当我在简单的 python 中导入 pyMySQL 时，它工作正常。

在由命令“genspider spider_name (url)”生成的蜘蛛中，我使用了这个给出错误的代码。

enter code here

import scrapy
from amazon.items import AmazonItem
import pymysql


class AmazonProductSpider(scrapy.Spider):
    name = "AmazonDeals"
    allowed_domains = ["amazon.com"]

# Use working product URL below
start_urls = [
    "https://www.amazon.com/gp/product/B01IO0QWJA","https://www.amazon.in/Mi-Redmi-5-Gold-32GB/dp/B0756RF9KY"
]

def parse(self, response):
    items = AmazonItem()
    title = response.xpath('//h1[@id="title"]/span/text()').extract()
    sale_price = response.xpath('//span[contains(@id,"ourprice") or contains(@id,"saleprice")]/text()').extract()
    category = response.xpath('//a[@class="a-link-normal a-color-tertiary"]/text()').extract()
    availability = response.xpath('//div[@id="availability"]//text()').extract()
    items['product_name'] = ''.join(title).strip()
    items['product_sale_price'] = ''.join(sale_price).strip()
    items['product_category'] = ','.join(map(lambda x: x.strip(), category)).strip()
    items['product_availability'] = ''.join(availability).strip()
    yield items

Answer 1

检查PyMySQL 模块是否已安装：

python -c "import pymysql"

如果一切正常，此命令不应返回任何内容。

如果它返回一个ModuleNotFoundError，那么install the module使用pip：

pip install PyMySQL