Elastic Beanstalk 上的 Cronjob 未运行

Question

我在一个弹性 beanstalk 应用上有一个爬虫，我可以像这样通过 SSH 运行它：

• source /opt/python/run/venv/bin/activate
• source /opt/python/current/env
• cd /opt/python/current/app
• scrapy crawl spidername

我想设置一个 cronjob 来为我运行它。所以我遵循了here的建议。

我的setup.config 文件如下所示：

container_commands:
  01_cron_hemnet:
    command: "cat .ebextensions/spider_cron.txt > /etc/cron.d/crawl_spidername && chmod 644 /etc/cron.d/crawl_spidername"
  leader_only: true

我的spider_cron.txt 文件如下所示：

# The newline at the end of this file is extremely important.  Cron won't run without it.
* * * * * root sh /opt/python/current/app/runcrawler.sh &>/tmp/mycommand.log
# There is a newline here.

我的runcrawler.sh 文件位于/opt/python/current/app/runcrawler.sh，看起来像这样

#!/bin/bash

cd /opt/python/current/app/
PATH=$PATH:/usr/local/bin
export PATH
scrapy crawl spidername

我可以导航到/etc/cron.d/ 并看到crawl_spidername 存在于那里。但是当我运行 crontab -l 或 crontab -u root -l 时，它说不存在 crontab。

我没有收到日志错误，没有部署错误，并且我尝试将 cron 输出到的 /tmp/mycommand.log 文件从未创建。似乎 cronjob 从未启动。

想法？

Answer 1

您的 spider_cron.txt 在 /opt/python/current/app/ 之后但在 scrapy 之前有一个额外的空间。所以正在运行的命令只是一个文件夹“/opt/python/current/app/”

你的

40 9 * * * root /opt/python/current/app/ scrapy crawl spidername > /dev/null

应该是

40 9 * * * root /opt/python/current/app/scrapy crawl spidername > /dev/null

准确输入“/opt/python/current/app/scrapy crawl spidername”会启动您的爬虫吗？