我正在尝试将 Django 与 Celery、Celery-beat、Redis、Postgresql、Nginx、Gunicorn 与 Docker 部署到 Heroku

Question

我正在尝试将我的应用程序部署到 Heroku，我正在使用 amazon s3 存储桶进行静态处理，但静态图标未显示在网站上，我需要帮助设置 celery 和 celery beat 的工作人员以在 Heroku 上工作。

这是我的 Dockerfile：

# pull the official base image
FROM python:3.8.3-alpine as builder

# set work directory
WORKDIR /usr/src/app

# set environment variables
ENV PYTHONDONTWRITEBYTECODE 1
ENV PYTHONUNBUFFERED 1

# install psycopg2 dependencies
RUN apk update \
    && apk add postgresql-dev gcc python3-dev musl-dev
RUN apk add zlib libjpeg-turbo-dev libpng-dev \
    freetype-dev lcms2-dev libwebp-dev \
    harfbuzz-dev fribidi-dev tcl-dev tk-dev 
# lint
RUN pip install --upgrade pip
RUN pip install flake8
COPY . .

# install dependencies
COPY ./requirements.txt .
RUN pip wheel --no-cache-dir --no-deps --wheel-dir /usr/src/app/wheels -r requirements.txt

# pull official base image
FROM python:3.8.3-alpine

# create directory for the app user
RUN mkdir -p /home/app

# create the app user
RUN addgroup -S app && adduser -S app -G app

# create the appropriate directories
ENV HOME=/home/app
ENV APP_HOME=/home/app/web
RUN mkdir $APP_HOME
RUN mkdir $APP_HOME/static
RUN mkdir $APP_HOME/media
WORKDIR $APP_HOME


# install dependencies
RUN apk update && apk add libpq 
RUN apk add zlib libjpeg-turbo-dev libpng-dev \
    freetype-dev lcms2-dev libwebp-dev \
    harfbuzz-dev fribidi-dev tcl-dev tk-dev 
COPY --from=builder /usr/src/app/wheels /wheels
COPY --from=builder /usr/src/app/requirements.txt .
RUN pip install --no-cache /wheels/*

# copy entrypoint.sh
COPY ./entrypoint.sh $APP_HOME

# copy project
COPY . $APP_HOME

# chown all the files to the app user
RUN chown -R app:app $APP_HOME

# change to the app user
USER app

# run entrypoint.prod.sh
ENTRYPOINT ["/home/app/web/entrypoint.prod.sh"]

CMD gunicorn my_proj.wsgi:application --bind 0.0.0.0:$PORT ```

This is my docker-compose file 

```version: "3.8"

services:
    web:
        build: 
            context: .
            dockerfile : Dockerfile
        container_name: django
        command: gunicorn my_proj.wsgi:application --bind 0.0.0.0:8000
        volumes:
            - static_volume:/home/app/web/static
            - media_volume:/home/app/web/media
        expose:
            - 8000
        depends_on:
            - pgdb
            - redis
    celery-worker:
        build: .
        command: celery -A my_proj worker -l INFO
        volumes:
            - .:/usr/src/app
        environment:
            - DEBUG=1
            - DJANGO_ALLOWED_HOSTS=['localhost', '127.0.0.1', 'app_name.herokuapp.com']
            - CELERY_BROKER=redis://redis:6379/0
            - CELERY_BACKEND=redis://redis:6379/0
        depends_on:
            - web
            - redis
    celery-beat:
        build: .
        command: celery -A my_proj beat -l INFO --scheduler django_celery_beat.schedulers:DatabaseScheduler
        volumes:
            - .:/usr/src/app
        environment:
            - DEBUG=1
            - DJANGO_ALLOWED_HOSTS=['localhost', '127.0.0.1', 'app_name.herokuapp.com']
            - CELERY_BROKER=redis://redis:6379/0
            - CELERY_BACKEND=redis://redis:6379/0
        depends_on:
            - web
            - redis
            - celery-worker
    pgdb:
        image: postgres
        container_name: pgdb
        environment:
            - POSTGRES_DB=databasename
            - POSTGRES_USER=postgres
            - POSTGRES_PASSWORD=password
        volumes:
            - pgdata:/var/lib/postgresql/data/
    redis:
        image: "redis:alpine"
    nginx:
        build: ./nginx
        volumes:
            - static_volume:/home/app/web/static
            - media_volume:/home/app/web/media
        ports:
            - 1337:80
        depends_on:
            - web
volumes:
    pgdata:
    static_volume:
    media_volume: ```

这是我在 Heroku 上部署的步骤

heroku container:login
docker build -t registry.heroku.com/app name/web .
docker push registry.heroku.com/app name/web
heroku container:release -a app name web

另外，我在下面运行了它，它正在启动，但我希望它自己工作。

heroku run celery -A my_proj worker -l INFO -a <app name>
heroku run celery -A my_proj beat -l INFO --scheduler django_celery_beat.schedulers:DatabaseScheduler -a <app name>

问题：

1. 如何设置 celery 以作为工人工作。
2. 如何也为 celery-beat 设置工作器

我需要帮助，在开发中，我通常使用docker-compose up -d --build，所有图像都是构建和协同工作的。我觉得只有 Django 容器在工作，其他的都没有构建。

Answer 1

尝试在 AWS S3 存储桶中设置 CORS 权限以使字体正常工作。

[
 {
    "AllowedHeaders": [
        "Authorization"
    ],
    "AllowedMethods": [
        "GET",
        "PUT",
        "POST",
        "DELETE"
    ],
    "AllowedOrigins": [
        "*"
    ],
    "ExposeHeaders": [],
    "MaxAgeSeconds": 3000
 }
]

Answer 2

好的，这就是我所做的对我有用的事情，所以对于像我这样的 Django Web 框架的新开发人员来说。

我在 Heroku 上部署应用程序的最佳方式是使用 Heroku 构建清单。我在项目的根目录上创建了一个 heroku.yml 文件。 #这是用于创建 web 和 worker 的 Build Manifest。

build:
  docker:
    web: Dockerfile
    worker: Dockerfile
run:
  web: gunicorn my_proj.wsgi:application --bind 0.0.0.0:$PORT
  worker: celery -A my_proj worker -l INFO --beat -l INFO --scheduler django_celery_beat.schedulers:DatabaseScheduler
release:
  image: web
  command:
    - python manage.py collectstatic --noinput

对于数据库，我使用 Heroku Postgres 插件也用于 Redis 消息代理，我使用 Heroku Redis。

我没有使用 Nginx 来提供静态文件，而是使用了 Whitenoise，它很容易设置，但是当你关闭 Debug 时会出现令人讨厌的错误。这里有很多帮助可以帮助您解决这个问题。

最好在根目录和 settings.py 文件中创建一个 static 和 staticfiles 文件夹 添加这些，为我工作

INSTALLED_APP = [
..., 
'whitenoise.runserver_nostatic',
#BEFORE THE 'django.contrib.staticfiles',
]
STATIC_URL = "/static/"
STATIC_ROOT = os.path.join(BASE_DIR, "staticfiles")
STATICFILES_STORAGE = "whitenoise.storage.CompressedManifestStaticFilesStorage"
STATICFILES_DIRS = [
    os.path.join(BASE_DIR, "static"),
]
WHITENOISE_MANIFEST_STRICT = False

这就是我学习和解决问题的方式。

任何更好的实现总是值得学习。