Блог

Главная - Вопросы по программированию - Я пытаюсь развернуть Развертывание Django с помощью Celery, Celery-beat, Redis, Postgresql, Nginx, Gunicorn с помощью Docker для Heroku

Я пытаюсь развернуть Развертывание Django с помощью Celery, Celery-beat, Redis, Postgresql, Nginx, Gunicorn с помощью Docker для Heroku

#django #docker #heroku #celery #celerybeat

#django #docker #heroku #сельдерей #celerybeat

Вопрос:

Я пытаюсь развернуть свое приложение в Heroku, использую amazon s3 bucket для статики, но статический значок не отображается на веб-сайте, и мне нужна помощь в настройке рабочего для сельдерея и сельдерея для работы на Heroku.

Это мой файл Dockerfile:

 # pull the official base image
FROM python:3.8.3-alpine as builder

# set work directory
WORKDIR /usr/src/app

# set environment variables
ENV PYTHONDONTWRITEBYTECODE 1
ENV PYTHONUNBUFFERED 1

# install psycopg2 dependencies
RUN apk update 
    amp;amp; apk add postgresql-dev gcc python3-dev musl-dev
RUN apk add zlib libjpeg-turbo-dev libpng-dev 
    freetype-dev lcms2-dev libwebp-dev 
    harfbuzz-dev fribidi-dev tcl-dev tk-dev 
# lint
RUN pip install --upgrade pip
RUN pip install flake8
COPY . .

# install dependencies
COPY ./requirements.txt .
RUN pip wheel --no-cache-dir --no-deps --wheel-dir /usr/src/app/wheels -r requirements.txt

# pull official base image
FROM python:3.8.3-alpine

# create directory for the app user
RUN mkdir -p /home/app

# create the app user
RUN addgroup -S app amp;amp; adduser -S app -G app

# create the appropriate directories
ENV HOME=/home/app
ENV APP_HOME=/home/app/web
RUN mkdir $APP_HOME
RUN mkdir $APP_HOME/static
RUN mkdir $APP_HOME/media
WORKDIR $APP_HOME


# install dependencies
RUN apk update amp;amp; apk add libpq 
RUN apk add zlib libjpeg-turbo-dev libpng-dev 
    freetype-dev lcms2-dev libwebp-dev 
    harfbuzz-dev fribidi-dev tcl-dev tk-dev 
COPY --from=builder /usr/src/app/wheels /wheels
COPY --from=builder /usr/src/app/requirements.txt .
RUN pip install --no-cache /wheels/*

# copy entrypoint.sh
COPY ./entrypoint.sh $APP_HOME

# copy project
COPY . $APP_HOME

# chown all the files to the app user
RUN chown -R app:app $APP_HOME

# change to the app user
USER app

# run entrypoint.prod.sh
ENTRYPOINT ["/home/app/web/entrypoint.prod.sh"]

CMD gunicorn my_proj.wsgi:application --bind 0.0.0.0:$PORT ```

This is my docker-compose file 

```version: "3.8"

services:
    web:
        build: 
            context: .
            dockerfile : Dockerfile
        container_name: django
        command: gunicorn my_proj.wsgi:application --bind 0.0.0.0:8000
        volumes:
            - static_volume:/home/app/web/static
            - media_volume:/home/app/web/media
        expose:
            - 8000
        depends_on:
            - pgdb
            - redis
    celery-worker:
        build: .
        command: celery -A my_proj worker -l INFO
        volumes:
            - .:/usr/src/app
        environment:
            - DEBUG=1
            - DJANGO_ALLOWED_HOSTS=['localhost', '127.0.0.1', 'app_name.herokuapp.com']
            - CELERY_BROKER=redis://redis:6379/0
            - CELERY_BACKEND=redis://redis:6379/0
        depends_on:
            - web
            - redis
    celery-beat:
        build: .
        command: celery -A my_proj beat -l INFO --scheduler django_celery_beat.schedulers:DatabaseScheduler
        volumes:
            - .:/usr/src/app
        environment:
            - DEBUG=1
            - DJANGO_ALLOWED_HOSTS=['localhost', '127.0.0.1', 'app_name.herokuapp.com']
            - CELERY_BROKER=redis://redis:6379/0
            - CELERY_BACKEND=redis://redis:6379/0
        depends_on:
            - web
            - redis
            - celery-worker
    pgdb:
        image: postgres
        container_name: pgdb
        environment:
            - POSTGRES_DB=databasename
            - POSTGRES_USER=postgres
            - POSTGRES_PASSWORD=password
        volumes:
            - pgdata:/var/lib/postgresql/data/
    redis:
        image: "redis:alpine"
    nginx:
        build: ./nginx
        volumes:
            - static_volume:/home/app/web/static
            - media_volume:/home/app/web/media
        ports:
            - 1337:80
        depends_on:
            - web
volumes:
    pgdata:
    static_volume:
    media_volume: ```

Вот шаги, которые я выполнил для развертывания на Heroku

 heroku container:login
docker build -t registry.heroku.com/app name/web .
docker push registry.heroku.com/app name/web
heroku container:release -a app name web

Кроме того, я запустил это ниже, и оно запускается, но я хочу, чтобы оно работало само по себе.

 heroku run celery -A my_proj worker -l INFO -a <app name>
heroku run celery -A my_proj beat -l INFO --scheduler django_celery_beat.schedulers:DatabaseScheduler -a <app name>

Проблема:

  1. Как мне настроить сельдерей для работы в качестве рабочего.
  2. Как мне также настроить работника для celery-beat

Пожалуйста, мне нужна помощь в разработке, которую я обычно использую docker-compose up -d --build , и все образы создаются и работают вместе. Я чувствую, что только контейнер Django просто работает, а другие не были созданы.

Комментарии:

1. Нужно ли определять местоположение статического псевдонима в nginx?

2. Я использовал псевдоним «восходящее приложение { веб-сервер: 8000; } сервер { прослушивание 80; местоположение / { приложение proxy_pass; proxy_set_header X-Forwarded-For $ proxy_add_x_forwarded_for; хост proxy_set_header $ host; proxy_redirect выкл.; } местоположение / статическое / { псевдоним / home/ app / web/ static/;} location /media/ { псевдоним /home/app/web/media/; } }`

3. в Nginx.config я добавил псевдоним. Есть ли отдельный способ, которым они делают это для развертывания?

Ответ №1:

Хорошо, итак, это то, что я сделал, что сработало для меня, так что для любого нового разработчика, такого как я, который подходит к веб-фреймворку Django.

Лучшим способом, который я использовал при развертывании приложения на Heroku, было использование манифеста сборки Heroku. Я создал файл heroku.yml в корневом каталоге моего проекта. #Это манифест сборки для создания web и worker.

 build:
  docker:
    web: Dockerfile
    worker: Dockerfile
run:
  web: gunicorn my_proj.wsgi:application --bind 0.0.0.0:$PORT
  worker: celery -A my_proj worker -l INFO --beat -l INFO --scheduler django_celery_beat.schedulers:DatabaseScheduler
release:
  image: web
  command:
    - python manage.py collectstatic --noinput

Для базы данных я использовал дополнение Heroku Postgres, а также для брокера сообщений Redis я использовал Heroku Redis.

Я не использовал Nginx для обслуживания статических файлов, вместо этого я использовал Whitenoise, довольно простую в настройке, но неприятную ошибку при отключении отладки. Здесь есть много справок, которые помогут вам это исправить.

Лучше всего создать папку static и staticfiles в вашем корневом каталоге и в вашем settings.py файл add these, сработал для меня

 INSTALLED_APP = [
..., 
'whitenoise.runserver_nostatic',
#BEFORE THE 'django.contrib.staticfiles',
]
STATIC_URL = "/static/"
STATIC_ROOT = os.path.join(BASE_DIR, "staticfiles")
STATICFILES_STORAGE = "whitenoise.storage.CompressedManifestStaticFilesStorage"
STATICFILES_DIRS = [
    os.path.join(BASE_DIR, "static"),
]
WHITENOISE_MANIFEST_STRICT = False

Вот как я узнал и решил проблему.

Любая лучшая реализация всегда открыта для изучения.

Ответ №2:

Попробуйте настроить CORS в разрешении корзины AWS S3, чтобы шрифты работали.

 [
 {
    "AllowedHeaders": [
        "Authorization"
    ],
    "AllowedMethods": [
        "GET",
        "PUT",
        "POST",
        "DELETE"
    ],
    "AllowedOrigins": [
        "*"
    ],
    "ExposeHeaders": [],
    "MaxAgeSeconds": 3000
 }
]

Комментарии:

1. Спасибо, вместо этого я использовал Whitenoise, что было лучше объяснено в документации Heroku

Метки: , , , , ,