diff --git a/.gitea/workflows/main.yml b/.gitea/workflows/main.yml index 9c25ceb..b570abe 100644 --- a/.gitea/workflows/main.yml +++ b/.gitea/workflows/main.yml @@ -111,19 +111,19 @@ jobs: deploy: runs-on: ubuntu-latest needs: images + env: + DEPLOY_HOST: ${{ vars.DEPLOY_HOST }} + DEPLOY_USER: ${{ vars.DEPLOY_USER }} + DEPLOY_DIR: ${{ vars.DEPLOY_DIR }} + REGISTRY: ${{ vars.REGISTRY }} + WORDPDF_MAX_MB: ${{ vars.WORDPDF_MAX_MB }} + WORDPDF_MAX_PAGES: ${{ vars.WORDPDF_MAX_PAGES }} + DEPLOY_SSH_KEY: ${{ secrets.DEPLOY_SSH_KEY }} + REGISTRY_USER: ${{ secrets.REGISTRY_USER }} + REGISTRY_PASSWORD: ${{ secrets.REGISTRY_PASSWORD }} + WORDPDF_API_KEY: ${{ secrets.WORDPDF_API_KEY }} steps: - name: Check deploy vars and secrets - env: - DEPLOY_HOST: ${{ vars.DEPLOY_HOST }} - DEPLOY_USER: ${{ vars.DEPLOY_USER }} - DEPLOY_DIR: ${{ vars.DEPLOY_DIR }} - REGISTRY: ${{ vars.REGISTRY }} - WORDPDF_MAX_MB: ${{ vars.WORDPDF_MAX_MB }} - WORDPDF_MAX_PAGES: ${{ vars.WORDPDF_MAX_PAGES }} - DEPLOY_SSH_KEY: ${{ secrets.DEPLOY_SSH_KEY }} - REGISTRY_USER: ${{ secrets.REGISTRY_USER }} - REGISTRY_PASSWORD: ${{ secrets.REGISTRY_PASSWORD }} - WORDPDF_API_KEY: ${{ secrets.WORDPDF_API_KEY }} run: | missing=0 for v in DEPLOY_HOST DEPLOY_USER DEPLOY_DIR REGISTRY WORDPDF_MAX_MB WORDPDF_MAX_PAGES; do @@ -134,154 +134,159 @@ jobs: done exit "$missing" - # Единственный источник правды конфигурации прода — этот workflow: docker-compose.yml - # и nginx.conf рендерятся на прод-хост на каждый деплой из Variables/Secrets; - # ключ API в файлы не пишется (берётся из окружения job'а). На прод-хосте - # конфигурации нет: restart.sh и .env удаляются как наследие ручного setup. - - name: Render prod stack and deploy - env: - DEPLOY_DIR: ${{ vars.DEPLOY_DIR }} - DEPLOY_HOST: ${{ vars.DEPLOY_HOST }} - REGISTRY: ${{ vars.REGISTRY }} - WORDPDF_MAX_MB: ${{ vars.WORDPDF_MAX_MB }} - WORDPDF_MAX_PAGES: ${{ vars.WORDPDF_MAX_PAGES }} - WORDPDF_API_KEY: ${{ secrets.WORDPDF_API_KEY }} - REGISTRY_USER: ${{ secrets.REGISTRY_USER }} - REGISTRY_PASSWORD: ${{ secrets.REGISTRY_PASSWORD }} - uses: appleboy/ssh-action@v1.0.3 - with: - host: ${{ vars.DEPLOY_HOST }} - username: ${{ vars.DEPLOY_USER }} - key: ${{ secrets.DEPLOY_SSH_KEY }} - script_stop: true - envs: DEPLOY_DIR,DEPLOY_HOST,REGISTRY,WORDPDF_MAX_MB,WORDPDF_MAX_PAGES,WORDPDF_API_KEY,REGISTRY_USER,REGISTRY_PASSWORD - script: | - set -euo pipefail - umask 077 - mkdir -p "$DEPLOY_DIR" - cd "$DEPLOY_DIR" - rm -f restart.sh .env - cat > docker-compose.yml < nginx.conf < .rollback.env - fi - printf '%s' "$REGISTRY_PASSWORD" | podman login "$REGISTRY" --username "$REGISTRY_USER" --password-stdin - podman-compose pull app web - podman-compose up -d --force-recreate app web - for _ in $(seq 1 60); do - [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break - sleep 2 - done - [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] \ - || { echo "app не стал healthy за 120с" >&2; exit 1; } - # Гейт: app/web обязаны идти на только что стянутый из реестра образ - # (защита от молчаливого деплоя старого кода). - for svc in app web; do - ctr="wordpdf-prod-${svc}-1" - [ "$(podman inspect -f '{{.Image}}' "$ctr")" = \ - "$(podman image inspect "$REGISTRY/wordpdf-${svc}:prod" -f '{{.Id}}')" ] \ - || { echo "$ctr запущен не на новом образе $REGISTRY/wordpdf-${svc}:prod" >&2; exit 1; } - done - # gateway пересоздаётся последним (после healthy app/web): nginx.conf - # на каждый деплой рендерится заново, пересоздание применяет его. - podman-compose up -d --force-recreate gateway - for _ in $(seq 1 10); do - curl -fsS -o /dev/null "http://127.0.0.1:9010/actuator/health" 2>/dev/null && break || sleep 1 - done - curl -fsS "http://127.0.0.1:9010/actuator/health" - podman-compose ps + # Единственный источник правды конфигурации прода — этот workflow: файлы + # рендерятся в workspace runner'а (обычный bash) и переносятся на хост через + # ssh — appleboy/ssh-action для этого непригоден: он вставляет свою guard-строку + # после каждой строки скрипта и срезает отступы, heredoc превращается в мусор + # (рег. run 482: битый compose на проде, «mapping values are not allowed here»). + # Ключ API в файл не пишется: compose интерполирует его из окружения деплоя. + - name: Render prod stack files + run: &render-stack-files | + cat > docker-compose.yml < nginx.conf </dev/null 2>&1 || { apt-get update -q && apt-get install -y -q openssh-client; } + mkdir -p "$HOME/.ssh" && chmod 700 "$HOME/.ssh" + printf '%s\n' "$DEPLOY_SSH_KEY" > "$HOME/.ssh/id_deploy" + chmod 600 "$HOME/.ssh/id_deploy" + set -- -i "$HOME/.ssh/id_deploy" -o StrictHostKeyChecking=accept-new + D=$(printf '%q' "$DEPLOY_DIR") + H="$DEPLOY_USER@$DEPLOY_HOST" + ssh "$@" "$H" "umask 077; mkdir -p $D && cat > $D/docker-compose.yml" < docker-compose.yml + ssh "$@" "$H" "cat > $D/nginx.conf" < nginx.conf + { + printf 'export DEPLOY_DIR=%q REGISTRY=%q REGISTRY_USER=%q REGISTRY_PASSWORD=%q WORDPDF_API_KEY=%q\n' \ + "$DEPLOY_DIR" "$REGISTRY" "$REGISTRY_USER" "$REGISTRY_PASSWORD" "$WORDPDF_API_KEY" + cat <<'REMOTE' + set -euo pipefail + umask 077 + cd "$DEPLOY_DIR" + rm -f restart.sh .env + # Состояние отката — image ID, на которых стек стоит сейчас (если поднят). + if podman ps -a --format '{{.Names}}' | grep -qx wordpdf-prod-app-1 \ + && podman ps -a --format '{{.Names}}' | grep -qx wordpdf-prod-web-1; then + { + echo "PREV_APP=$(podman inspect -f '{{.Image}}' wordpdf-prod-app-1)" + echo "PREV_WEB=$(podman inspect -f '{{.Image}}' wordpdf-prod-web-1)" + } > .rollback.env + fi + printf '%s' "$REGISTRY_PASSWORD" | podman login "$REGISTRY" --username "$REGISTRY_USER" --password-stdin + podman-compose pull app web + podman-compose up -d --force-recreate app web + for _ in $(seq 1 60); do + [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break + sleep 2 + done + [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] \ + || { echo "app не стал healthy за 120с" >&2; exit 1; } + # Гейт: app/web обязаны идти на только что стянутый из реестра образ + # (защита от молчаливого деплоя старого кода). + for svc in app web; do + ctr="wordpdf-prod-${svc}-1" + [ "$(podman inspect -f '{{.Image}}' "$ctr")" = \ + "$(podman image inspect "$REGISTRY/wordpdf-${svc}:prod" -f '{{.Id}}')" ] \ + || { echo "$ctr запущен не на новом образе $REGISTRY/wordpdf-${svc}:prod" >&2; exit 1; } + done + # gateway пересоздаётся последним (после healthy app/web): nginx.conf + # на каждый деплой рендерится заново, пересоздание применяет его. + podman-compose up -d --force-recreate gateway + for _ in $(seq 1 10); do + curl -fsS -o /dev/null "http://127.0.0.1:9010/actuator/health" 2>/dev/null && break || sleep 1 + done + curl -fsS "http://127.0.0.1:9010/actuator/health" + podman-compose ps + REMOTE + } | ssh "$@" "$H" bash -s autotests: runs-on: ubuntu-latest @@ -318,35 +323,54 @@ jobs: runs-on: ubuntu-latest needs: [deploy, autotests] if: failure() + env: + DEPLOY_HOST: ${{ vars.DEPLOY_HOST }} + DEPLOY_USER: ${{ vars.DEPLOY_USER }} + DEPLOY_DIR: ${{ vars.DEPLOY_DIR }} + REGISTRY: ${{ vars.REGISTRY }} + WORDPDF_MAX_MB: ${{ vars.WORDPDF_MAX_MB }} + WORDPDF_MAX_PAGES: ${{ vars.WORDPDF_MAX_PAGES }} + DEPLOY_SSH_KEY: ${{ secrets.DEPLOY_SSH_KEY }} + WORDPDF_API_KEY: ${{ secrets.WORDPDF_API_KEY }} steps: - - name: Roll back prod to previous images - env: - DEPLOY_DIR: ${{ vars.DEPLOY_DIR }} - REGISTRY: ${{ vars.REGISTRY }} - WORDPDF_API_KEY: ${{ secrets.WORDPDF_API_KEY }} - uses: appleboy/ssh-action@v1.0.3 - with: - host: ${{ vars.DEPLOY_HOST }} - username: ${{ vars.DEPLOY_USER }} - key: ${{ secrets.DEPLOY_SSH_KEY }} - script_stop: true - envs: DEPLOY_DIR,REGISTRY,WORDPDF_API_KEY - script: | - set -euo pipefail - cd "$DEPLOY_DIR" - if [ ! -f .rollback.env ]; then - echo "НЕТ .rollback.env — АВТОМАТИЧЕСКИЙ ОТКАТ НЕВОЗМОЖЕН" >&2 - exit 1 - fi - . ./.rollback.env - podman tag "$PREV_APP" "$REGISTRY/wordpdf-app:prod" - podman tag "$PREV_WEB" "$REGISTRY/wordpdf-web:prod" - podman-compose up -d --force-recreate app web - for _ in $(seq 1 60); do - [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break - sleep 2 - done - [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] \ - || { echo "app НЕ healthy после отката" >&2; exit 1; } - podman-compose up -d --force-recreate gateway - curl -fsS "http://127.0.0.1:9010/actuator/health" + # Конфиг рендерится заново (тот же шаг, что у deploy) и перезаливается: откат + # не зависит от того, что осталось на хосте после упавшего деплоя (рег. run 482: + # rollback на битом compose тоже падал). + - name: Render prod stack files + run: *render-stack-files + + - name: Upload compose and roll back + run: | + set -euo pipefail + command -v ssh >/dev/null 2>&1 || { apt-get update -q && apt-get install -y -q openssh-client; } + mkdir -p "$HOME/.ssh" && chmod 700 "$HOME/.ssh" + printf '%s\n' "$DEPLOY_SSH_KEY" > "$HOME/.ssh/id_deploy" + chmod 600 "$HOME/.ssh/id_deploy" + set -- -i "$HOME/.ssh/id_deploy" -o StrictHostKeyChecking=accept-new + D=$(printf '%q' "$DEPLOY_DIR") + H="$DEPLOY_USER@$DEPLOY_HOST" + ssh "$@" "$H" "umask 077; mkdir -p $D && cat > $D/docker-compose.yml" < docker-compose.yml + { + printf 'export DEPLOY_DIR=%q REGISTRY=%q WORDPDF_API_KEY=%q\n' \ + "$DEPLOY_DIR" "$REGISTRY" "$WORDPDF_API_KEY" + cat <<'REMOTE' + set -euo pipefail + cd "$DEPLOY_DIR" + if [ ! -f .rollback.env ]; then + echo "НЕТ .rollback.env — АВТОМАТИЧЕСКИЙ ОТКАТ НЕВОЗМОЖЕН" >&2 + exit 1 + fi + . ./.rollback.env + podman tag "$PREV_APP" "$REGISTRY/wordpdf-app:prod" + podman tag "$PREV_WEB" "$REGISTRY/wordpdf-web:prod" + podman-compose up -d --force-recreate app web + for _ in $(seq 1 60); do + [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break + sleep 2 + done + [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] \ + || { echo "app НЕ healthy после отката" >&2; exit 1; } + podman-compose up -d --force-recreate gateway + curl -fsS "http://127.0.0.1:9010/actuator/health" + REMOTE + } | ssh "$@" "$H" bash -s