name: "Main: tests, deploy, autotests" on: push: branches: [main] workflow_dispatch: jobs: java: runs-on: ubuntu-latest steps: - uses: actions/checkout@v5 - name: Setup JDK 17 uses: actions/setup-java@v5 with: java-version: '17' distribution: 'temurin' - name: Cache Maven repository uses: actions/cache@v4 with: path: ~/.m2/repository key: maven-${{ hashFiles('pom.xml', 'wordpdf-core/pom.xml', 'wordpdf-app/pom.xml') }} restore-keys: maven- - name: Setup Maven 3.9.16 run: | curl -fsSL https://dlcdn.apache.org/maven/maven-3/3.9.16/binaries/apache-maven-3.9.16-bin.tar.gz | tar xz -C /opt echo "/opt/apache-maven-3.9.16/bin" >> "$GITHUB_PATH" - name: Build and test (PMD gate included) run: mvn -B clean verify - name: Coverage summary if: always() run: | python3 - <<'PY' > coverage-summary.md import os import xml.etree.ElementTree as ET def pct(root, kind): for c in root.findall("counter"): if c.get("type") == kind: missed, covered = int(c.get("missed")), int(c.get("covered")) return f"{100.0 * covered / (missed + covered):.1f}%" return "—" print("") print("## Покрытие (JaCoCo)\n") print("| Модуль | Строки | Ветви | Порог строк |") print("|---|---|---|---|") for m in ("wordpdf-core", "wordpdf-app"): p = f"{m}/target/site/jacoco/jacoco.xml" if not os.path.exists(p): print(f"| {m} | нет данных | — | 90% |") continue r = ET.parse(p).getroot() print(f"| {m} | {pct(r, 'LINE')} | {pct(r, 'BRANCH')} | 90% |") PY cat coverage-summary.md >> "$GITHUB_STEP_SUMMARY" # Таблица покрытия — комментарием в PR: видно в обсуждении, не открывая run. # Повторные push обновляют тот же комментарий (поиск по маркеру), # github.token — task-токен раннера, падение не валит job. Артефактов с # отчётами НЕТ намеренно: upload-artifact@v4 Gitea не поддерживает, @v3 на # этом стенде висит на загрузке (отменена и с 153 файлами, и с одним zip); # HTML — локально в target/site/jacoco. Шаг байт-в-байт одинаков в обоих # workflow, в main.yml if не срабатывает — нет PR-события - name: Comment coverage on PR if: always() && github.event_name == 'pull_request' continue-on-error: true env: GITEA_TOKEN: ${{ github.token }} API: ${{ github.api_url }} REPO: ${{ github.repository }} PR_NUMBER: ${{ github.event.pull_request.number }} run: | [ -s coverage-summary.md ] || exit 0 python3 - <<'PY' import json, os, urllib.request api, repo, pr = os.environ["API"], os.environ["REPO"], os.environ["PR_NUMBER"] token = os.environ["GITEA_TOKEN"] body = open("coverage-summary.md").read() def req(method, url, payload=None): data = json.dumps(payload).encode() if payload is not None else None r = urllib.request.Request(url, data=data, method=method, headers={"Authorization": f"token {token}", "Content-Type": "application/json"}) return json.loads(urllib.request.urlopen(r).read() or "null") base = f"{api}/repos/{repo}/issues/{pr}/comments" existing = next((c["id"] for c in req("GET", base) if "" in c.get("body", "")), None) req("PATCH" if existing else "POST", f"{base}/{existing}" if existing else base, {"body": body}) PY web: runs-on: ubuntu-latest steps: - uses: actions/checkout@v5 - name: Cache npm uses: actions/cache@v4 with: path: ~/.npm key: npm-${{ hashFiles('wordpdf-web/package-lock.json') }} restore-keys: npm- - name: Install dependencies working-directory: wordpdf-web run: npm ci - name: Build SPA working-directory: wordpdf-web run: npm run build - name: Lint SPA working-directory: wordpdf-web run: npm run lint images-app: runs-on: ubuntu-latest needs: java steps: - uses: actions/checkout@v5 - name: Check registry vars and secret env: REGISTRY: ${{ vars.REGISTRY }} REGISTRY_USER: ${{ secrets.REGISTRY_USER }} REGISTRY_PASSWORD: ${{ secrets.REGISTRY_PASSWORD }} run: | [ -n "$REGISTRY" ] && [ -n "$REGISTRY_USER" ] && [ -n "$REGISTRY_PASSWORD" ] || { echo "Задайте Actions Variable REGISTRY и Secrets REGISTRY_USER/REGISTRY_PASSWORD — см. GITEA-vars.md" >&2 exit 1 } - name: Docker auth env: REGISTRY: ${{ vars.REGISTRY }} REGISTRY_USER: ${{ secrets.REGISTRY_USER }} REGISTRY_PASSWORD: ${{ secrets.REGISTRY_PASSWORD }} run: | mkdir -p ~/.docker printf '{"auths":{"%s":{"auth":"%s"}}}' "$REGISTRY" \ "$(printf '%s:%s' "$REGISTRY_USER" "$REGISTRY_PASSWORD" | base64 -w0)" > ~/.docker/config.json - name: Build and push app image env: REGISTRY: ${{ vars.REGISTRY }} run: | sha="${GITHUB_SHA:0:7}" # DOCKER_BUILDKIT=0: daemon за раннером — podman, BuildKit-сессий нет, # только classic /build (buildah). DOCKER_BUILDKIT=0 docker build -f Containerfile \ -t "$REGISTRY/wordpdf-app:prod" -t "$REGISTRY/wordpdf-app:sha-$sha" . docker push "$REGISTRY/wordpdf-app:prod" docker push "$REGISTRY/wordpdf-app:sha-$sha" images-web: runs-on: ubuntu-latest needs: web steps: - uses: actions/checkout@v5 - name: Check registry vars and secret env: REGISTRY: ${{ vars.REGISTRY }} REGISTRY_USER: ${{ secrets.REGISTRY_USER }} REGISTRY_PASSWORD: ${{ secrets.REGISTRY_PASSWORD }} run: | [ -n "$REGISTRY" ] && [ -n "$REGISTRY_USER" ] && [ -n "$REGISTRY_PASSWORD" ] || { echo "Задайте Actions Variable REGISTRY и Secrets REGISTRY_USER/REGISTRY_PASSWORD — см. GITEA-vars.md" >&2 exit 1 } - name: Docker auth env: REGISTRY: ${{ vars.REGISTRY }} REGISTRY_USER: ${{ secrets.REGISTRY_USER }} REGISTRY_PASSWORD: ${{ secrets.REGISTRY_PASSWORD }} run: | mkdir -p ~/.docker printf '{"auths":{"%s":{"auth":"%s"}}}' "$REGISTRY" \ "$(printf '%s:%s' "$REGISTRY_USER" "$REGISTRY_PASSWORD" | base64 -w0)" > ~/.docker/config.json - name: Build and push web image env: REGISTRY: ${{ vars.REGISTRY }} run: | sha="${GITHUB_SHA:0:7}" # VITE_BASE прод-префикса пёкся раньше build-аргом в прод-compose; # теперь он здесь — образ из реестра едет на прод как есть. DOCKER_BUILDKIT=0 docker build -f wordpdf-web/Containerfile \ --build-arg VITE_BASE=/pdf-converter/ \ -t "$REGISTRY/wordpdf-web:prod" -t "$REGISTRY/wordpdf-web:sha-$sha" wordpdf-web docker push "$REGISTRY/wordpdf-web:prod" docker push "$REGISTRY/wordpdf-web:sha-$sha" deploy: runs-on: ubuntu-latest needs: [images-app, images-web] env: DEPLOY_HOST: ${{ vars.DEPLOY_HOST }} DEPLOY_USER: ${{ vars.DEPLOY_USER }} DEPLOY_DIR: ${{ vars.DEPLOY_DIR }} REGISTRY: ${{ vars.REGISTRY }} WORDPDF_MAX_MB: ${{ vars.WORDPDF_MAX_MB }} WORDPDF_MAX_PAGES: ${{ vars.WORDPDF_MAX_PAGES }} DEPLOY_SSH_KEY: ${{ secrets.DEPLOY_SSH_KEY }} REGISTRY_USER: ${{ secrets.REGISTRY_USER }} REGISTRY_PASSWORD: ${{ secrets.REGISTRY_PASSWORD }} WORDPDF_API_KEY: ${{ secrets.WORDPDF_API_KEY }} steps: - name: Check deploy vars and secrets run: | missing=0 for v in DEPLOY_HOST DEPLOY_USER DEPLOY_DIR REGISTRY WORDPDF_MAX_MB WORDPDF_MAX_PAGES; do [ -n "${!v}" ] || { echo "Задайте Actions Variable $v — см. GITEA-vars.md" >&2; missing=1; } done for s in DEPLOY_SSH_KEY REGISTRY_USER REGISTRY_PASSWORD WORDPDF_API_KEY; do [ -n "${!s}" ] || { echo "Задайте Actions Secret $s — см. GITEA-vars.md" >&2; missing=1; } done exit "$missing" # Единственный источник правды конфигурации прода — этот workflow: файлы # рендерятся в workspace runner'а (обычный bash) и переносятся на хост через # ssh — appleboy/ssh-action для этого непригоден: он вставляет свою guard-строку # после каждой строки скрипта и срезает отступы, heredoc превращается в мусор # (рег. run 482: битый compose на проде, «mapping values are not allowed here»). # Ключ API в файл не пишется: compose интерполирует его из окружения деплоя. - name: Render prod stack files run: &render-stack-files | cat > docker-compose.yml < nginx.conf </dev/null \ || python3 -m pip install -q pyyaml 2>/dev/null \ || python3 -m pip install -q --break-system-packages pyyaml 2>/dev/null \ || { apt-get update -q && apt-get install -y -q python3-yaml; } python3 -c 'import yaml; yaml.safe_load(open("docker-compose.yml"))' - name: Upload and deploy run: | set -euo pipefail command -v ssh >/dev/null 2>&1 || { apt-get update -q && apt-get install -y -q openssh-client; } mkdir -p "$HOME/.ssh" && chmod 700 "$HOME/.ssh" printf '%s\n' "$DEPLOY_SSH_KEY" > "$HOME/.ssh/id_deploy" chmod 600 "$HOME/.ssh/id_deploy" set -- -i "$HOME/.ssh/id_deploy" -o StrictHostKeyChecking=accept-new D=$(printf '%q' "$DEPLOY_DIR") H="$DEPLOY_USER@$DEPLOY_HOST" ssh "$@" "$H" "umask 077; mkdir -p $D && cat > $D/docker-compose.yml" < docker-compose.yml ssh "$@" "$H" "cat > $D/nginx.conf" < nginx.conf { printf 'export DEPLOY_DIR=%q REGISTRY=%q REGISTRY_USER=%q REGISTRY_PASSWORD=%q WORDPDF_API_KEY=%q\n' \ "$DEPLOY_DIR" "$REGISTRY" "$REGISTRY_USER" "$REGISTRY_PASSWORD" "$WORDPDF_API_KEY" cat <<'REMOTE' set -euo pipefail umask 077 cd "$DEPLOY_DIR" rm -f restart.sh .env # Состояние отката — image ID, на которых стек стоит сейчас (если поднят). if podman ps -a --format '{{.Names}}' | grep -qx wordpdf-prod-app-1 \ && podman ps -a --format '{{.Names}}' | grep -qx wordpdf-prod-web-1; then { echo "PREV_APP=$(podman inspect -f '{{.Image}}' wordpdf-prod-app-1)" echo "PREV_WEB=$(podman inspect -f '{{.Image}}' wordpdf-prod-web-1)" } > .rollback.env fi printf '%s' "$REGISTRY_PASSWORD" | podman login "$REGISTRY" --username "$REGISTRY_USER" --password-stdin podman-compose pull app web # timeout обязателен: podman-compose up -d бесконечно ждёт «успокоившийся» # контейнер, а crash-loop без лимита попыток не успокаивается никогда # (рег. run 488: deploy висел на этой команде, rollback не запускался). timeout 90 podman-compose up -d --force-recreate app web for _ in $(seq 1 30); do [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break sleep 2 done [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] \ || { echo "app не стал healthy за 60с" >&2; exit 1; } # Гейт: app/web обязаны идти на только что стянутый из реестра образ # (защита от молчаливого деплоя старого кода). for svc in app web; do ctr="wordpdf-prod-${svc}-1" [ "$(podman inspect -f '{{.Image}}' "$ctr")" = \ "$(podman image inspect "$REGISTRY/wordpdf-${svc}:prod" -f '{{.Id}}')" ] \ || { echo "$ctr запущен не на новом образе $REGISTRY/wordpdf-${svc}:prod" >&2; exit 1; } done # gateway пересоздаётся последним (после healthy app/web): nginx.conf # на каждый деплой рендерится заново, пересоздание применяет его. timeout 60 podman-compose up -d --force-recreate gateway for _ in $(seq 1 10); do curl -fsS -o /dev/null "http://127.0.0.1:9010/actuator/health" 2>/dev/null && break || sleep 1 done curl -fsS "http://127.0.0.1:9010/actuator/health" podman-compose ps REMOTE } | ssh "$@" "$H" bash -s autotests: runs-on: ubuntu-latest needs: deploy steps: - uses: actions/checkout@v5 - name: Setup venv run: | python3 -m venv .venv .venv/bin/pip install -q -r prod-autotests/requirements.txt - name: Check autotest vars and secret env: WORDPDF_BASE_URL: ${{ vars.WORDPDF_BASE_URL }} WORDPDF_MAX_PAGES: ${{ vars.WORDPDF_MAX_PAGES }} WORDPDF_MAX_MB: ${{ vars.WORDPDF_MAX_MB }} WORDPDF_API_KEY: ${{ secrets.WORDPDF_API_KEY }} run: | [ -n "$WORDPDF_BASE_URL" ] && [ -n "$WORDPDF_MAX_PAGES" ] && [ -n "$WORDPDF_MAX_MB" ] && [ -n "$WORDPDF_API_KEY" ] || { echo "Задайте Actions Variables WORDPDF_BASE_URL/WORDPDF_MAX_PAGES/WORDPDF_MAX_MB и Secret WORDPDF_API_KEY — см. GITEA-vars.md" >&2 exit 1 } - name: Run prod autotests env: WORDPDF_BASE_URL: ${{ vars.WORDPDF_BASE_URL }} WORDPDF_MAX_PAGES: ${{ vars.WORDPDF_MAX_PAGES }} WORDPDF_MAX_MB: ${{ vars.WORDPDF_MAX_MB }} WORDPDF_API_KEY: ${{ secrets.WORDPDF_API_KEY }} run: cd prod-autotests && ../.venv/bin/python -m pytest -q . rollback: runs-on: ubuntu-latest needs: [deploy, autotests] if: failure() env: DEPLOY_HOST: ${{ vars.DEPLOY_HOST }} DEPLOY_USER: ${{ vars.DEPLOY_USER }} DEPLOY_DIR: ${{ vars.DEPLOY_DIR }} REGISTRY: ${{ vars.REGISTRY }} WORDPDF_MAX_MB: ${{ vars.WORDPDF_MAX_MB }} WORDPDF_MAX_PAGES: ${{ vars.WORDPDF_MAX_PAGES }} DEPLOY_SSH_KEY: ${{ secrets.DEPLOY_SSH_KEY }} WORDPDF_API_KEY: ${{ secrets.WORDPDF_API_KEY }} steps: # Конфиг рендерится заново (тот же шаг, что у deploy) и перезаливается: откат # не зависит от того, что осталось на хосте после упавшего деплоя (рег. run 482: # rollback на битом compose тоже падал). - name: Render prod stack files run: *render-stack-files - name: Upload compose and roll back run: | set -euo pipefail command -v ssh >/dev/null 2>&1 || { apt-get update -q && apt-get install -y -q openssh-client; } mkdir -p "$HOME/.ssh" && chmod 700 "$HOME/.ssh" printf '%s\n' "$DEPLOY_SSH_KEY" > "$HOME/.ssh/id_deploy" chmod 600 "$HOME/.ssh/id_deploy" set -- -i "$HOME/.ssh/id_deploy" -o StrictHostKeyChecking=accept-new D=$(printf '%q' "$DEPLOY_DIR") H="$DEPLOY_USER@$DEPLOY_HOST" ssh "$@" "$H" "umask 077; mkdir -p $D && cat > $D/docker-compose.yml" < docker-compose.yml { printf 'export DEPLOY_DIR=%q REGISTRY=%q WORDPDF_API_KEY=%q\n' \ "$DEPLOY_DIR" "$REGISTRY" "$WORDPDF_API_KEY" cat <<'REMOTE' set -euo pipefail cd "$DEPLOY_DIR" if [ ! -f .rollback.env ]; then echo "НЕТ .rollback.env — АВТОМАТИЧЕСКИЙ ОТКАТ НЕВОЗМОЖЕН" >&2 exit 1 fi . ./.rollback.env podman tag "$PREV_APP" "$REGISTRY/wordpdf-app:prod" podman tag "$PREV_WEB" "$REGISTRY/wordpdf-web:prod" timeout 90 podman-compose up -d --force-recreate app web for _ in $(seq 1 30); do [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break sleep 2 done [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] \ || { echo "app НЕ healthy после отката" >&2; exit 1; } timeout 60 podman-compose up -d --force-recreate gateway curl -fsS "http://127.0.0.1:9010/actuator/health" REMOTE } | ssh "$@" "$H" bash -s