diff --git a/.gitea/workflows/main.yml b/.gitea/workflows/main.yml index 49fb8a9..251a0e7 100644 --- a/.gitea/workflows/main.yml +++ b/.gitea/workflows/main.yml @@ -152,7 +152,10 @@ jobs: services: app: image: $REGISTRY/wordpdf-app:prod - restart: unless-stopped + # Ограниченное число попыток (5, как retries healthcheck'а): битый образ + # не крушит стек бесконечным crash-loop. Синтаксис on-failure:N podman + # переваривает и применяет (проверено: maxtries=N, после исчерпания exited). + restart: on-failure:5 # healthcheck дублируется в compose, а не только в Containerfile: podman # выгружает образы в OCI, где HEALTHCHECK теряется, а gateway в depends_on # ждал бы healthy вечно. wget, не curl: alpine-jre образ curl не содержит. @@ -170,7 +173,7 @@ jobs: WORDPDF_MAX_PAGES: "$WORDPDF_MAX_PAGES" web: image: $REGISTRY/wordpdf-web:prod - restart: unless-stopped + restart: on-failure:5 healthcheck: test: ["CMD-SHELL", "http_proxy= https_proxy= wget -qO /dev/null http://127.0.0.1/ || exit 1"] interval: 10s @@ -188,7 +191,7 @@ jobs: condition: service_healthy web: condition: service_healthy - restart: unless-stopped + restart: on-failure:5 networks: # Подсеть зафиксирована намеренно: nginx резолвит app/web через aardvark-dns # на шлюзе сети (10.112.0.1), адрес обязан быть предсказуемым. Внутренняя @@ -269,7 +272,10 @@ jobs: fi printf '%s' "$REGISTRY_PASSWORD" | podman login "$REGISTRY" --username "$REGISTRY_USER" --password-stdin podman-compose pull app web - podman-compose up -d --force-recreate app web + # timeout обязателен: podman-compose up -d бесконечно ждёт «успокоившийся» + # контейнер, а crash-loop без лимита попыток не успокаивается никогда + # (рег. run 488: deploy висел на этой команде, rollback не запускался). + timeout 180 podman-compose up -d --force-recreate app web for _ in $(seq 1 60); do [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break sleep 2 @@ -286,7 +292,7 @@ jobs: done # gateway пересоздаётся последним (после healthy app/web): nginx.conf # на каждый деплой рендерится заново, пересоздание применяет его. - podman-compose up -d --force-recreate gateway + timeout 120 podman-compose up -d --force-recreate gateway for _ in $(seq 1 10); do curl -fsS -o /dev/null "http://127.0.0.1:9010/actuator/health" 2>/dev/null && break || sleep 1 done @@ -370,14 +376,14 @@ jobs: . ./.rollback.env podman tag "$PREV_APP" "$REGISTRY/wordpdf-app:prod" podman tag "$PREV_WEB" "$REGISTRY/wordpdf-web:prod" - podman-compose up -d --force-recreate app web + timeout 180 podman-compose up -d --force-recreate app web for _ in $(seq 1 60); do [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break sleep 2 done [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] \ || { echo "app НЕ healthy после отката" >&2; exit 1; } - podman-compose up -d --force-recreate gateway + timeout 120 podman-compose up -d --force-recreate gateway curl -fsS "http://127.0.0.1:9010/actuator/health" REMOTE } | ssh "$@" "$H" bash -s