From adcf24fcdeb8ebd1227d8023b91bca6315d8bf14 Mon Sep 17 00:00:00 2001 From: Pjandro Date: Wed, 21 Oct 2026 22:05:18 +0000 Subject: [PATCH 1/2] =?UTF-8?q?ci:=20=D0=BB=D0=B8=D0=BC=D0=B8=D1=82=20?= =?UTF-8?q?=D0=BF=D0=BE=D0=BF=D1=8B=D1=82=D0=BE=D0=BA=20=D0=BF=D0=B5=D1=80?= =?UTF-8?q?=D0=B5=D0=B7=D0=B0=D0=BF=D1=83=D1=81=D0=BA=D0=B0=20=D0=B2=20?= =?UTF-8?q?=D0=BF=D1=80=D0=BE=D0=B4-compose=20=E2=80=94=20on-failure:5=20?= =?UTF-8?q?=D0=B2=D0=BC=D0=B5=D1=81=D1=82=D0=BE=20unless-stopped?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit unless-stopped крутил битый образ бесконечным crash-loop (наблюдено на учениях run 488). on-failure:5 (5 = retries healthcheck'а) ограничен; синтаксис on-failure:N проверен локально на podman-compose: RestartPolicy.MaximumRetryCount=2 в пробе, после исчерпания контейнер остаётся exited. --- .gitea/workflows/main.yml | 9 ++++++--- 1 file changed, 6 insertions(+), 3 deletions(-) diff --git a/.gitea/workflows/main.yml b/.gitea/workflows/main.yml index 49fb8a9..e7bd74e 100644 --- a/.gitea/workflows/main.yml +++ b/.gitea/workflows/main.yml @@ -152,7 +152,10 @@ jobs: services: app: image: $REGISTRY/wordpdf-app:prod - restart: unless-stopped + # Ограниченное число попыток (5, как retries healthcheck'а): битый образ + # не крушит стек бесконечным crash-loop. Синтаксис on-failure:N podman + # переваривает и применяет (проверено: maxtries=N, после исчерпания exited). + restart: on-failure:5 # healthcheck дублируется в compose, а не только в Containerfile: podman # выгружает образы в OCI, где HEALTHCHECK теряется, а gateway в depends_on # ждал бы healthy вечно. wget, не curl: alpine-jre образ curl не содержит. @@ -170,7 +173,7 @@ jobs: WORDPDF_MAX_PAGES: "$WORDPDF_MAX_PAGES" web: image: $REGISTRY/wordpdf-web:prod - restart: unless-stopped + restart: on-failure:5 healthcheck: test: ["CMD-SHELL", "http_proxy= https_proxy= wget -qO /dev/null http://127.0.0.1/ || exit 1"] interval: 10s @@ -188,7 +191,7 @@ jobs: condition: service_healthy web: condition: service_healthy - restart: unless-stopped + restart: on-failure:5 networks: # Подсеть зафиксирована намеренно: nginx резолвит app/web через aardvark-dns # на шлюзе сети (10.112.0.1), адрес обязан быть предсказуемым. Внутренняя From 1d5601d29c077c40b313839042190b1a63a232c1 Mon Sep 17 00:00:00 2001 From: Pjandro Date: Wed, 21 Oct 2026 22:12:03 +0000 Subject: [PATCH 2/2] =?UTF-8?q?ci:=20timeout=20=D0=BD=D0=B0=20podman-compo?= =?UTF-8?q?se=20up=20=D0=B2=20deploy/rollback?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit podman-compose up -d бесконечно ждёт контейнер в crash-loop (run 488: deploy висел 10+ мин, гейт healthy и rollback не запускались; пережил это только ручной остановкой контейнера). 180s на app/web, 120s на gateway. --- .gitea/workflows/main.yml | 11 +++++++---- 1 file changed, 7 insertions(+), 4 deletions(-) diff --git a/.gitea/workflows/main.yml b/.gitea/workflows/main.yml index e7bd74e..251a0e7 100644 --- a/.gitea/workflows/main.yml +++ b/.gitea/workflows/main.yml @@ -272,7 +272,10 @@ jobs: fi printf '%s' "$REGISTRY_PASSWORD" | podman login "$REGISTRY" --username "$REGISTRY_USER" --password-stdin podman-compose pull app web - podman-compose up -d --force-recreate app web + # timeout обязателен: podman-compose up -d бесконечно ждёт «успокоившийся» + # контейнер, а crash-loop без лимита попыток не успокаивается никогда + # (рег. run 488: deploy висел на этой команде, rollback не запускался). + timeout 180 podman-compose up -d --force-recreate app web for _ in $(seq 1 60); do [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break sleep 2 @@ -289,7 +292,7 @@ jobs: done # gateway пересоздаётся последним (после healthy app/web): nginx.conf # на каждый деплой рендерится заново, пересоздание применяет его. - podman-compose up -d --force-recreate gateway + timeout 120 podman-compose up -d --force-recreate gateway for _ in $(seq 1 10); do curl -fsS -o /dev/null "http://127.0.0.1:9010/actuator/health" 2>/dev/null && break || sleep 1 done @@ -373,14 +376,14 @@ jobs: . ./.rollback.env podman tag "$PREV_APP" "$REGISTRY/wordpdf-app:prod" podman tag "$PREV_WEB" "$REGISTRY/wordpdf-web:prod" - podman-compose up -d --force-recreate app web + timeout 180 podman-compose up -d --force-recreate app web for _ in $(seq 1 60); do [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break sleep 2 done [ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] \ || { echo "app НЕ healthy после отката" >&2; exit 1; } - podman-compose up -d --force-recreate gateway + timeout 120 podman-compose up -d --force-recreate gateway curl -fsS "http://127.0.0.1:9010/actuator/health" REMOTE } | ssh "$@" "$H" bash -s