Compare commits

...

2 Commits

Author SHA1 Message Date
Pjandro 1d5601d29c ci: timeout на podman-compose up в deploy/rollback
PR checks / java (pull_request) Successful in 53s
PR checks / web (pull_request) Successful in 31s
podman-compose up -d бесконечно ждёт контейнер в crash-loop (run 488: deploy
висел 10+ мин, гейт healthy и rollback не запускались; пережил это только
ручной остановкой контейнера). 180s на app/web, 120s на gateway.
2026-10-21 22:12:52 +00:00
Pjandro adcf24fcde ci: лимит попыток перезапуска в прод-compose — on-failure:5 вместо unless-stopped
unless-stopped крутил битый образ бесконечным crash-loop (наблюдено на учениях
run 488). on-failure:5 (5 = retries healthcheck'а) ограничен; синтаксис
on-failure:N проверен локально на podman-compose: RestartPolicy.MaximumRetryCount=2
в пробе, после исчерпания контейнер остаётся exited.
2026-10-21 22:12:52 +00:00
+13 -7
View File
@@ -152,7 +152,10 @@ jobs:
services:
app:
image: $REGISTRY/wordpdf-app:prod
restart: unless-stopped
# Ограниченное число попыток (5, как retries healthcheck'а): битый образ
# не крушит стек бесконечным crash-loop. Синтаксис on-failure:N podman
# переваривает и применяет (проверено: maxtries=N, после исчерпания exited).
restart: on-failure:5
# healthcheck дублируется в compose, а не только в Containerfile: podman
# выгружает образы в OCI, где HEALTHCHECK теряется, а gateway в depends_on
# ждал бы healthy вечно. wget, не curl: alpine-jre образ curl не содержит.
@@ -170,7 +173,7 @@ jobs:
WORDPDF_MAX_PAGES: "$WORDPDF_MAX_PAGES"
web:
image: $REGISTRY/wordpdf-web:prod
restart: unless-stopped
restart: on-failure:5
healthcheck:
test: ["CMD-SHELL", "http_proxy= https_proxy= wget -qO /dev/null http://127.0.0.1/ || exit 1"]
interval: 10s
@@ -188,7 +191,7 @@ jobs:
condition: service_healthy
web:
condition: service_healthy
restart: unless-stopped
restart: on-failure:5
networks:
# Подсеть зафиксирована намеренно: nginx резолвит app/web через aardvark-dns
# на шлюзе сети (10.112.0.1), адрес обязан быть предсказуемым. Внутренняя
@@ -269,7 +272,10 @@ jobs:
fi
printf '%s' "$REGISTRY_PASSWORD" | podman login "$REGISTRY" --username "$REGISTRY_USER" --password-stdin
podman-compose pull app web
podman-compose up -d --force-recreate app web
# timeout обязателен: podman-compose up -d бесконечно ждёт «успокоившийся»
# контейнер, а crash-loop без лимита попыток не успокаивается никогда
# (рег. run 488: deploy висел на этой команде, rollback не запускался).
timeout 180 podman-compose up -d --force-recreate app web
for _ in $(seq 1 60); do
[ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break
sleep 2
@@ -286,7 +292,7 @@ jobs:
done
# gateway пересоздаётся последним (после healthy app/web): nginx.conf
# на каждый деплой рендерится заново, пересоздание применяет его.
podman-compose up -d --force-recreate gateway
timeout 120 podman-compose up -d --force-recreate gateway
for _ in $(seq 1 10); do
curl -fsS -o /dev/null "http://127.0.0.1:9010/actuator/health" 2>/dev/null && break || sleep 1
done
@@ -370,14 +376,14 @@ jobs:
. ./.rollback.env
podman tag "$PREV_APP" "$REGISTRY/wordpdf-app:prod"
podman tag "$PREV_WEB" "$REGISTRY/wordpdf-web:prod"
podman-compose up -d --force-recreate app web
timeout 180 podman-compose up -d --force-recreate app web
for _ in $(seq 1 60); do
[ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] && break
sleep 2
done
[ "$(podman inspect -f '{{.State.Health.Status}}' wordpdf-prod-app-1)" = healthy ] \
|| { echo "app НЕ healthy после отката" >&2; exit 1; }
podman-compose up -d --force-recreate gateway
timeout 120 podman-compose up -d --force-recreate gateway
curl -fsS "http://127.0.0.1:9010/actuator/health"
REMOTE
} | ssh "$@" "$H" bash -s