Commit Graph

23 Commits

Author SHA1 Message Date
Pjandro 8b16d64059 fix(infra): безусловная нормализация X-Forwarded-For/Proto/Host на шлюзах; CSP+заголовки безопасности в образ SPA 2026-11-08 16:41:06 +00:00
Pjandro 8061a2fbe7 perf(core): срез декода растра, стримовый OLE-детект; heap -Xms2g -Xmx2g
PR checks / web (pull_request) Successful in 48s
PR checks / java (pull_request) Successful in 1m44s
ChartImageHandler: для не-JPEG без кропа с ppi <= threshold (или без
размера в макете) PictureCompression.compress всегда возвращает null,
но сначала декодирует полный растр ImageIO — решение принимается по
26 байтам заголовка (PNG/GIF/BMP), растр не декодируется вовсе; JPEG
остаётся на штатном пути CR-029 (перекодировка «для размера» сохранена).

OleObjectNormalizer: детект <w:object — потоковым поиском окном 8 KiB
с перекрытием, без readAllBytes()+new String на каждую word/*.xml.

Heap: ENTRYPOINT -Xms2g -Xmx2g (вместо -XX:MaxRAMPercentage=70),
mem_limit 2g -> 3g (compose.yml, compose.dev.yml, прод-heredoc
main.yml) — фиксированный heap + запас под metaspace/native.

Отменённая ветка: переиспользование общей FopFactory между прогонами
копит шрифтовые данные форка FOP на каждый render (замер 2026-11:
после 30 конвертаций ~1,4 ГБ живых byte[] против 17 МБ при
per-conversion сборке, рост live-кучи, Full GC) — фабрика остаётся
per-conversion, инвариант зафиксирован комментарием.

GC-замер (java -jar, -Xms2g -Xmx2g, 30 конвертаций фикстур): young
5 против 7 на main, паузы 12,2 мс против 18,7 мс, Full GC нет на обоих.

Тесты: ChartImageHandlerTest +5 (PNG/GIF/BMP/JPEG/выше порога),
OleObjectNormalizerTest +1 (маркер через границу окна).
2026-11-08 13:17:34 +00:00
Pjandro dfd9a9277a CI: Maven через зеркало Nexus maven-central — job java, сборка образа и локальная машина
PR checks / web (pull_request) Successful in 33s
PR checks / java (pull_request) Successful in 1m6s
Main: tests, deploy, autotests / web (push) Successful in 30s
Main: tests, deploy, autotests / java (push) Successful in 1m2s
Main: tests, deploy, autotests / images-web (push) Successful in 29s
Main: tests, deploy, autotests / images-app (push) Successful in 54s
Main: tests, deploy, autotests / deploy (push) Successful in 1m29s
Main: tests, deploy, autotests / autotests (push) Successful in 37s
Main: tests, deploy, autotests / rollback (push) Has been skipped
2026-10-28 22:25:02 +00:00
Pjandro 93e342f105 CI: pip в job autotests через pypi-proxy на Nexus — сетевой сбой pypi.org больше не откатывает прод
PR checks / web (pull_request) Successful in 32s
PR checks / java (pull_request) Successful in 1m0s
Main: tests, deploy, autotests / web (push) Successful in 37s
Main: tests, deploy, autotests / images-web (push) Successful in 35s
Main: tests, deploy, autotests / java (push) Successful in 1m23s
Main: tests, deploy, autotests / images-app (push) Successful in 47s
Main: tests, deploy, autotests / deploy (push) Successful in 2m15s
Main: tests, deploy, autotests / autotests (push) Successful in 45s
Main: tests, deploy, autotests / rollback (push) Has been skipped
- main.yml: проверка Variables (включая новую PIP_INDEX_URL) — до Setup venv (fail-closed);
  pip install только с индекса Nexus (-i), PIP_TRUSTED_HOST вырезается из URL,
  --timeout 60 --retries 5 на холодный промах прокси
- GITEA-vars.md: Variable PIP_INDEX_URL + раздел «Nexus: pypi-proxy» (репозиторий,
  роль pypi-anonymous, Anonymous User Role IDs) — заводятся до мержа
- AGENTS.md: PIP_INDEX_URL в перечень Variables
2026-10-28 21:56:52 +00:00
Pjandro bd6057a262 fix(ci): инфраструктура — таймауты шлюза, .mvn, pipefail, host-key pinning, push при откате
- gateway/nginx.conf: location /api/ — proxy_read/send_timeout 300s (2-минутные
  конвертации рвались дефолтным read_timeout 60s; паритет с прод-рендером)
- .mvn/.gitkeep: без .mvn launcher ставит maven.multiModuleProjectDirectory=CWD
  и cd wordpdf-core && mvn verify падает на ruleset-not-found (pom:155)
- main.yml «Render prod stack files»: set -euo pipefail первой строкой
  (якорь общий с rollback); mem_limit: 2g у app в heredoc-compose
- deploy/rollback: DEPLOY_KNOWN_HOSTS (Secret) → known_hosts +
  StrictHostKeyChecking=yes вместо accept-new (fail-closed на пустом секрете)
- rollback: podman login + push :prod откаченных образов (реестр обязан
  соответствовать ранящемуся образу); env rollback-job + REGISTRY_USER/PASSWORD
- .dockerignore: .venv/, /.mise/, __pycache__/, .pytest_cache/
- GITEA-vars.md: секрет DEPLOY_KNOWN_HOSTS (ssh-keyscan; завести до мержа)
2026-10-26 00:09:29 +00:00
Pjandro 166bd43ba7 Java 17: maven.compiler.release, контейнер (temurin-17), CI setup-java 2026-10-24 22:07:30 +00:00
Pjandro 05c8cd33d8 Web healthcheck: обнуление всех четырёх прокси-переменных (Containerfile, compose, workflow) 2026-10-24 21:42:50 +00:00
Pjandro b9ce970d26 CI: покрытие — комментарием в PR вместо артефактов (artifact-сервер Gitea непригоден)
PR checks / web (pull_request) Successful in 45s
PR checks / java (pull_request) Successful in 1m1s
Main: tests, deploy, autotests / web (push) Successful in 40s
Main: tests, deploy, autotests / java (push) Successful in 55s
Main: tests, deploy, autotests / images-web (push) Successful in 2m7s
Main: tests, deploy, autotests / images-app (push) Successful in 3m34s
Main: tests, deploy, autotests / deploy (push) Successful in 1m43s
Main: tests, deploy, autotests / autotests (push) Successful in 51s
Main: tests, deploy, autotests / rollback (push) Has been skipped
upload-artifact@v4 не поддерживается, @v3 на этом стенде висит на загрузке
(run 508 — 153 файла, run 509 — один zip; оба отменены в полёте). Вместо
артефактов: Coverage summary пишет coverage-summary.md (он же в step
summary), Comment coverage on PR постит/обновляет комментарий в PR по
маркеру <!-- jacoco-coverage --> (continue-on-error). Шаг продублирован в
main.yml байт-в-байт, там if не срабатывает. HTML — локально
target/site/jacoco.
2026-10-24 18:54:53 +00:00
Pjandro f702b704ca CI: репорты покрытия одним zip — v1-протокол Gitea грузит файл за запрос
PR checks / web (pull_request) Has been cancelled
PR checks / java (pull_request) Has been cancelled
2026-10-24 18:48:00 +00:00
Pjandro 3886b152e0 CI: upload-artifact v4 -> v3 — артефакт-сервер Gitea не поддерживает протокол v4
PR checks / web (pull_request) Successful in 39s
PR checks / java (pull_request) Has been cancelled
2026-10-24 18:41:51 +00:00
Pjandro 8a07597d4c JaCoCo: гейт покрытия 90% строк + сводка/артефакты репортов в CI
PR checks / web (pull_request) Successful in 54s
PR checks / java (pull_request) Failing after 1m9s
Корневой pom: jacoco-maven-plugin 0.8.15 (prepare-agent, report+check на
verify, report раньше check — отчёт готов даже при провале гейта), surefire
argLine через @{argLine}. pr.yml/main.yml job java: Coverage summary в
step summary + артефакт jacoco-html (оба шага if: always()).

Тесты ради гейта (23 класса / 218 @Test): app ConversionService/
ApiExceptionHandler/ConversionTimeout +1 в ConvertController; core
DrawMlColor/DrawMlText + инкременты ChartSpec/PresetGeometry.
Покрытие: core 91,0%, app 92,9% строк.
2026-10-24 18:39:44 +00:00
Pjandro b768715363 CI: разбить job images на images-app и images-web для параллельной сборки образов
PR checks / java (pull_request) Successful in 45s
PR checks / web (pull_request) Successful in 1m8s
2026-10-22 18:05:57 +00:00
Pjandro 2e06189bfb revert drill + тайминги по фактическому старту (2.6с, а не 45с)
PR checks / web (pull_request) Successful in 31s
PR checks / java (pull_request) Successful in 1m28s
Учения раунда 2 (run 492) отработали: deploy failure (fail-fast) -> rollback
success -> прод на прежнем образе. Путь отката проверен end-to-end. Возврат
/app/app.jar.

Тайминги: замер на проде "Started WordPdfApplication in 2.577 seconds" —
start_period 45s -> 10s (podman не считает health до его истечения, он и был
главной задержкой), гейты healthy 120s -> 60s, timeout up 180/120 -> 90/60
(deploy и rollback), синхронно в Containerfile, compose.yml, compose.dev.yml.
2026-10-21 22:26:32 +00:00
Pjandro 1d5601d29c ci: timeout на podman-compose up в deploy/rollback
PR checks / java (pull_request) Successful in 53s
PR checks / web (pull_request) Successful in 31s
podman-compose up -d бесконечно ждёт контейнер в crash-loop (run 488: deploy
висел 10+ мин, гейт healthy и rollback не запускались; пережил это только
ручной остановкой контейнера). 180s на app/web, 120s на gateway.
2026-10-21 22:12:52 +00:00
Pjandro adcf24fcde ci: лимит попыток перезапуска в прод-compose — on-failure:5 вместо unless-stopped
unless-stopped крутил битый образ бесконечным crash-loop (наблюдено на учениях
run 488). on-failure:5 (5 = retries healthcheck'а) ограничен; синтаксис
on-failure:N проверен локально на podman-compose: RestartPolicy.MaximumRetryCount=2
в пробе, после исчерпания контейнер остаётся exited.
2026-10-21 22:12:52 +00:00
Pjandro c325b6eba3 ci: PyYAML в runner-образе нет — бутстрап валидатора (pip → apt)
PR checks / web (pull_request) Successful in 33s
PR checks / java (pull_request) Successful in 1m34s
Run 484: deploy и rollback умерли на yaml.safe_load (ModuleNotFoundError),
прод не тронут. Проверено в docker.gitea.com/runner-images:ubuntu-latest:
python3 без yaml, pip3 и apt-get есть; ssh/scp есть. Цепочка import → pip →
pip --break-system-packages → apt-get python3-yaml, финальная валидация —
до переноса файлов на прод.
2026-10-21 21:34:47 +00:00
Pjandro 5614d5d891 ci: рендер прод-конфигов через ssh, не через appleboy/ssh-action
PR checks / java (pull_request) Successful in 49s
PR checks / web (pull_request) Successful in 1m10s
appleboy/drone-ssh исполняет script построчно: вставляет guard
DRONE_SSH_PREV_COMMAND_EXIT_CODE после каждой строки и срезает отступы —
heredoc на проде превращался в невалидный YAML («mapping values are not
allowed here», run 482), deploy падал на pull, rollback на битом compose
тоже падал. Теперь файлы рендерятся обычным bash-шагом в workspace runner'а
(с YAML-валидацией до отправки), переносятся ssh-ом (cat > файл) и удалённая
цепочка идёт bash -s с export-строкой (секреты — только окружением). Rollback
рендерит compose заново (YAML-якорь — тот же шаг) и не зависит от остатков
на хосте.
2026-10-21 21:29:21 +00:00
Pjandro e85505529c ci: порт gateway, подсеть и резолвер — литералы workflow, новых Variables нет
PR checks / java (pull_request) Successful in 48s
PR checks / web (pull_request) Successful in 1m19s
WORDPDF_PORT/PROD_SUBNET/PROD_GW — внутренняя геометрия стека, не координаты
стенда: зашиты в рендер напрямую, job deploy проверяет только прежние
Variables (DEPLOY_*/REGISTRY/WORDPDF_MAX_*).
2026-10-21 21:11:48 +00:00
Pjandro 55326bcb12 ci: прод-конфигурация целиком в workflow — job deploy рендерит compose/nginx из Variables/Secrets
PR checks / web (pull_request) Successful in 1m14s
PR checks / java (pull_request) Successful in 1m57s
Прод-хост не хранит ни конфигов, ни секретов: docker-compose.yml и nginx.conf
генерируются job deploy на каждый деплой (новые Variables WORDPDF_PORT/
PROD_SUBNET/PROD_GW вместо литералов в yml), API-ключ подаётся окружением и на
диск не пишется; restart.sh и .env удаляются как наследие ручного setup.
Healthcheck app — wget (alpine-jre образ curl не содержит: curl-хелсчек давал
вечный unhealthy и висящий up, run 479). Gateway пересоздаётся, а не рестартует.
Rollback — retag из .rollback.env + пересоздание app/web/gateway.
2026-10-21 21:07:23 +00:00
Pjandro 1e20949a98 refactor: лимит размера входа во всех слоях — MAX_MB (МБ=MiB), байты вычисляются в checkInput
PR checks / java (pull_request) Successful in 1m7s
PR checks / web (pull_request) Successful in 43s
Ядро: WordPdfSettings.MAX_INPUT_MB=5, ConvertOptions.maxMb,
WordPdfValidator.checkInput(byte[], long maxMb) — единственная точка
пересчёта МБ→байты, сообщение «Файл больше N МБ: X байт > Y байт».
Приложение: свойство wordpdf.max-mb (env WORDPDF_MAX_MB, relaxed binding).
CI/конфиг/автотесты/доки: WORDPDF_MAX_BYTES → WORDPDF_MAX_MB (значение 5).
2026-10-20 20:34:01 +00:00
Pjandro 33a014c307 ci: единый источник лимитов прода — Gitea Variables WORDPDF_MAX_PAGES/WORDPDF_MAX_BYTES
PR checks / java (pull_request) Successful in 1m12s
PR checks / web (pull_request) Successful in 43s
deploy/rollback экспортируют обе Variables в окружение прод-compose (app
пересоздаётся с лимитами), autotests сверяют проверки с ними же (fail-closed
без обеих). Новый автотест test_oversized_vs_limit ловит расхождение
байтового лимита сервера и ожидания; fixture max_bytes (дефолт 5242880).
GITEA-vars.md/AGENTS.md приведены к фактическим лимитам 100 стр./5 MiB.
2026-10-20 20:21:56 +00:00
Pjandro c75e8894a5 ci: образы собирает CI и пушит в Nexus-реестр, прод-деплой = pull
PR checks / java (pull_request) Successful in 3m29s
PR checks / web (pull_request) Successful in 45s
- main.yml: новый job images (docker build + push, теги prod + sha-<7>,
  DOCKER_BUILDKIT=0 — daemon за раннером podman); deploy: needs images,
  restart.sh --deploy, .rollback.env без PREV_COMMIT (git-клон src на проде
  больше не нужен); rollback: retag image ID на реестровые :prod
- GITEA-vars.md: Secrets REGISTRY_USER/REGISTRY_PASSWORD, Variable REGISTRY
- AGENTS.md: CI/CD и Деплой переписаны под pull-поток
2026-10-20 18:27:43 +00:00
Pjandro fadaee76cf ci: Gitea workflows (PR checks, main deploy+rollback), GITEA-vars guide; координаты стенда — в Gitea Variables/Secrets
PR checks / java (pull_request) Successful in 1m8s
PR checks / web (pull_request) Successful in 48s
2026-10-20 17:38:41 +00:00