From 363ecdfd0a0460589aa0a2370e08e0a64e07c217 Mon Sep 17 00:00:00 2001 From: Stommer Date: Sun, 25 Oct 2026 10:24:11 +0100 Subject: [PATCH] =?UTF-8?q?Starte=20test.yml=20wieder=20mit=20dem=20Push?= =?UTF-8?q?=20und=20warte=20auf=20den=20Checkout=20des=20Dev-Deploys,=20we?= =?UTF-8?q?il=20workflow=5Frun=20hier=20nicht=20ausl=C3=B6st.?= MIME-Version: 1.0 Content-Type: text/plain; charset=UTF-8 Content-Transfer-Encoding: 8bit Co-Authored-By: Claude Sonnet 5.5 --- .gitea/workflows/test.yml | 52 ++++++++++++++++++++++++++++++--------- docs/DEPLOYMENT.md | 6 ++--- 2 files changed, 43 insertions(+), 15 deletions(-) diff --git a/.gitea/workflows/test.yml b/.gitea/workflows/test.yml index be0d1eb..c51aa39 100644 --- a/.gitea/workflows/test.yml +++ b/.gitea/workflows/test.yml @@ -1,16 +1,15 @@ name: Test Suite -# Runs once per push, after "Deploy Development" has updated the checkout it tests. -# A push trigger here would start a second run that races the deploy. +# One run per push. The deploy starts at the same time and updates the checkout this suite tests, +# so the jobs wait until that checkout contains the pushed commit. A workflow_run trigger +# (after the deploy) did not start reliably on this Gitea, see git log of this file. on: - workflow_run: - workflows: ["Deploy Development"] - types: [completed] + push: + branches: [develop] workflow_dispatch: jobs: pytest-backend: - if: ${{ github.event_name != 'workflow_run' || github.event.workflow_run.conclusion == 'success' }} runs-on: ubuntu-latest steps: - name: pytest against Dev Postgres (tsumugu_test) @@ -19,6 +18,19 @@ jobs: APP_DIR="/home/lars/docker/tsumugu-dev" COMPOSE_FILE="docker-compose.dev-env.yml" echo "pytest uses Dev Postgres (${APP_DIR}); event=${{ github.event_name }}" + if [ "${{ github.event_name }}" = "push" ]; then + for i in $(seq 1 180); do + if git -c safe.directory='*' -C "$APP_DIR" merge-base --is-ancestor "${{ github.sha }}" HEAD 2>/dev/null; then + echo "Dev checkout contains ${{ github.sha }} (attempt $i)" + break + fi + if [ "$i" -eq 180 ]; then + echo "the deploy did not reach ${{ github.sha }} within 15 minutes" + exit 1 + fi + sleep 5 + done + fi cd "$APP_DIR" for i in $(seq 1 60); do if [ -f "$APP_DIR/backend/pytest.ini" ] && docker compose -f "$COMPOSE_FILE" exec -T backend true 2>/dev/null; then @@ -59,27 +71,43 @@ jobs: ' smoke-dev: - if: ${{ github.event_name != 'workflow_run' || github.event.workflow_run.conclusion == 'success' }} + # After pytest, so the deploy that started with the push has normally finished. The health check retries. + needs: pytest-backend runs-on: ubuntu-latest steps: - name: Non-destructive smoke against the running Dev app run: | set -e echo "live Dev API (tsumugu_dev), read-only health" - curl -sf http://localhost:8094/api/health - echo - curl -sf http://localhost:3094/api/health - echo + for url in http://localhost:8094/api/health http://localhost:3094/api/health; do + for i in $(seq 1 30); do + if curl -sf "$url"; then echo; break; fi + if [ "$i" -eq 30 ]; then echo "no health answer from $url"; exit 1; fi + sleep 10 + done + done echo "LAN smoke OK. Public URL after TLS: https://dev.tsumugu.jinkendo.de" frontend-build: - if: ${{ github.event_name != 'workflow_run' || github.event.workflow_run.conclusion == 'success' }} runs-on: ubuntu-latest steps: - name: Frontend production build on Dev checkout run: | set -e APP_DIR="/home/lars/docker/tsumugu-dev" + if [ "${{ github.event_name }}" = "push" ]; then + for i in $(seq 1 180); do + if git -c safe.directory='*' -C "$APP_DIR" merge-base --is-ancestor "${{ github.sha }}" HEAD 2>/dev/null; then + echo "Dev checkout contains ${{ github.sha }} (attempt $i)" + break + fi + if [ "$i" -eq 180 ]; then + echo "the deploy did not reach ${{ github.sha }} within 15 minutes" + exit 1 + fi + sleep 5 + done + fi cd "$APP_DIR/frontend" npm ci npm run build diff --git a/docs/DEPLOYMENT.md b/docs/DEPLOYMENT.md index ad1827c..82010ca 100644 --- a/docs/DEPLOYMENT.md +++ b/docs/DEPLOYMENT.md @@ -30,7 +30,7 @@ Unter `/home/lars/docker/` legt der Lauf nur diese zwei Verzeichnisse an: |----------|---------|--------| | `deploy-dev.yml` | Push `develop` | Deploy nach `/home/lars/docker/tsumugu-dev`, Health `localhost:8094` und `localhost:3094` | | `deploy-prod.yml` | Push `main` | Deploy nach `/home/lars/docker/tsumugu`, Health `localhost:8007` und `localhost:3007` | -| `test.yml` | Nach erfolgreichem Dev-Deploy (`workflow_run`), manuell | Pytest gegen `tsumugu_test` auf der Dev-Postgres, Smoke der laufenden Dev-App, Frontend-Build | +| `test.yml` | Push auf `develop` (wartet, bis der Dev-Checkout den Commit enthält), manuell | Pytest gegen `tsumugu_test` auf der Dev-Postgres, Smoke der laufenden Dev-App, Frontend-Build | Gearbeitet wird auf `develop`. Production entsteht nur durch einen Merge-Commit `develop` → `main` (`git merge --no-ff develop` auf `main`) und den anschließenden Push von `main`. Kein Fast-Forward, kein direkter Commit auf `main`, kein manuelles `git pull` auf dem Prod-Checkout. Gitea (`deploy-prod.yml`) ist der einzige Prod-Schreibpfad für Code. @@ -50,11 +50,11 @@ Diese Punkte sind im [Code-Review](review/06_BEFUNDE.md) beschrieben. Sie stehen |---|---|---|---| | Betreiberkonto | Auf einer leeren Datenbank legt die öffentliche Anmeldeseite das Betreiberkonto an. Keine MFA | Nach jedem Neuaufsetzen einer Umgebung sofort selbst anmelden, bevor die Adresse öffentlich erreichbar ist. Alternativ vorher `docker compose exec backend python -m app.cli create-account --email … --name … --password …` ausführen | R-04 | | Sicherung | Es gibt kein Backup von Datenbank und Volume `tsumugu-media`/`dev-tsumugu-media` und keinen geprobten Restore | Laut technischer Spezifikation 8.2 nur synthetische Daten in Produktion, bis Paket P7 umgesetzt ist | R-21 | -| Release | `deploy-prod.yml` baut bei jedem Push auf `main` neu. Tests laufen nur auf `develop` nach dem Dev-Deploy | Vor dem Merge nach `main` den grünen `test.yml`-Lauf zum selben Stand prüfen | R-21, R-27 | +| Release | `deploy-prod.yml` baut bei jedem Push auf `main` neu. Tests laufen nur auf `develop`, sobald der Dev-Deploy den Commit ausgecheckt hat | Vor dem Merge nach `main` den grünen `test.yml`-Lauf zum selben Stand prüfen | R-21, R-27 | | Datenbankzugang | Das Backend migriert beim Start mit dem Owner-Zugang. Die Runtime-Rolle `tsumugu_runtime` erhält dasselbe Passwort wie `DB_USER` | Ein Wechsel von `DB_PASSWORD` ändert beim nächsten Start beide Rollen | R-09 | | Quellen-Geheimnisse | Paperless-Token und IMAP-Passwörter stehen unverschlüsselt in der Tabelle `connectors` | Datenbank-Dumps wie Zugangsdaten schützen | R-05 | | Sessions | 14 Tage gültig, keine Leerlaufabmeldung, kein Passwortwechsel in der Anwendung | Passwort nur über die Datenbank oder ein neues Konto änderbar | R-08 | -| Testläufe | `test.yml` startet je Push einmal, nach dem Dev-Deploy; alle Läufe teilen die Datenbank `tsumugu_test`, und das Image bleibt das Laufzeitimage | Zwei manuelle Läufe gleichzeitig vermeiden; sie würden sich die Datenbank wegnehmen | R-27 | +| Testläufe | `test.yml` startet je Push einmal, parallel zum Deploy, und wartet auf dessen Checkout (`workflow_run` startete auf dieser Gitea nicht verlässlich); alle Läufe teilen die Datenbank `tsumugu_test`, und das Image bleibt das Laufzeitimage | Zwei manuelle Läufe gleichzeitig vermeiden; sie würden sich die Datenbank wegnehmen | R-27 | ---