Ergänze Deploy-Gerüst und verweise die Agentenregeln auf CLAUDE.md.
Co-authored-by: Cursor <cursoragent@cursor.com>
This commit is contained in:
1 parent
ec009a187b
commit
89b35ac480
18 files changed
+880
No files matched your search
@@ -0,0 +1,113 @@
|
||||
# LUF – Bestandsaufnahme Deployment und Server (Stand 2026-11-15)
|
||||
|
||||
Rein lesende Untersuchung über vorhandene SSH-Zugänge. Es wurde nichts geändert, installiert oder deployt.
|
||||
Kennzeichnung: **[V]** = am System verifiziert, **[D]** = nur dokumentiert (Shinkan-Repo), **[?]** = nicht verifiziert.
|
||||
|
||||
## 1. SSH-Bestandsaufnahme
|
||||
|
||||
| Ziel | Zugang | Ergebnis |
|
||||
|---|---|---|
|
||||
| Pi (`raspberrypi5`, 192.168.2.49) | Alias `pi`, User `lars`, Key `id_ed25519` | [V] Login ok. Gruppen `sudo`, `docker`, `adm`. |
|
||||
| llm-node (192.168.2.144) | **Kein Alias in `~/.ssh/config`.** Adresse und User `llmadmin` stammen aus `shinkan-jinkendo/.claude/docs/technical/PROD_DEPLOYMENTS.md`, nicht geraten. | [V] Key-Login als `llmadmin` ok. Funktioniert nur mit `ssh -T … </dev/null`, sonst hängt die Sitzung. Als `lars` abgelehnt. |
|
||||
| strato-fewo | Alias vorhanden | Nicht Teil dieser Untersuchung. |
|
||||
| 192.168.2.63 (NAS) | kein Zugang geprüft | [?] In `known_hosts`. Laut Shinkan-Doku NFS-Server. |
|
||||
|
||||
`sudo` verlangt auf beiden Hosts ein Passwort (llm-node), Firewall und systemd-Details sind deshalb nur teilweise einsehbar.
|
||||
|
||||
## 2. Serverinventar
|
||||
|
||||
| | Pi (Test) | llm-node (Prod) |
|
||||
|---|---|---|
|
||||
| OS [V] | Debian 12 bookworm (**nicht Ubuntu**), Kernel 6.12 rpt | Ubuntu 24.04.5 LTS, Kernel 6.8 |
|
||||
| Architektur [V] | aarch64 | x86_64 |
|
||||
| CPU/RAM [V] | 4 Kerne, 7,9 GiB | 4 Kerne, 15 GiB |
|
||||
| RAM-Lage [V] | **used 5,3 GiB, free 266 MiB, available 2,6 GiB, Swap 2,0/2,0 GiB voll** | used 2,9 GiB, available 12 GiB, Swap ungenutzt |
|
||||
| Disk [V] | NVMe 917 GB, 349 GB frei | 466 GB, 373 GB frei |
|
||||
| Docker [V] | 28.3.1 | 29.9.2, Compose v5.6.1 |
|
||||
| Gitea [V] | nein | **Gitea läuft nativ hier** (`/usr/local/bin/gitea`, Port 3000, User `git`) |
|
||||
| Runner [V] | systemd `gitea-runner`, Label `ubuntu-latest` [D] | `act_runner daemon` als `llmadmin`, Label `linux_host` [D], Config `/var/lib/act_runner/.runner` |
|
||||
| Last [V] | Load 0,3 | Load 0,06 |
|
||||
|
||||
Anwendungen Pi [V]: ca. 50 Container, u. a. alle Dev-Stacks (shinkan-dev, tsumugu, kansho, kairo, buyingagent, karatewiki), außerdem bestehende Prod-Stacks anderer Apps (mitai, kansho, kairo, tsumugu, buyingagent), paperless, netbox, n8n, bookstack, tandoor, portainer, stirling-pdf, homepage, qr-generator; nativ: apache2, mariadb, wayvnc, cups.
|
||||
Anwendungen llm-node [V]: shinkan-prod (ui/api/db), mindnet-dev, researchagent-scout, qdrant, mindnet-embed, code-server, silverbullet; nativ: Gitea, ollama (:11434), 3 uvicorn (8000–8002), 2 streamlit (8501, 8502). NFS-Mounts vom NAS 192.168.2.63: `/mindnet`, `/mnt/nas_backup`, `/srv/shinkan/prod/media`.
|
||||
|
||||
## 3. Port- und Netzwerkübersicht
|
||||
|
||||
### Pi: belegte Host-Ports (Momentaufnahme `ss`, [V])
|
||||
TCP: 22, 80, 86, 631(lo), 3000, 3002, 3004, 3005, 3006, 3007, 3093, 3094, 3096, 3097, 3098, 3099, 3306(lo), 3308, 4000, 5174, 5432, 5433(lo), 5435(lo), 5436(lo), 5678, 5900, 8000, 8001, 8002, 8004, 8005, 8006, 8007(lo), 8080, 8094(lo), 8095, 8096, 8097, 8098(lo), 8099, 9000, 9443 sowie wechselnde Hochports. UDP: 5353 und ein Hochport.
|
||||
Auffällig: 8003, 3003, 5434 (Shinkan-Prod-Ports) sind auf dem Pi seit dem Cutover frei, gehören aber laut Doku zum Rückfallweg [D] und sind damit **reserviert**.
|
||||
|
||||
### llm-node: belegte Host-Ports ([V])
|
||||
TCP: 22, 111, 3000 (Gitea), 3003 (shinkan-ui), 5434(lo, shinkan-db), 6333 (qdrant), 8000–8002 (uvicorn nativ), 8003(lo, shinkan-api), 8010, 8012(lo), 8443, 8501, 8502, 8512, 8990, 11434 (ollama), 13000, 53(lo) sowie Hochports. Kein Listener auf 80/443.
|
||||
Konfiguriert, aber nicht belegt: in den Compose-Dateien unter `~/docker/*` kein zusätzlicher Port. `~/docker/mindnet-dev` u. a. nicht vollständig durchsucht [?].
|
||||
|
||||
### Docker-Netzwerke
|
||||
- Pi: 30 Netzwerke, Subnetze 172.17–172.31 und 192.168.16.0/20 bis 192.168.208.0/20. Neue Compose-Netze vergibt Docker automatisch, Kollisionen sind möglich aber unwahrscheinlich. Kein festes Subnetz setzen.
|
||||
- llm-node: 172.17–172.26 belegt, `shinkan-prod_shinkan-network` = 172.26.0.0/16.
|
||||
- Jedes LUF-Projekt bekommt ein eigenes Compose-Projekt und ein eigenes Netzwerk. Datenbank und PHP-FPM bleiben **ohne veröffentlichte Ports**.
|
||||
|
||||
### Reverse Proxy / TLS
|
||||
**[?] Nicht gefunden.** Auf llm-node lauscht nichts auf 80/443. Auf dem Pi lauscht apache2 auf 80, in `sites-enabled` nur `000-default.conf` ohne ProxyPass. Shinkan-Doku: „Reverse-Proxy für shinkan.jinkendo.de zeigt auf llm-node“ [D], der Proxy sitzt also auf einem dritten System (vermutlich NAS 192.168.2.63, nicht geprüft). TLS-Terminierung, Zertifikate und Routing sind unbekannt. **Vor U0 zu klären:** Wo wird `dev.shinkan.jinkendo.de` terminiert, und kann dort ein Eintrag für LUF angelegt werden?
|
||||
|
||||
### Portkandidaten (nur Momentaufnahme, keine Reservierung)
|
||||
|
||||
| Server | Zweck | Port | Bindung | Prüfung |
|
||||
|---|---|---|---|---|
|
||||
| Pi | LUF-Test Web (nginx-Container) | 3095/tcp | 0.0.0.0 wie die anderen Frontends | [V] frei in `ss` und `docker ps`. Compose-Dateien der Pi-Projekte nicht auf Reservierungen durchsucht [?]. Lückenschluss im Schema 3093–3099. |
|
||||
| llm-node | LUF-Prod Web | 3010/tcp | 0.0.0.0 | [V] frei in `ss` und `docker ps`. Nicht in den Compose-Dateien unter `~/docker` [V]. Native Dienste mit Konfig außerhalb davon nicht geprüft [?]. |
|
||||
| beide | PHP-FPM, PostgreSQL, ggf. Queue/Redis | – | nur Docker-Netz | keine Host-Ports nötig |
|
||||
|
||||
Eine Bindung auf `127.0.0.1` ist nur dann sinnvoll, wenn der Proxy auf demselben Host sitzt. Das ist nicht der Fall [?], daher 0.0.0.0 wie bei `shinkan-ui`.
|
||||
|
||||
## 4. Shinkan-Deployment
|
||||
|
||||
Quelle: `shinkan-jinkendo/.gitea/workflows/` und `.claude/docs/technical/PROD_DEPLOYMENTS.md`.
|
||||
|
||||
| Aspekt | Ist-Zustand | Status |
|
||||
|---|---|---|
|
||||
| Branches | `develop` → Dev, `main` → Prod | [V] Workflows |
|
||||
| Dev-Deploy | `deploy-dev.yml` (push `develop`), Runner `ubuntu-latest` (Pi), `git reset --hard`, `docker compose build --no-cache`, `up -d`, `curl` auf :8098/:3098 | [V] Datei; Lauf nicht geprüft |
|
||||
| Tests | `test.yml` (push/PR `develop`): pytest **im deployten Dev-Container**, py_compile, Frontend-Build, k6, Playwright gegen `dev.shinkan.jinkendo.de`. **Läuft parallel zum Deploy, nicht davor.** | [V] Datei |
|
||||
| Prod-Deploy | `deploy-prod-llm-node.yml` (push `main`, Runner `linux_host` auf llm-node) | [V] Datei, Container laufen [V] |
|
||||
| Gate Tests → Prod | **Keines.** Die Prod-Pipeline hängt an keinem Testlauf (Aussage der Doku; `workflow_run` hat in Gitea nicht funktioniert) [D]. | Anforderung „Tests blockieren Prod“ **nicht erfüllt** |
|
||||
| Image-Verwaltung | **Keine Registry.** Build lokal auf dem Zielhost, `--no-cache`, `reset --hard origin/<branch>`. ARM64/AMD64 ergibt sich daraus automatisch. | [V] Workflows |
|
||||
| Runner-Guard | Hostname und `uname -m` werden geprüft | [V] Workflows |
|
||||
| Secrets/Env | Prod: `/etc/shinkan/prod.env` (Existenz [V], Inhalt nicht gelesen), Pflichtvariable `DB_PASSWORD`; Dev: `.env` im Deploy-Verzeichnis. Gitea-Secrets nur für E2E. | [V]/[D] |
|
||||
| Migration | Beim Container-Start des Backends, Health prüft `schema_complete` | [D] |
|
||||
| Health | Prod: Wiederholungen bis ca. 3 min, `/api/health/ready` mit `status/database/schema_complete`. Dev: einmalig nach `sleep 5`. | [V] Datei |
|
||||
| Rollback | **Kein automatischer.** Rückfall nur manuell (Pi-Workflow per `workflow_dispatch`). Fehlschlag lässt den neuen Stand laufen. | [V] Datei |
|
||||
| Backup | `RECOVERY_CONTRACT.md` im Shinkan-Repo, nicht gelesen. Medien auf NAS. | [D], nicht verifiziert |
|
||||
| Proxy/TLS | siehe Abschnitt 3 | [?] |
|
||||
|
||||
Hinweis: `test.yml` und `deploy-dev.yml` hängen an der festen Umgebung `shinkan-dev`. Der Runner arbeitet im Host-Modus ohne Container-Isolation.
|
||||
|
||||
## 5. Übernahmeplan
|
||||
|
||||
**Unverändert übernehmen**
|
||||
- Gitea Actions im Host-Modus, Runner pro Host mit eindeutigem Label und Runner-Guard.
|
||||
- Branch-Modell `develop`/`main`, `git reset --hard`-Deploy in ein festes Verzeichnis je Umgebung.
|
||||
- Eigenes Compose-Projekt (`-p`), Konfiguration aus Env-Datei außerhalb des Repos mit Vorabprüfung (Datei lesbar, Pflichtvariablen gesetzt, keine Werte ausgeben).
|
||||
- Health-Schleife mit Wiederholung und aussagekräftigem Ready-Endpunkt.
|
||||
|
||||
**Anpassen**
|
||||
- **Tests als Gate:** Test-Job muss vor dem Deploy laufen (`needs:`) und im Test-Workflow selbst auf einem frischen Build laufen, nicht gegen die Dev-Umgebung. Für Prod: Merge auf `main` startet erst nach grünem `develop`-Lauf. Mit Gitea umsetzbar, indem der Prod-Workflow denselben Commit zuerst testet (Tests im Workflow wiederholen) oder per Branch-Schutz mit Pflichtstatus. Entscheidung nötig.
|
||||
- **Rollback:** Vor dem Deploy vorherigen Commit/Image-Tag merken. Bei rotem Health den alten Stand wiederherstellen. Shinkan hat das nicht.
|
||||
- **Laravel statt FastAPI:** Health-Endpunkt (`/up` oder eigener `/health/ready` mit DB-Check) statt `/api/health/ready`. Migration als expliziter Schritt `php artisan migrate --force` vor dem Umschalten, nicht beim Container-Start. Dazu `config:cache`, `queue:restart`.
|
||||
- **Ressourcen Pi:** Mit 266 MiB frei und vollem Swap ist der Pi für einen zusätzlichen Stack mit PostgreSQL grenzwertig. Build mit Composer/npm (`--no-cache`) braucht kurzfristig mehrere hundert MiB. **Risiko hoch, bevor U0 startet mit dem Besitzer klären.**
|
||||
- **Betriebssystem:** Der Pi läuft Debian 12, nicht Ubuntu. Für Docker-Images ohne Folgen, in der Dokumentation korrigieren.
|
||||
- **Test und Prod strikt trennen:** eigene Compose-Projekte (`luf-test`, `luf-prod`), eigene Volumes, eigene Env-Dateien (`/etc/luf/test.env` und `/etc/luf/prod.env`), eigene DB-Passwörter, eigene Medienbereiche (Prod nicht auf dem NAS-Pfad von Shinkan).
|
||||
- Eigene Runner-Labels sind nicht nötig: `ubuntu-latest` (Pi) und `linux_host` (llm-node) wiederverwenden. Beide Runner bedienen dann zusätzlich LUF [V: Runner laufen].
|
||||
|
||||
## 6. U0-Implementierungsgrundlage
|
||||
|
||||
Reihenfolge:
|
||||
1. **Klären (blockierend):** Reverse Proxy/TLS und Domains für LUF (Test und Prod). Freigabe der Ressourcenlage auf dem Pi. Bestätigung, dass llm-node (nicht ein anderer Mini-PC) die Produktion ist.
|
||||
2. Gitea-Repository `Lars/laraundfelix` [V: besteht, `main` gepusht]. Branch `develop` anlegen, Branch-Schutz auf `main`.
|
||||
3. Repo-Gerüst: Laravel 13, PHP 8.4, Filament 5, `docker-compose.yml` (app/php-fpm, nginx, postgres, ohne Host-Port außer nginx), `docker-compose.test.yml`/`docker-compose.prod.yml` als Override.
|
||||
4. Env-Dateien außerhalb des Repos anlegen (`/etc/luf/test.env` auf dem Pi, `/etc/luf/prod.env` auf llm-node). Das ist eine Serveränderung und braucht eine ausdrückliche Freigabe.
|
||||
5. Workflow `deploy-test.yml` (push `develop`): Tests → Build → Deploy → Health, nach Shinkan-Vorbild mit Rollback.
|
||||
6. Workflow `deploy-prod.yml` (push `main`, Label `linux_host`): Guard, Tests auf dem Commit, Build, Migrate, Health, Rollback.
|
||||
7. Ports: Test 3095/tcp (Pi), Prod 3010/tcp (llm-node), nach erneuter Konfliktprüfung unmittelbar vor der Reservierung.
|
||||
|
||||
## Nicht verifiziert
|
||||
Reverse-Proxy-Konfiguration und TLS, Firewall (kein sudo), vollständige systemd-Dienste auf llm-node (Abfrage Timeout), Compose-Dateien anderer Projekte auf dem Pi (Reservierungen), Inhalt von `RECOVERY_CONTRACT.md` und tatsächliche Backup-Läufe, Ergebnisse früherer Workflow-Läufe in Gitea, Runner-Labels (nur Shinkan-Doku), Erreichbarkeit/Zugang zum NAS 192.168.2.63.
|
||||
@@ -0,0 +1,75 @@
|
||||
# LUF – Deployment (Stand 2026-11-15)
|
||||
|
||||
Abgeleitet aus dem Shinkan-Verfahren, siehe [Bestandsaufnahme_Deployment_2026-11-15.md](Bestandsaufnahme_Deployment_2026-11-15.md).
|
||||
**Status: geschrieben, aber noch nicht gelaufen.** Es gibt noch keine Laravel-Anwendung im Repo (kommt mit U0), und lokal stehen weder Docker noch Composer zur Verfügung. Geprüft wurden nur Shell-Syntax und YAML.
|
||||
|
||||
## Ablauf
|
||||
|
||||
| Auslöser | Workflow | Schritte |
|
||||
|---|---|---|
|
||||
| Push auf `feature/**` | `ci-feature.yml` | Commit klonen, Test-Image bauen, Pint und `php artisan test` im Wegwerf-Container |
|
||||
| Push auf `develop` | `deploy-test.yml` | Tests, dann Deploy Test (`luf-test`, Port 3011) |
|
||||
| Push auf `main` | `deploy-prod.yml` | Tests auf genau diesem Commit, dann Deploy Prod (`luf-prod`, Port 3010) |
|
||||
|
||||
- Der Deploy-Job hat `needs: test`. Sind die Tests rot, läuft kein Deploy.
|
||||
- Deployt wird der getestete Commit (`github.sha`), nicht der jeweils neueste Stand des Branches.
|
||||
- `scripts/deploy.sh`: Konfigurationsprüfung, Portkonflikt-Prüfung, Build, DB starten, `migrate --force`, Start, Health (`/up` und Datenbankzugriff). Bei Fehler Rollback auf den letzten erfolgreichen Image-Tag (`.last_good_tag`).
|
||||
- Ein Deploy gleichzeitig pro Host (`flock`), alte Images werden bis auf die letzten Tags entfernt.
|
||||
- **Rollback betrifft nur den Code.** Migrationen werden nicht zurückgenommen. Migrationen müssen daher abwärtskompatibel sein (erst ergänzen, später entfernen).
|
||||
|
||||
## Trennung Test und Prod (beide auf llm-node)
|
||||
|
||||
| | Test | Prod |
|
||||
|---|---|---|
|
||||
| Branch | `develop` | `main` |
|
||||
| Compose-Projekt | `luf-test` | `luf-prod` |
|
||||
| Deploy-Verzeichnis | `/home/llmadmin/docker/luf-test` | `/home/llmadmin/docker/luf-prod` |
|
||||
| Env-Datei | `/etc/luf/test.env` | `/etc/luf/prod.env` |
|
||||
| Web-Port | 3011/tcp | 3010/tcp |
|
||||
| Volumes, Netz, DB | eigene (Projekt-Präfix) | eigene (Projekt-Präfix) |
|
||||
|
||||
Ports aus der Momentaufnahme vom 2026-11-15 (frei laut `ss` und `docker ps`). Das Skript bricht ab, wenn der Port von einem fremden Dienst belegt ist. DB, PHP-FPM, Queue und Scheduler veröffentlichen keine Host-Ports.
|
||||
|
||||
## Medien-Ablage auf dem NAS
|
||||
|
||||
| | Test | Prod |
|
||||
|---|---|---|
|
||||
| NAS-Ordner [?] | `/volume1/luf_media_dev` | `/volume1/luf_media` |
|
||||
| Mountpunkt auf llm-node | `/srv/luf/test/media` | `/srv/luf/prod/media` |
|
||||
|
||||
Der Pfad auf dem NAS ist aus den Ordnernamen abgeleitet und **nicht verifiziert**: Beide Ordner standen am 2026-11-15 nicht in der NFS-Exportliste des NAS (`showmount -e`).
|
||||
|
||||
Aufbau je Umgebung, nach `03_Zielarchitektur.md` (Zeilen 241/242) und `08_Medien_Streaming_Kennzeichnung.md` (Abschnitt 1):
|
||||
|
||||
| Ordner | `queue` (Hintergrundverarbeitung) | `app` (Web-Prozess) |
|
||||
|---|---|---|
|
||||
| `originals/` | lesen und schreiben | **kein Zugriff** (nicht gemountet) |
|
||||
| `derived/` (privat) | lesen und schreiben | nur lesen |
|
||||
| `public/` | lesen und schreiben | nur lesen |
|
||||
|
||||
- Die Trennung geschieht über getrennte Bind-Mounts im Compose. Das NAS selbst unterscheidet nicht zwischen den Containern.
|
||||
- Bind-Mounts mit `create_host_path: false`: Fehlt der NFS-Mount, startet der Container nicht, statt Medien auf die lokale Platte zu schreiben (wie bei Shinkan).
|
||||
- Der Host-Pfad ist in `scripts/deploy.sh` fest an die Umgebung gebunden (`/srv/luf/$LUF_ENV/media`). Test kann nicht auf den Prod-Bestand zeigen. Das Skript prüft vor dem Build, dass der Pfad ein NFS-Mount ist, legt fehlende Unterordner an und macht nach dem Build eine Schreibprobe als `www-data`.
|
||||
- Im Container liegen die Medien unter `/media/{originals,derived,public}`. Die Laravel-Dateisysteme (`config/filesystems.php`) zeigen in U0 darauf.
|
||||
- Die CI-Tests mounten keine Medien (`Storage::fake()`).
|
||||
- Datensicherung: Originale sind laut `11_Betrieb_Sicherheit_Datenschutz.md` kritisch (NAS und außer Haus). Snapshots und Replikation für `luf_media` sind Sache des NAS und noch nicht eingerichtet.
|
||||
|
||||
## Einmalig auf llm-node vorzubereiten (nicht automatisiert, braucht `sudo`)
|
||||
|
||||
1. `sudo mkdir -p /etc/luf && sudo chown llmadmin:llmadmin /etc/luf && sudo chmod 750 /etc/luf`
|
||||
2. `/etc/luf/test.env` und `/etc/luf/prod.env` aus [deploy/luf.env.example](../../deploy/luf.env.example) anlegen, `chmod 640`. Je eigener `APP_KEY` (`php artisan key:generate --show`) und eigenes DB-Passwort. Prod: `APP_ENV=production`, `APP_DEBUG=false`.
|
||||
3. Auf dem Synology zwei Proxy-Einträge: Prod nach `192.168.2.144:3010`, Test nach `192.168.2.144:3011`.
|
||||
4. In Gitea: Branch-Schutz für `main` (nur Pull Request, Freigabe nötig) und `develop`. Repository-Sichtbarkeit prüfen (siehe unten).
|
||||
5. Backup (`borgmatic`) wieder grün, bevor produktiv deployt wird.
|
||||
|
||||
## Annahmen und offene Punkte
|
||||
|
||||
- **Repository-Zugriff der Runner [?]:** Die Workflows klonen `http://192.168.2.144:3000/Lars/laraundfelix.git` ohne Zugangsdaten, wie Shinkan. Ist das Repository privat und der Runner nicht angemeldet, schlägt der Clone fehl.
|
||||
- **Gitea-Actions-Syntax [?]:** `needs:` und `github.sha` sind Standard, wurden aber auf dieser Gitea-Version nicht ausprobiert. `actions/checkout` wird bewusst nicht benutzt.
|
||||
- **Laravel-Gerüst fehlt:** Das Dockerfile erwartet `composer.json`, `composer.lock`, `package.json` und `npm run build` im Repo-Root, außerdem die Standardroute `/up`.
|
||||
- **Zeilenenden:** `.gitattributes` erzwingt LF für Skripte, weil lokal `core.autocrlf=true` gesetzt ist.
|
||||
- **Öffentliche Uploads:** Der Web-Container hat kein `storage`-Volume. Werden Dateien über `storage:link` ausgeliefert, muss das mit U0 geklärt werden.
|
||||
- **Reverse Proxy:** Laravel braucht vertrauenswürdige Proxys (`X-Forwarded-Proto`), sonst stimmen `https`-URLs nicht. In U0 konfigurieren.
|
||||
- **Queue:** Datenbank-Queue (`QUEUE_CONNECTION=database`), kein Redis. Reicht für den Start.
|
||||
- **Gate vor Prod:** Merge-Schutz ist eine Gitea-Einstellung und gehört nicht in die Workflows.
|
||||
- **Umzug Test auf den Pi:** Werte oben in `deploy-test.yml` ändern (Label `ubuntu-latest`, Guard auf `raspberrypi5`/`aarch64`, Pfade, Port). Das Dockerfile baut auch für ARM64. Vorher Speicherlage auf dem Pi klären.
|
||||
Reference in new issue
Block a user