wiki: Traefik edge hardening — systems/traefik-edge.md new, index+log updated

This commit is contained in:
Dominik Schön
2026-11-21 14:51:22 +00:00
parent 9927bbc02a
commit 362406f90a
3 changed files with 45 additions and 0 deletions
+24
View File
@@ -1,3 +1,9 @@
## [2026-11-21] Traefik-Edge CT99999 | Hardening live (Rate-Limit + Security-Headers + IP-Block + Dashboard aus)
- **Verbessert:** `security.yml` (waf-rate-limit 50/s burst 100 + waf-security-headers) auf allen 14 Router; `nftables.conf` 7 Scanner-IPs drop; `traefik.yaml` api.dashboard:false; `catchall-tcp.yml` gelöscht (HostSNI(*)); `seafile_old`-Route dead.
- **GitOps:** Branch `gitops/2026-11-21-traefik-edge-hardening` (canonical/main), `pve/traefik-ct99999/` — `security.yml`, `nftables.conf` neu; `catchall-tcp.yml` raus. README aktualisiert.
- **Alert:** Cron `8806d350ee68` (edge-alert.sh, 15m, deliver origin) — external 4xx >25 in 10 min.
- **Learning:** File provider swallows malformed middleware (`ipStrategy` nested under `sourceCriterion`, sonst `cannot be a standalone element`) → alle Router 404; nur `providerName=file`-Fehler im Log. Restart + Log-Grep + Header-Probe vor jeder Freigabe. SolDoc `bug-fixes/2026-11-21-traefik-file-provider-middleware-silent-404.md`; Wiki `systems/traefik-edge.md`. Important: Hot-Reload unzuverlässig — restart.
# Memory Log
## [2026-11-20] Schlafzimmerlicht | Retained MQTT-Command + HA-Restart-Loop als Ursache
@@ -1069,6 +1075,24 @@
Ressourcen-Listen vervollständigen; `na-vm301` (und `na-vm310`) sind Pflaster auf dieser Lücke und sollten weg.
- Neue Bilanz: ms-a2-1 frei 23,8 GB, proxmox7 11 GB, proxmox4 7,5 GB, proxmox6 6,1 GB, proxmox5 5,7 GB.
## 2026-11-21 — Recipe-Scraper auf 500k erweitert (+ Extraktor-Bug)
- `recipe_scraper_v8_intl.py`: **TARGET 200.000 → 500.000**, Quellen **18 → 44** (26 neue,
live validiert). Verworfen: delish (nur .xml.gz-Index), essen-und-trinken und chefkoch
(robots.txt ohne Sitemap — deutsche Inhalte kommen aus den separaten v4-Skripten).
Korrigiert: ambitiouskitchen/seriouseats/simplyrecipes/thespruceeats (Sitemap-Index statt
geratener post-sitemapN-Namen, `url_filter` entfernt weil Dotdash-URLs kein /recipe enthalten).
- **Extraktor-Bug:** der JSON-LD-Regex verlangte `type="application/ld+json"` **mit
Anführungszeichen**. Seiten mit unquoted Attributen (`<script type=application/ld+json>`,
z.B. loveandlemons) lieferten dadurch 0 Rezepte — still, ohne Fehler. Regex akzeptiert jetzt
beide Formen (2 Stellen). Fund: 15/15 „errors" bei 579 KB gültigem HTML.
- Durchsatz: Soft-Deadline je Quelle 6 → 12 min, Budget-Deckel 2000 → 5000, **globaler
3-h-Guard** (`RUN_DEADLINE_S`) neu, damit der Nachtlauf begrenzt bleibt.
- Verifiziert end-to-end: loveandlemons extrahiert („Spinach and Soba Noodle Soup"), DB
200.000 → 200.008. Offene Queue der Altquellen: 107.504 URLs; neue Quellen ~92k (Test-Cap).
- Risiko notiert: eine `Lost connection to MySQL server during query (timed out)` beim
Batch-Insert (MaxScale) — bei höherem Volumen Batch-Größe/Retry prüfen.
## 2026-11-17 — PVEHighCPU n5pro: 720p-Batch, nicht der Cluster
- Alarm `pve_cpu_usage_ratio{node="n5pro"}` 0,91 über 43 h. Ursache: **manueller Batch**