Auto-sync: 2026-11-06

This commit is contained in:
Dominik Schön
2026-11-06 22:00:26 +00:00
parent 6a310538ff
commit 3d48fe6628
6 changed files with 73 additions and 2 deletions
+47
View File
@@ -1568,3 +1568,50 @@ Vorher quarantänierte der Watcher sie („System-Sender mit unzulaessigem type
Die letzten drei `task_withdrawn` sind vollstaendig JSON.
- Transport-Antipattern bleibt: Dateien als `TEIL x/3`-Prompt-Chunks durch Agenten schleusen
sprengt das 30-min-Turn-Limit; korrekt ist RWX `fleet-artifacts` oder gitea-mcp.
## 06.11.2026 — devops-OOM bewiesen (4Gi) + Heiler-Sturm gestoppt
- **devops-Sandbox** starb ab 00:30Z alle ~10 min. Waechter (15-s-Raster,
`/tmp/devops-death-watch.log`) hat den Kill festgehalten: `exitCode 137, reason OOMKilled,
finishedAt 05:16:50Z` bei `startedAt 05:07:23Z` — **2-Gi-Limit** gesprengt (Peaks vorher
1721-1848 MB). Fix: `limits.memory: 4Gi` bei Request 2Gi (Burstable, worker-03 hatte 7 GiB
frei), Live-Patch am CR + `stop`->`start` (bei `PHASE Error` immer erst stop).
- **Heiler 0.2** (Commit `1a2ff36`): Eskalation je Sandbox **einmal je 12 h**
(`ESCALATION_REPEAT_S=43200`), `attempts_reset` nach erfolgreicher Heilung (Erfolge zaehlen
nicht mehr gegen das Limit), `attempts_prune` erhaelt den `escalations`-Block.
Vorher: 122 identische ceo-fyis „Sandbox devops bleibt tot" (alle 2 min ab 02:26Z).
- **ceo-Inbox 133 -> 12** (122 Duplikate via `cancel_task` zurueckgezogen, 1 Aufloesungs-fyi
`c1f46447`).
- **Messartefakt-Lehre:** „gitops 0 tok/s" war falsch — 2-min-Rate kann zwischen Turns legitim 0
sein; `rate[5m]`=407, Spitze 5440 tok/s, `increase[1h]`=6,49 Mio Tokens. Vor dem Handeln
Quelle pruefen. cto/cmo mit 0 tok/s sind echt idle (HB frisch, CPU ~0, keine offenen Tasks).
- **Offener Engpass:** `tower-owner` 57 offene Tasks (Owner-Lane), gitops 73, devops 65.
## 06.11. Follow-up: 8Gi, Watcher-TOCTOU, Heiler-Restore (06:05-06:10Z)
- **devops+gitops auf 8Gi** (Owner-Go). 4Gi reichte nicht: 2. OOM um 05:42:06Z, echter
Peak `container_memory_max_usage_bytes`=3809 MB (30-s-Raster verpasst die Kill-Spitze).
`max_usage` ist die verlaessliche Metrik, nicht `working_set`-max_over_time.
- **Auto-Heilung war inaktiv** (Unit+Skript fehlten auf mgmt-runner-01). Restore per
base64-Pipe (scp ging still verloren; 0-Byte-Unit = systemd "masked").
Rollout-Guard-Bug: `sp.get("replicas",0)` → Default 1.
- **fleet-spool-watcher crashloopte** (FileNotFoundError, TOCTUV zwischen Listing und
Lesen; Verschiebungen nach _withdrawn/ killen den Watcher) → **Dispatch-Ausfall**.
Fix 0.39 (Commit 1007d96, Digest 793e3425...): except FileNotFoundError: continue.
- **Heiler-State-Pfad:** /var/lib/fleet-sandbox-healer/attempts.json ("healer"!). Alte
3 Versuche blockierten; Reset noetig.
- **Kill-Test bewiesen:** Pod-Kill → GEHEILT nach ~3 min, Ready, 8Gi aktiv.
- Offen: Guard schweigt bei Dauer-Rollout endlos; devops-3,8-GiB-Ursache ungeklaert.
## 06.11. PR-Watch (board-service 0.32.1)
- **Vorfall:** Task `6877bf8c` (PR #2 Nachbesserung) endete `completed` mit Notiz
„Arbeitsstand/Sichtung", ohne Commit. Branch-Head `ed790b26` blieb 23 h stehen,
4× `REQUEST_CHANGES` offen, niemand hat es bemerkt.
- **Ursache:** `complete_task` prüft kein Artefakt; kein Sweep liest den PR-Zustand.
- **Fix:** `pr_watch.py` + Thread im board-service (Commit 449e9b0/6985c84,
Digests 2c426283 / 87f3dede). Kriterium: Änderungswunsch offen **und** Head älter
als 4 h; ein Task je `(repo,PR,SHA)`; Marker `pr-stall:<repo>#<pr>:<sha12>`;
Cooldown 6 h aus dem Journal; Empfänger `cto` (board-service darf nur `review`).
- **E2E:** 12:23 Task an cto → 12:26 cto→devops „Rework PR 2" (`submitted`).
- **Offen:** gitea-mcp-Token hat kein `read:organization` (403 bei list repositories).
+1
View File
@@ -153,6 +153,7 @@ Aggregation: `sensor.pv_production` = min_max über 5 Sensoren (2×SMA grid_powe
- **Kollateral 12.10.:** Automation „Dimmer Schlafzimmerlicht" (1697532906675) von HA deaktiviert (Trigger-Entity bei setup_error aus Registry geräumt). Analyse: leere Action-Hülle ohne Wirkung — echte Logik in „Helligkeit Schlafzimmerlicht"/`script.adjust_lights_schlafzimmer` (intakt). Empfehlung: löschen.
- **Migrations-Kandidat:** kingsleyadam/local-abbfreeathome-hass (REST+WS statt XMPP; SysAP-Kompatibilität verifiziert: REST 200, WS-Frame-Empfang ok, restApiStatus enabled). Impact: 152 Entities, 29 Refs automations.yaml, 241 Refs Lovelace. **WebSocket live getestet 12.10.: verbindet + pusht.**
- **Watchdog AKTIV (12.10.):** Cron-Job `43612c6d52b6` (jede 15 min, script-only, still bei Gesundheit, Telegram-Alert bei Intervention): `setup_error` ≥30 min → automatischer `reboot(0)` via persistentem Rescue-Kit `/config/fah_rescue/rescue.py` (HA-Container, überlebt Recreation) → SysAP-HTTP-Wait ≤8 min → `reload_config_entry` → Verifikation. Schutz: 6h-Reboot-Cooldown, Lock, Blind-Alert 1×/Tag, Throttle-Hinweis 1×/Tag. Lokal: `~/.hermes/scripts/fah_watchdog.py` (`--selftest` prüft Kette read-only).
- **Watchdog-Reparatur 06.11.2026 (war blind + interventionsunfähig):** Meldung „BLIND (RuntimeError)" kam, weil `get_token()` bei **jedem** Tick `op read` gegen 1Password machte — Service-Account war rate-limitet („Too many requests"; Reads ~1.000/h + Tageslimit). Zweiter, schwererer Defekt: `guest_exec()` hardcodete `root@10.0.20.93` (ms-a2-2), VM 106 lief aber auf **proxmox3** → `Configuration file nodes/ms-a2-2/qemu-server/106.conf does not exist`, der Rettungs-Reboot hätte nie gefeuert. Fix: Token cache-first aus `~/.hermes/secrets/ha_token.txt` (1P nur on-miss/401, Fallback auf Cache bei 1P-Ausfall) + `resolve_pve_host()` via `pvesh get /cluster/resources --type vm`. Verifiziert: `--selftest` → „Kette intakt" (ECHOTEST_OK, GETALL_OK 40,8 s), Entry `freeathome` = loaded. 1P-Limit hielt >8 min an (kein lokaler Verursacher-Prozess) — betrifft alle `op`-Skripte. Solution Doc: `docs/solutions/bug-fixes/2026-11-06-fah-watchdog-blind-1p-ratelimit-node.md`.
- Solution Doc: `docs/solutions/integrations/2026-10-12-freeathome-sysap-xmpp-rpc-wedge-reboot-fix.md`
## free@home Local-API & Wanddisplay-Widgets (Stand 03.11.2026)
+10
View File
@@ -288,7 +288,17 @@ Scan aller Dateien im Medienordner (ffprobe, parallel): **164 HEVC (32 %)** —
- **House-of-Usenet-Banner** (`House-of-Usenet.com/Premium-News`, Repost via JBinDown): Board-gated, kein Passwort im NZB, keine öffentliche Doku, kein 1P-Account, keine unverschlüsselten Alternativposts → **ohne Board-Login nicht öffnenbar**. Betroffen: HardTied Paige Pierce (2,35 GB, pausiert), SexAndSubmission Marica Hase (verworfen).
- Regel: solchen Banner-Posts vor Enqueue erkennen/überspringen — jeder Fehlschlag kostet ~2 GB Block.
## Indexer-Abdeckung & Beschaffungsgrenzen (06.11.2026)
- **binsearch.info**: beste Quelle für *aktuelle* Scene-Releases (Kink, LegalPorno, VSEX/WRB/P2P). Alte Kink-Serien (TheTrainingOfO vor 2014) und Nischen-Maledom-Studios (BrutalMaster, ShinyBound, BoundToBeGagged, Cinched & Secured) sind dort **nicht** indexiert.
- **NZBKing**: einzige freie Quelle für TOO 2012/2013 (`a.b.multimedia.bdsm`). Achtung: (a) Seite ist JS-lastig → headless Chrome; (b) **HTTP 429 bei zu vielen `/nzb:<id>/`-Fetches liefert 0-Byte-NZBs** — das ist Rate-Limit, kein fehlender Post (≥20–30 s Abstand, Cookie+Referer, Header prüfen); (c) `.EXE`-geflaggte Posts (z. B. BrutalMaster-„Full Rip") liefern **keine** NZBs, dort liegen nur 89-MB-JPG-Packs.
- **nzbindex.com**: React-SPA, ~10 Monate Retention; per curl/URL keine Treffer, nur Formular-Submit im Browser. Für Titel älter als 10 Monate wertlos.
- **Alte Kink-RAR-Ketten**: SAB meldet „Completed", liefert aber 30–45-MB-Fragmente (`moov atom not found`). Sorter quarantäniert sie; einzelne rutschen durch → nach jedem Batch Duration prüfen (<5 min bei 40–80 min Erwartung = Fragment).
- **Nicht beschaffbar** (alle drei Indexer geprüft): BrutalMaster, ShinyBound, BoundToBeGagged, Cinched & Secured. Nur bezahlter Indexer (DrunkenSlug/NZBGeek) oder Direkt-Rip.
- **Secret-Falle**: `~/.hermes/secrets/media_meta.env` setzt Variablen ohne `export` → Python-Subprozesse sehen `JF_TOKEN` nicht (401). Immer `set -a; source …; set +a`.
## Related Solution Docs
- `~/docs/solutions/integrations/2026-11-06-nzb-indexer-grenzen-rate-limit.md` (Indexer-Abdeckung, 429-Falle, Fragmente)
- `~/docs/solutions/integrations/2026-11-01-sab-sorter-stillstand.md` (script=Default, Markenliste, case-insensitiv, permanente Fehlerklassen)
- `~/docs/solutions/integrations/2026-10-31-archive-org-tutorial-harvest.md` (Torrent-freie Zweitquelle, Range-Chunking, Passwort-Pitfall)
- `~/docs/solutions/bug-fixes/2026-10-19-sabnzbd-vaapi-converter-guard-bugs.md` (ffprobe-Quoting, case-Order, Stale-Parking)
+2 -2
View File
@@ -28,8 +28,8 @@ Physischer Standalone-Node (KEIN PVE), Mitglied im Ceph-Cluster. SSH: `ssh -i ~/
## Related
- [[systems/ceph-cluster]] — OSDs 2/8/15/17/18 laufen hier
- [[systems/ceph-cluster]] — OSDs 2/15/17 laufen hier (osd.8/18 seit ≥02.11. auf n5pro; stale Units `ceph-osd@8` + `ceph-mon@ubuntu` scheitern bei jedem Boot, kein Schaden)
- [[patterns/ceph-dead-nvme-resurrection]] (PAT-014)
## Security-Status
- **CVE-2026-98432 (Kernel-IPv4-TCP-UAF): OFFEN** (Stand 2026-11-05) — läuft `6.8.0-146-generic`, installiert `6.8.0-147.147`, Fix `6.8.0-149.149` in noble weiter `pending` (ubuntu.com/CVE-JSON, 05.11.). **Mitigation aktiv:** `/etc/sysctl.d/99-cve-2026-98432.conf` → `net.mptcp.enabled=0`, `net.ipv4.tcp_migrate_req=0` (verifiziert 0/0, Dienste 22/80/8000/9443/2049 laufen, Ceph unverändert). Rollback: Datei löschen + `sysctl -w net.mptcp.enabled=1`. nft-Regel gegen IPv4-Options bewusst offen (Owner-GO). **sshhole.com: nicht betroffen** — sshd glibc+PAM, shadow ohne `*`-Login-Konto.
- **CVE-2026-98432 (Kernel-IPv4-TCP-UAF): BEHOBEN** (2026-11-06, 06:43–06:56 UTC) — `apt-get full-upgrade` installierte `linux-image-6.8.0-149-generic 6.8.0-149.149` (+ linux-firmware-Splitpakete, 848 MB); Reboot mit Ceph-`noout`-Gate. Läuft `6.8.0-149-generic`, kein `reboot-required`. Verifiziert: 22/80/8000/9443/2049 lauschen, HTTPS 9443 = 200, 5 Docker-Container up, Ceph 17/17 up+in, 533 PGs active+clean (vor/nach nur Slow-Ops-WARN). Reboot→sshd 7m17s (Kernel-Boot nach 1m46s). **Mitigation weiter aktiv:** `/etc/sysctl.d/99-cve-2026-98432.conf` → `net.mptcp.enabled=0`, `net.ipv4.tcp_migrate_req=0` (kann nach Fix entfernt werden, Owner-GO). **sshhole.com: nicht betroffen** — sshd glibc+PAM, shadow ohne `*`-Login-Konto.