Auto-sync: 2026-11-18
This commit is contained in:
@@ -3,7 +3,7 @@ title: "Recipe Scraper v8 (Nutrition-Coach)"
|
||||
category: systems
|
||||
tags: [recipes, scraping, nutrition-coach, galera, curl-cffi]
|
||||
created: "2026-10-12"
|
||||
modified: "2026-11-13"
|
||||
modified: "2026-11-18"
|
||||
---
|
||||
|
||||
# Recipe Scraper v8 — Nutrition-Coach-Profil
|
||||
@@ -53,6 +53,20 @@ modified: "2026-11-13"
|
||||
- SolDoc Tag 3: `docs/solutions/bug-fixes/2026-11-13-recipe-scraper-0600-count-timeout-transient.md`
|
||||
(+ Nachtrag im 11-12-Doc).
|
||||
|
||||
## Status 2026-11-18: Crash-Rezidiv nach 4 Tagen — Störung TÄGLICH, nur Schwere variiert
|
||||
- 06:00:29 UTC: erster Lauf crashte in `db_count()` (Error 2013, 60-s-read_timeout)
|
||||
— erstes Rezidiv nach 4 Tagen. Retry 06:01:53: instant durch, Exit 0, No-Op
|
||||
(0 neue, keine Quellen, keine Pipeline; DB weiter bei 200.000).
|
||||
- **Wichtigste Korrektur:** Die „crashfreien" Tage 11-14 bis 11-17 waren keine
|
||||
sauberen Tage — `scraper_v8.log` zeigt 37–60 s Gesamtlaufzeit (≈ COUNT-Dauer,
|
||||
da vor `db_count()` nur lokale Loads passieren): täglich gestört, nur knapp
|
||||
unter dem 60-s-Timeout. Modell: Störung im 06:00-Fenster an jedem Tag; Crash
|
||||
nur bei COUNT >60 s (11-10, 11-11, 11-12, 11-13, 11-18).
|
||||
- 06:00-Fenster-Ursache weiter offen (DB-Infra-Job ~05:45–06:05 UTC prüfen:
|
||||
mariabackup/ANALYZE/Timer auf Galera-VMs). Fix-Vorschlag weiter offen
|
||||
(Owner-GO): `read_timeout=60`→`300` (Zeile ~89) oder Cron auf 06:30.
|
||||
- SolDoc-Nachtrag 11-18 im 11-13-Doc.
|
||||
|
||||
## Architektur
|
||||
- **Skript:** `~/.hermes/profiles/nutrition-coach/scripts/recipe_scraper_v8_intl.py`
|
||||
(Venv: `~/.hermes/venv-recipe/`, curl_cffi 0.16.3 für Chrome-TLS-Fingerprints)
|
||||
|
||||
Reference in New Issue
Block a user