{
"event": "UserPromptSubmit",
"prompt": "1. domain + eventuelle subdomains. externe links mitloggen und ziel prüfen. 2. alle 3. lass uns abwägen: rust, python, php - faktoren gewichtung, bewertung. 4. schnelle erfassung via curl, vollständig inkl. dom + js + fehler + ... via playwright und \/ oder chromium 5. nein, die seite gehört uns, alles crawlen. 6. neue db \"crawler\" mit historie für vergleiche. 7 beides. erstelle jetzt in \/crawler\/planung eine ausführliche planung als markdown."
}
{
"assistant_response": "Planung erstellt: `\/var\/www\/dev.campus.systemische-tools.de\/crawler\/planung\/00-planung.md`\n\n**Kurz-Zusammenfassung:**\n\n- **Technologie-Entscheidung: Python** (gewichteter Score 9.10 vs. Rust 6.10 vs. PHP 6.10). Ausschlag: offizieller Playwright-Support + bestehende Python-Pipeline-Infrastruktur.\n- **Architektur:** Queue-basierter Async-Crawler, drei Modi (`fast` \/ `full` \/ `hybrid`), Fetcher httpx + Playwright\/Chromium, Parser BeautifulSoup + extruct.\n- **DB `crawler`:** 12 Tabellen (`crawls`, `urls`, `pages`, `page_headers`, `links`, `images`, `resources`, `structured_data`, `hreflang`, `js_errors`, `errors`, `external_checks`) — vollständige Historie, Append-Only pro `crawl_id`.\n- **SEO-Felder:** HTTP, Head-Meta, OG\/Twitter\/DC, JSON-LD\/Microdata\/RDFa, H1-H6, Word-Count, Links (intern\/extern inkl. Zielprüfung), Bilder, Ressourcen, Core-Web-Vitals (Full Mode), berechnete Quality-Flags.\n- **Trigger:** CLI + systemd-Timer\/Cron (täglich 03:00 hybrid).\n- **7 offene Entscheidungspunkte** in §12 (HTML-Rohdaten, Screenshots, Subdomain-Handling, Sitemap-Seed, Diff-Format, Retention, Login-Crawls).\n\nBitte §12 durchgehen und Punkte freigeben, dann lege ich Tasks an und starte mit Schritt 1 der Reihenfolge aus §13."
}