Crawler Bundle
llms.txt direkt aus Pimcore erzeugen
Stellen Sie freigegebene Pimcore Inhalte als llms.txt und llms-full.txt bereit, automatisch aktuell für KI Assistenten.
Entwickelt für:
Highlights
Details
Das ercas Crawler Bundle erzeugt aus freigegebenen Pimcore-Inhalten automatisch llms.txt und llms-full.txt und hält sie bei Änderungen aktuell. So werden Ihre Inhalte von KI-Assistenten zuverlässig gefunden, korrekt verstanden und gezielt ausgespielt.
Ihre Vorteile auf einen Blick
- Inhalte per Befehl crawlen und als Markdown generieren – vollständig oder komprimiert
- Automatisierbar über CRON für stets aktuelle Indexdateien
- Präzise Steuerung per Sitemap: nur gewünschte URLs werden berücksichtigt
- Frei wählbare Ausgabeziele für llms-full.txt und llms.txt
- Erweiterbar durch Override des Standard-Crawl-Services
- Crawl & Index per Befehl – ideal für Deploy- und Content-Pipelines
- Vollständiges Markdown je Seite oder komprimierte Variante (Titel/Beschreibung)
- Zeitgesteuerter Betrieb via CRON
- Frei wählbare Speicherorte für llms-full.txt und llms.txt
- Service-Override für eigene Regeln, Filter und Post-Processing
- Sitemap-gesteuerte URL-Auswahl (ohne Sitemap: kompletter Crawl)
- Firecrawl-API für zuverlässige Markdown-Extraktion
- Unternehmen, die LLMs strukturierten Website-Content bereitstellen wollen
- Marketing-Teams mit Fokus auf kontrollierte Indexierung und Sichtbarkeit
- Entwickler, die eine integrierbare, erweiterbare Lösung ohne Zusatztools suchen
- Entwickelt für Pimcore Version 11
- Symfony-kompatibel
Das ercas Crawler Bundle stellt eine übersichtliche Anleitung bereit, damit Sie direkt starten können:
- Installation
- Einstellungen
- Eigene Crawler implementieren
- Ihre Website crawlen
- Deinstallation