Scrapling: Claude liest öffentliche Webseiten zuverlässig aus
Ein Framework zum Auslesen von Webseiten, mit Agent-Skill und MCP-Server für Claude.
Viele Webseiten blockieren einfache Abrufe. Scrapling kommt an öffentliche Inhalte trotzdem heran und liefert sie sauber aufbereitet.
Worum es geht
Scrapling ist ein Python-Framework zum Auslesen von Webseiten: schnelle Anfragen, Browser mit JavaScript, Auswertung der Inhalte und paralleles Crawlen. Es lässt sich aus Python, aus dem Terminal oder über einen MCP-Server und einen Agent Skill direkt aus Claude nutzen. Von ein paar Feldern bis zur ganzen Website als Markdown deckt es den gesamten Ablauf ab.
Viele Seiten blockieren einfache Abrufe. Scrapling kommt an öffentliche Inhalte trotzdem heran.
Wofür du es nutzt
Preise und Angebote
Öffentliche Preisseiten regelmäßig auslesen.
Recherche
Inhalte vieler Seiten strukturiert sammeln.
Websites als Text
Eine Seite als sauberes Markdown für Claude aufbereiten.
So richtest du es ein
Der schnellste Weg: Prompt kopieren, in Claude Code einfügen, Enter. Claude liest die Originalquelle und fragt nach deinem OK, bevor es etwas ändert.
Installier mir Scrapling: https://github.com/D4Vinci/Scrapling Richte den MCP-Server ein. Lies nur öffentliche Seiten und halte dich an die Nutzungsbedingungen der Seite.
Noch kein Claude Code? So installierst du es →
Oder Schritt für Schritt
- Installieren mit KI-Funktionen:
pip install "scrapling[ai]" - Den MCP-Server nach der offiziellen Doku in Claude Code eintragen.
- Mit einer öffentlichen Seite testen.
Gut zu wissen
- Nur öffentliche Inhalte auslesen und die Nutzungsbedingungen der jeweiligen Seite beachten. Personenbezogene Daten fallen unter die DSGVO.