Scrapling: Daten von Webseiten sammeln
Scrapling liest Daten aus Webseiten aus, von einer einzelnen Seite bis zum ganzen Crawl. Ändert sich das Layout, findet es die Daten trotzdem wieder.
- BSD-3-Clause
- Python 3.10+
- über 85.000 Sterne
Nur scrapen, wo es erlaubt ist. AGB und
robots.txt der Seite beachten, keine Server überlasten.1 Installation
Am saubersten in einer eigenen Python-Umgebung. Viele Linux-Systeme erlauben pip install ohnehin nur noch darin:
python3 -m venv ~/scrapling-env source ~/scrapling-env/bin/activate pip install "scrapling[all]"
Wichtig: Nur
pip install scrapling installiert lediglich den Kern. Für die Befehlszeile und die Ausgabe als Markdown braucht es die Zusatzpakete, deshalb "scrapling[all]".2 Erste Seite auslesen
scrapling extract get "https://example.com" seite.md
Der Inhalt landet in seite.md. Endet der Dateiname auf .txt, bekommst du reinen Text.
3 Für geschützte Seiten (optional)
Für Seiten, die einen echten Browser brauchen, lädt Scrapling Browser und Zusatzteile nach. Das ist ein großer Download:
scrapling install
Und was heißt das für dich?
Alles, was du öffentlich postest, kann genauso automatisch eingesammelt werden. Überleg dir gut, was du teilst.
Zum Video: Diese Anleitung gehört zur Folge „Scrapling“ von DerTechAgent. Stand der Angaben: 02.10.2026.