Scarnox · Blog

Ist Web-Scraping legal? Ein allgemeiner Überblick

Ist Web-Scraping legal? Die ehrliche Antwort lautet: Es kommt darauf an. Es hängt davon ab, wo du und die Seite Sitz habt, welche Art von Daten du erhebst, wie du sie erhebst, was die Nutzungsbedingungen der Seite sagen und was du mit dem Ergebnis tust. Diese Seite gibt allgemeine Informationen zu den wichtigsten Faktoren, auf die Gerichte und Aufsichtsbehörden tendenziell achten. Es ist keine Rechtsberatung. Für eine Entscheidung, die dein Projekt oder dein Geschäft betrifft, sprich mit einer qualifizierten Anwältin oder einem qualifizierten Anwalt in der jeweiligen Rechtsordnung.

Die Kurzfassung

Das Scrapen öffentlich sichtbarer Seiten ist nicht automatisch illegal. Mehrere Dinge erhöhen das Risiko: das Erheben personenbezogener Daten, das Ignorieren eines klaren Verbots, das Kopieren großer Mengen geschützter Inhalte, das Umgehen von Zugriffskontrollen und das Verursachen von Schaden für die Seite. Je mehr davon zutreffen, desto vorsichtiger musst du sein.

Faktor 1: Welche Daten du erhebst

Fakten und öffentliche Informationen werden anders behandelt als kreative Werke und personenbezogene Daten.

Öffentlich verfügbare Fakten, etwa ein veröffentlichter Preis oder ein Lagerbestand, werden in der Regel großzügiger behandelt als urheberrechtlich geschützter Text oder Bilder.
Urheberrechtlich geschützte Inhalte, etwa Artikel, Fotos und Datenbanken, können auch dann geschützt sein, wenn sie öffentlich sind. Sie komplett zur Weiterverwendung zu kopieren birgt mehr Risiko, als bestimmte Fakten zu extrahieren.
Personenbezogene Daten, also Informationen, die eine Person identifizieren, unterliegen in vielen Ländern Datenschutzgesetzen. Die DSGVO in der Europäischen Union und ähnliche Gesetze anderswo legen Pflichten fest, wie sie erhoben, gespeichert und genutzt werden, auch wenn sie öffentlich waren. Frage dich, ob du die personenbezogenen Daten überhaupt brauchst.

Faktor 2: Die Nutzungsbedingungen und robots.txt der Seite

Viele Seiten veröffentlichen Nutzungsbedingungen, die automatisierten Zugriff untersagen. Ob ein Verstoß gegen diese Bedingungen rechtliche Folgen hat, hängt von der Rechtsordnung und den Umständen ab, und Gerichte sind in verschiedenen Fällen zu unterschiedlichen Ergebnissen gekommen.

Die Datei robots.txt ist ein maschinenlesbares Signal dafür, was der Betreiber von Crawlern erwartet. Sie ist an sich kein Gesetz, aber sie zu ignorieren kann als Beleg dafür herangezogen werden, dass du unangemessen gehandelt hast. Ein gut geführtes Projekt respektiert sie standardmäßig.

Faktor 3: Wie du erhebst

Die Methode ist genauso wichtig wie das Ziel. Eine überschaubare Anzahl von Anfragen, über die Zeit verteilt, ist etwas ganz anderes als ein Server mit Anfragen zu überfluten und den Dienst für andere Nutzer zu verschlechtern. Manche Rechtsordnungen behandeln unbefugten Zugriff auf Computersysteme als Straftat. Ein Login, eine Paywall oder eine Zugriffskontrolle zu überwinden, die der Betreiber eingerichtet hat, erhöht das Risiko erheblich und kann eine rechtliche Grenze überschreiten, die gewöhnliches Scraping nicht überschreitet.

Deshalb ist Scarnox für legitime Automatisierung gebaut: das Testen eigener Seiten, Barrierefreiheits- arbeit und das Erheben öffentlicher Daten innerhalb der Regeln einer Seite. Es ist nicht für den Einsatz gegen Zugriffskontrollen gedacht, und die Captcha-Schritte in diesen Leitfäden gelten nur für Abläufe, die du automatisieren darfst.

Faktor 4: Was du mit den Daten machst

Daten zu erheben ist ein Schritt. Sie erneut zu veröffentlichen, zu verkaufen oder zu nutzen, um unfair zu konkurrieren, kann separate Fragen aufwerfen, darunter Urheberrecht, Datenbankrechte, Regeln gegen unlauteren Wettbewerb und Vertragsansprüche. Führe eine klare Aufzeichnung darüber, woher die Daten stammen, warum du sie erhoben hast und wie lange du sie aufbewahrst.

Warum die Antwort von Ort zu Ort variiert

Das Recht zu diesem Thema ist nicht einheitlich. Manche Länder haben spezielle Regeln für Datenbankrechte, andere stützen sich auf allgemeines Vertrags- und Computermissbrauchsrecht, und die Datenschutzregeln unterscheiden sich stark. Gerichtsentscheidungen zu Scraping sind ebenfalls von Fall zu Fall verschieden ausgefallen, und das Ergebnis hing oft von Details ab, etwa der Art der Daten, davon, ob ein Login im Spiel war, und davon, ob der Scraper eine klare Aufforderung zum Aufhören ignoriert hat. Deshalb kann eine Regel, die an einem Ort gilt, an einem anderen nicht gelten. Betrachte jede allgemeine Zusammenfassung, auch diese, als Ausgangspunkt für ein Gespräch mit einer Fachperson, die deine Situation kennt.

Eine praktische Checkliste

Bevor du ein Scraping-Projekt startest, kannst du diese Fragen mit deinem Team oder deinem Rechtsbeistand durchgehen:

Sind die Daten öffentlich, und sind sie faktisch statt kreativ oder persönlich?
Hast du die Nutzungsbedingungen und die robots.txt der Seite gelesen, und passt deine Nutzung dazu?
Brauchst du überhaupt personenbezogene Daten? Wenn ja, hast du dafür eine Rechtsgrundlage?
Bleibst du im Rahmen des Zugangs, den die Seite anbietet, ohne Kontrollen zu umgehen?
Ist deine Anfragerate niedrig genug, dass normale Nutzer nicht beeinträchtigt werden?
Hast du einen Plan, Daten zu löschen, die du nicht mehr brauchst?
Würdest du deine Methode dem Betreiber der Seite ohne Bedenken erklären?

Wenn du bei mehreren dieser Fragen "nein" antwortest, halte an und hol dir Rat, bevor du weitermachst.

Verantwortungsvoll scrapen

Lies robots.txt und die Nutzungsbedingungen, bevor du eine Seite scrapst.
Halte deine Anfragerate bescheiden und speichere, was du erhebst, zwischen.
Speichere nur die personenbezogenen Daten, die du brauchst, und schütze, was du behältst.
Verwende Scarnox oder ein anderes Werkzeug nicht, um eine Einschränkung zu umgehen, die der Betreiber eingerichtet hat.

Nächste Schritte

Starte mit kostenlosem Testguthaben, ohne Karte: Konto erstellen, um den PopularCaptcha-Ablauf auf einer Seite zu testen, die du automatisieren darfst. Aktuelle Preise findest du auf der Preisseite.