Ist Web Scraping legal? Ein praktischer Leitfaden für Unternehmen

„Ist das legal?“ ist die erste Frage, die jeder seriöse Kunde stellt, bevor wir mit einem Web-Scraping-Projekt beginnen, und sie verdient eine echte Antwort und kein pauschales Ja oder Nein – denn es kommt tatsächlich darauf an, was und wie man scrapt.

Öffentlich zugängliche Daten bergen im Allgemeinen ein geringeres Risiko

Das Sammeln von Daten, die öffentlich sichtbar sind, ohne dass man sich anmelden muss – Produktpreise, öffentliche Bewertungen, Stellenanzeigen – stellt die Kategorie mit dem geringsten Risiko dar, und Gerichte in mehreren Gerichtsbarkeiten neigen dazu, dies als zulässig zu behandeln, insbesondere wenn es nicht darum geht, Zugriffskontrollen zu umgehen.

Allerdings bedeutet „geringeres Risiko“ nicht „kein Risiko“ – die eigenen Nutzungsbedingungen einer Website können auch bei öffentlichen Daten vertragliche Probleme verursachen, unabhängig von der Rechtsfrage, ob der Zugriff auf die Daten selbst zulässig war.

Was erhöht tatsächlich das Risiko?

Die wirklichen Warnsignale sind: Scraping hinter einem Login (Umgehung der Authentifizierung), Ignorieren einer expliziten robots.txt-Disallow-Anweisung, Scraping personenbezogener Daten, die unter Datenschutzbestimmungen (DSGVO, CCPA) fallen, oder Scraping in einem Umfang/einer Geschwindigkeit, die einem Denial-of-Service-Angriff auf die Zielseite gleichkommt.

Der Weiterverkauf urheberrechtlich geschützter Inhalte anderer im Großhandel stellt ein separates, zusätzliches Risiko dar, das über das Problem des Scrapings selbst hinausgeht.

Wie wir es angehen

Jedes Web-Scraping-Projekt, das wir annehmen, beginnt mit einer kurzen Überprüfung der Nutzungsbedingungen und der robots.txt-Datei der Zielseite, einer angemessenen Ratenbegrenzung, damit wir deren Server nicht überlasten, und einer klaren Trennung zwischen dem Sammeln öffentlicher Fakten und der Reproduktion urheberrechtlich geschützter Inhalte.

Wenn Ihr Anwendungsfall personenbezogene Daten oder eine passwortgeschützte Quelle betrifft, ändert sich die Diskussion erheblich, und wir werden Ihnen im Voraus mitteilen, ob ein Projekt vor der Umsetzung einer rechtlichen Prüfung bedarf.

Öffentlich und sachlich ist meist unproblematisch. Das eigentliche Risiko beginnt bei Inhalten hinter einem Login sowie bei personenbezogenen oder urheberrechtlich geschützten Inhalten.