Das freie und offene Web wird von der IETF angegriffen

Die Möglichkeit, mithilfe automatisierter Tools auf öffentlich verfügbare Informationen zuzugreifen, ist ein zentraler Wert und Vorteil eines freien und offenen Internets. Automatisierter Zugriff – oft Crawling oder Scraping genannt – ermöglicht wichtige und nützliche Tools zum Auffinden, Speichern und Analysieren von Online-Informationen. Crawling und Scraping hilft beispielsweise Journalisten, Forschern und Überwachungsorganisationen dabei, Nachrichten zu melden, Sicherheitslücken zu finden und Diskriminierung zu untersuchen. Das Crawlen des Webs ermöglicht gemeinnützigen Organisationen wie dem Internet Archi