Web Scraping

MÜNCHEN (IT BOLTWISE) – KI-Entwickler Anthropic sieht sich heftiger Kritik aufgrund angeblich aggressiver Data-Scraping-Praktiken ausgesetzt. Webseiten-Betreiber berichten, dass die Bots von Anthropic in erheblichem Umfang ihre Webseiten crawlen, auch wenn dies in der robots.txt-Datei untersagt ist. Mehrere Betreiber von Webseiten, darunter Matt Barrie, CEO von Freelancer.com, und Kyle Wiens, Chef von iFixit.com, haben erklärt, dass […]