robots.txt Archive - IT BOLTWISE® x Artificial Intelligence
Anthropic steht wegen aggressiver Data-Scraping-Praktiken unter Beschuss. Webseitenbetreiber wie Freelancer.com und iFixit.com berichten von massiven Zugriffen durch Anthropics Web-Crawler, die den normalen Betrieb stören.

KI-Entwickler Anthropic für rücksichtsloses Web-Crawling kritisiert

MÜNCHEN (IT BOLTWISE) – KI-Entwickler Anthropic sieht sich heftiger Kritik aufgrund angeblich aggressiver Data-Scraping-Praktiken ausgesetzt. Webseiten-Betreiber berichten, dass die Bots von Anthropic in erheblichem Umfang ihre Webseiten crawlen, auch wenn dies in der robots.txt-Datei untersagt ist. Mehrere Betreiber von Webseiten, darunter Matt Barrie, CEO von Freelancer.com, und Kyle Wiens, Chef von iFixit.com, haben erklärt, dass […]