AI Crawl Control

Nieuwe processtukken in de zaak van The New York Times tegen Microsoft en OpenAI leggen interne zorgen over AI-scraping bloot. Voor Nederlandse gebruikers verschuift de inzet naar contentherkomst, licenties en controleerbare AI-output.

The Seattle Times en Newsday eisen in een dagvaarding van 4 september de vernietiging van alle AI-modellen en trainingsdatasets met hun artikelen. Die eis raakt niet je rekening, maar de beschikbaarheid van ChatGPT en Copilot.

Bot Preference Sync schrijft de keuzes voor Search, Agent en Training uit je Cloudflare-dashboard automatisch in je robots.txt. Komende week op elk abonnement, en training blokkeren kost je zoekzichtbaarheid niet meer.

Het aanmeldformulier van Klaviyo stuurde wachtwoorden en bedrijfsgegevens van nieuwe klanten naar 31 externe hostnamen, vond onderzoeksbureau Melurna. Een tweede fout stuurde klantprofielen van webshops door naar Sift, Gainsight en Google Analytics.

Geef je GPTBot, ClaudeBot en soortgenoten toegang of hou je ze buiten? Een stappenplan om per crawler te beslissen, het correct in te stellen en de impact te meten.