Traditionele zoekmachines zijn niet langer het enige toegangspunt tot een site. Gespreksagenten, AI-gestuurde browsers, autonome crawlers: de tussenpersonen tussen webinhoud en de lezer nemen toe, en elk past zijn eigen extractieregels toe. Voor online media en bedrijven is het niet meer voldoende om het nieuws van het web en de digitale wereld te volgen. Het is noodzakelijk om te begrijpen hoe deze nieuwe technologische lagen de zichtbaarheid, het verkeer en de veiligheidsrisico’s herverdelen.
AI-robots en crawlen: de nieuwe segmentatie opgelegd door Cloudflare
Cloudflare heeft zijn beleid ten opzichte van AI-robots gewijzigd door standaard trainings- en verkenningscrawlers op nieuwe domeinen te blokkeren. De onderscheid tussen “toegestane bot” en “gebloekte bot” is niet meer van toepassing, maar er zijn verschillende categorieën robots met verschillende doeleinden: modeltraining, indexering voor generatieve motoren, autonome agenten die taken uitvoeren.
Deze segmentatie verandert de spelregels voor uitgevers. Een klassiek robots.txt-bestand is niet meer voldoende om te controleren wie toegang heeft tot wat. We zien dat sites die hun configuratie niet hebben herzien, AI-agenten doorlaten terwijl ze legitieme crawlers blokkeren, of omgekeerd.
Het volgen van het nieuws op Blognet News maakt het mogelijk om deze technische evoluties meteen bij hun aankondiging op te merken, voordat ze het organische verkeer beïnvloeden. Het onderwerp gaat verder dan alleen monitoring: het gaat om het aanpassen van de toegangslagen van je site aan een ecosysteem van robots dat zich fragmentariseert.
- Controleer in de serverlogs het aandeel verkeer dat wordt gegenereerd door AI-user-agents (GPTBot, ClaudeBot, PerplexityBot, onder anderen) en hun frequentie van passage
- Stel verschillende regels in voor elke categorie robot, in plaats van een globale blokkering of toegang
- Houd de updates van CDN’s en applicatie-firewalls in de gaten, die nu continu bijgewerkte lijsten van AI-robots bevatten
SEO tegenover generatieve motoren: wat verandert in acquisitie
Generatieve antwoorden vangen een steeds groter deel van de klikken die voorheen rechtstreeks naar een uitgeversite leidden. Google AI Mode, de geïntegreerde antwoorden van Perplexity, de samenvattingen van Bing Copilot: de inhoud wordt geconsumeerd zonder dat de gebruiker de bron bezoekt.
Voor een webmedia betekent dit dat de notie van zichtbaarheid opnieuw moet worden doordacht. Geciteerd worden in een gegenereerd antwoord levert niet dezelfde terugkoppeling op als een aangeklikte link. Het effectieve doorklikpercentage op organische resultaten daalt wanneer een AI-antwoord de vraag rechtstreeks in de interface van de motor beantwoordt.
Structureren van inhoud voor agenten, niet alleen voor de SERP
Gestructureerde gegevens (schema.org) krijgen een aanvullende functie. Ze dienen niet alleen om een rich snippet te verkrijgen, maar om taalmodellen bruikbare context te bieden. Een nauwkeurige markering van het type artikel, de publicatiedatum, de auteur en de genoemde entiteiten vergroot de kans om als bron door een generatieve motor te worden geselecteerd.
We raden aan om elke pagina te behandelen als een semantische API die door een agent leesbaar is. Duidelijke titels, autonome paragrafen (elke blok beantwoordt een vraag), ingevulde alt-attributen voor afbeeldingen, gestructureerde breadcrumb-navigatie. Deze praktijken bestonden al in technische SEO, maar hun relatieve gewicht neemt toe ten opzichte van AI-agenten.
AI-agenten in de online handel: waarschuwing van de Autoriteit voor Concurrentie
De Autoriteit voor Concurrentie heeft gewaarschuwd voor de specifieke risico’s van AI-agenten in de online handel. Deze agenten, die in staat zijn om aanbiedingen te vergelijken, bestellingen te plaatsen en prijzen te onderhandelen zonder menselijke tussenkomst, worden nieuwe toegangspoorten tot webwinkels.
Het probleem beperkt zich niet tot concurrentie. Een AI-agent die met een e-commerce site interageert, roept concrete veiligheidsvragen op: authenticatie van verzoeken, detectie van geautomatiseerd scrapen dat zich voordoet als gebruikersnavigatie, beheer van sessies en winkelwagentjes die door bots zijn aangemaakt.
Veiligheid van geautomatiseerde workflows door AI
Platformen gericht op “agentic AI” beperken zich niet langer tot het genereren van tekst. Ze plannen, wijzigen en beheren websites van begin tot eind, direct in de CMS. Een agent kan een artikel publiceren, een productfiche aanpassen, een prijs wijzigen.
Elke geautomatiseerde actie in een CMS moet worden geaudit als een op zichzelf staande gebruikersactie. De activiteitslogs moeten menselijke wijzigingen onderscheiden van wijzigingen door agenten, met gedetailleerde toestemmingsniveaus. Zonder deze traceerbaarheid wordt een beveiligingsincident veroorzaakt door een slecht geconfigureerde agent onmogelijk te diagnosticeren.
- Wijs specifieke API-tokens toe aan elke AI-agent, met beperkte rechten tot het strikt noodzakelijke
- Activeer gedetailleerde logging van CMS-acties om geautomatiseerde wijzigingen te isoleren
- Stel waarschuwingen in voor abnormaal gedrag: massapublicatie, prijswijzigingen buiten de gedefinieerde range, verwijdering van inhoud
- Test regelmatig inbraakscenario’s via gesimuleerde agenten om kwetsbaarheden te identificeren voordat een kwaadwillende actor ze kan misbruiken
AI-browsers en het einde van ChatGPT Atlas: lessen voor webuitgevers
OpenAI heeft de stopzetting van ChatGPT Atlas aangekondigd, zijn door AI aangedreven browser, minder dan een jaar na de lancering. Het product, dat als te minimalistisch werd beoordeeld, heeft nooit een bedreiging voor Chrome gevormd. Deze mislukking illustreert een vaak onderschat punt: een AI-browser vervangt geen traditionele browser, het aanvult of parasiteren.
Voor uitgevers ligt de les in de afhankelijkheid van distributiekanalen. Een site die uitsluitend is geoptimaliseerd voor een AI-browser of -motor loopt het risico op een drastisch verlies van verkeer als dit kanaal verdwijnt. Diversificatie van acquisitiebronnen blijft de beste bescherming, inclusief RSS-feeds, nieuwsbrieven en podcasts, die ontsnappen aan algoritmische tussenkomst.
Het tempo van het verschijnen en verdwijnen van deze tools versnelt. Het aanpassen van je digitale strategie aan elk nieuw AI-product is niet houdbaar. Daarentegen vormt het handhaven van een schone technische architectuur, een rigoureuze semantische markering en goed gesegmenteerde toegangregels een basis die bestand is tegen oppervlakkige veranderingen. Het is op deze technische laag dat de controle over je online zichtbaarheid nu speelt.