Het tijdperk van gratis content verzamelen op het web loopt ten einde. Dit is hoe nieuwe platforms AI-bots van niet-betalende bezoekers veranderen in echte klanten.
Meer dan twintig jaar lang functioneerde het web op basis van een ongeschreven pact: Google en andere zoekmachines indexeerden gratis de inhoud van uitgevers, toonden fragmenten en samenvattingen op hun pagina's, maar stuurden in ruil daarvoor massaal verkeer terug naar de oorspronkelijke sites. Uitgevers accepteerden dit 'gebruik' van hun inhoud omdat ze zichtbaarheid, lezerspubliek en dus advertentie-inkomsten kregen.
Google News heeft dit model geperfectioneerd: het verzamelt nieuws uit duizenden bronnen, toont koppen en korte fragmenten, maar elke klik brengt de gebruiker naar de oorspronkelijke site. Een win-win balans die het digitale informatie-ecosysteem in stand heeft gehouden.
Stel je nu eens voor dat je een nieuwssite hebt en ontdekt dat elke dag duizenden AI-bots je artikelen scannen, de inhoud gebruiken om hun sjablonen te voeden en volledige antwoorden aan gebruikers geven, zonder ooit verkeer terug naar je site te sturen. AI die geen links genereert en geen kliks genereert: het reageert direct. Welkom in de realiteit van 2025.
Volgens de gegevens van Cloudflare zal medio 2025 80 procent van de AI-crawlingactiviteit dienen voor het trainen van modellen, terwijl de verwijzingen naar uitgevers (vooral van Google) drastisch afnemen. Het model dat twintig jaar heeft gewerkt, brokkelt af: Google zelf, met zijn AI-overzichten, stuurt steeds minder verkeer naar de oorspronkelijke sites. De crawl-to-refer ratio laat schokkende cijfers zien: Anthropic heeft een ratio van 38.000 crawls per bezoeker die naar de site wordt gestuurd, terwijl OpenAI 1.700:1 bereikt.
Maar wat als bots betalende klanten zouden kunnen worden in plaats van alleen maar gratis consumenten van inhoud? Het is tijd voor een nieuwe deal: als AI niet langer retourverkeer kan garanderen zoals Google deed, moet het op zijn minst betalen voor toegang tot inhoud.
2025 juli, Cloudflare kondigde aan dat het het eerste internetinfrastructuurbedrijf was dat AI-crawlers standaard blokkeerde en tegelijkertijd het 'Pay Per Crawl'-systeem introduceerde. Het nieuws? Elk nieuw domein dat zich registreert bij Cloudflare wordt nu expliciet gevraagd of het AI-crawlers toegang wil geven tot content.
Maar de echte game-changer is de marktplaats waar uitgevers vergoedingen kunnen vragen van AI-bedrijven elke keer dat een van hun pagina's wordt gescand. Niet langer alleen 'toestaan' of 'blokkeren', maar een derde optie: 'in rekening brengen'.
Nog voor Cloudflare, was TollBit al begonnen met het bouwen van deze infrastructuur. De startup, die onlangs $24 miljoen in Serie Aheeft een platform gecreëerd waarop AI-bots websites direct kunnen betalen om hun content te gebruiken.
TIME en Adweek behoren tot de eerste klanten die experimenteren met dit model en ontdekken dat AI een nieuwe categorie klanten met specifieke behoeften vertegenwoordigt.
Volgens een gedetailleerde analysezou TollBit al zo'n 71 miljoen dollar per jaar kunnen genereren voor zijn uitgeefpartners. Dit is hoe:
Met een typische CPM van $15 voor contentsites betekent dit $195.000 per dag aan potentiële inkomsten voor het TollBit ecosysteem, of meer dan $71 miljoen per jaar.
TollBit stelt twee prijsniveaus voor:
Het verschil kan aanzienlijk zijn, waardoor dit een bijzonder aantrekkelijk model is voor premium en gespecialiseerde content.
Een TollBit-analyse van 160 websites onthulde dat AI-bedrijven gemiddeld 2 miljoen keer werden gescand in Q4 2024. Elke pagina werd gemiddeld 7 keer gescand.
Toshit Panigrahi, medeoprichter van TollBit, legt uit: "Het botverkeer dat door deze AI-platforms wordt gegenereerd is bijna gelijk aan het botverkeer van zoekmachines die al 20 jaar bestaan, wat ongelooflijk is."
DataDome is een samenwerking aangegaan met zowel TollBit als andere platforms om een geïntegreerde oplossing te bieden: realtime bescherming tegen kwaadaardige bots en monetisatie van bots die wel aan de regels voldoen.
Uit hun gegevens blijkt dat het AI-verkeer in slechts zes maanden is verdrievoudigd, van 2,6 procent naar 8,2 procent van al het geverifieerde botverkeer.
Skyfire vertegenwoordigt een andere benaderingdoor een volledig betaalnetwerk te bouwen voor autonome AI-agenten. Met $8,5 miljoen opgehaald en samenwerkingsverbanden met bedrijven als DataDome wil Skyfire de standaard betalingsinfrastructuur voor de AI-economie worden.
Voordat we de cijfers analyseren, is het belangrijk om te benadrukken dat Pay Per Crawl niet voor iedereen handig is. Voor sites met beperkt verkeer kan het strategisch voordeliger zijn om gratis toegang te verlenen aan AI-bots: het verhoogt de vindbaarheid van inhoud in AI-systemen, bouwt relaties op met opkomende platforms en positioneert de site als 'AI-vriendelijk' voor toekomstige kansen.
Directe tegeldemaking wordt pas aantrekkelijk als de volumes de complexiteit van het beheer en de implementatiekosten rechtvaardigen.
Prashanth Chandrasekar, CEO van Stack Overflowvat de situatie perfect samen: "Community platforms die LLM's aandrijven moeten gecompenseerd worden voor hun bijdragen, zodat ze opnieuw kunnen investeren in hun communities."
Met AI-to-AI-handel naar verwachting 46 miljard dollar zal bereiken in de komende drie jaarkunnen uitgevers die zich vroeg in dit ecosysteem positioneren een aanzienlijk concurrentievoordeel behalen.
Pay Per Crawl' is niet langer science fiction, maar een operationele realiteit. Voor uitgevers is de vraag niet of dit model zal aanslaan, maar of en wanneer ze zich kunnen aanpassen om de waarde vast te leggen.
La verità scomoda: non tutti dovrebbero monetizzare subito. Per siti con traffico limitato (<50K visite/mese), mantenere accesso libero ai bot AI può essere più vantaggioso strategicamente, costruendo visibilità e relazioni per future opportunità. La soglia di convenienza per la monetizzazione diretta si raggiunge generalmente con volumi di traffico significativi.
Prognoses laten aantrekkelijke potentiële inkomsten zien voor middelgrote en grote uitgevers, vooral voor content van hoge kwaliteit en veel verkeer. Het succes zal echter afhangen van het vermogen om:
Voor uitgevers met veel verkeer die bereid zijn om te experimenteren, zou 2025 het jaar kunnen zijn waarin AI niet langer alleen een kostenpost is, maar eindelijk een zakelijke kans wordt. Voor alle anderen is het misschien tijd om de basis te leggen om deze kans in de toekomst te grijpen.
Belangrijkste bronnen: