3 min. lezen

Cloudflare test systeem om uitgevers AI-crawlers te laten opladen

De dagen dat AI-bedrijven gratis inhoud schrapen, zijn misschien geteld. Cloudflare heeft zojuist iets uitgerold dat "Pay per Crawl" wordt genoemd en waarmee website-eigenaren daadwerkelijk geld kunnen verdienen wanneer AI-bots verschijnen om hun spullen te pakken. Het is een behoorlijk groot probleem voor iedereen die online inhoud maakt.

Katarína Šimčíková Katarína Šimčíková
Partnership Manager & E-commerce Content Writer, Ecommerce Bridge EU
Dit artikel werd voor u vertaald door kunstmatige intelligentie
Cloudflare test systeem om uitgevers AI-crawlers te laten opladen
Bron: Canva Pro License

Het probleem waar niemand over praat

Hier is het ding – als je een website beheert, heb je in feite twee keuzes gehad. Laat AI-systemen binnenwalsen en gratis nemen wat ze willen, of blokkeer ze volledig en mis potentieel verkeer.

Ondertussen sluiten Google en OpenAI miljoenendeals met grote nieuwszenders, terwijl kleinere makers niets krijgen. Hun artikelen en blogposts trainen AI-modellen ter waarde van miljarden, en ze zien geen cent.

Na met honderden uitgevers te hebben gesproken, kwam Cloudflare erachter wat iedereen echt wilde: de AI-bots binnenlaten, maar ervoor betaald krijgen.

"Cloudflare AI Audit dashboard showing crawler analytics with 1.39M total requests, including 750.5K allowed and 640.1K blocked requests. Interface displays individual AI crawlers like ProRataInc with Allow/Charge/Block action options.

Source: blog.cloudflare.com

Hoe het echt werkt

Cloudflare stofte een oude webstandaard af – HTTP-code 402, wat “betaling vereist” betekent – en bouwde er een heel systeem omheen. Wanneer een AI-crawler uw site raakt, heeft u drie opties:

  • Laat ze gratis binnen
  • Breng ze de door u ingestelde prijs in rekening
  • Blokkeer ze volledig

De technische dingen omvatten wat fancy cryptografie om ervoor te zorgen dat bots hun identiteit niet kunnen vervalsen. Maar het basisidee is simpel: geen betaling, geen inhoud.

Twee manieren om betaald te worden

Uitgevers kunnen dit naar eigen inzicht instellen. Misschien rekent u € 0,01 per pagina, of € 0,10, of wat dan ook zinvol is voor uw inhoud.

Het systeem werkt in twee richtingen. Of de bot vraagt eerst om uw inhoud, krijgt de prijs te horen en beslist vervolgens of hij betaalt. Of de bot zegt van tevoren: “Ik betaal hier tot $ 0.05 voor”, en krijgt direct toegang als uw prijs lager is.

Als uw prijs hoger is dan wat ze bereid zijn te betalen, krijgen ze een bericht “betaling vereist” met uw werkelijke prijs.

Cloudflare Pay Per Crawl workflow diagram showing an AI crawler's request flowing through Cloudflare's security layers - WAF Custom Rules, AI Audit Crawler Blocking, Bot Solutions, and AI Audit Pay Per Crawl - before reaching website content.

Source: blog.cloudflare.com

De geldkant

Cloudflare regelt alle betalingsverwerking. Ze houden bij wanneer bots betalen voor inhoud, de AI-bedrijven in rekening brengen en het geld naar uitgevers sturen. Het is niet nodig om uw eigen betalingssystemen op te zetten of over individuele deals te onderhandelen.

Het geheel sluit aan op de beveiliging die u al op uw site heeft.

Wat is het volgende

Op dit moment is dit in privétests. Cloudflare wil van beide kanten horen: AI-bedrijven die bereid zijn te betalen voor inhoud en uitgevers die willen gaan betalen.

Ze denken al na over upgrades zoals dynamische prijzen op basis van de vraag, verschillende tarieven voor verschillende soorten inhoud en geautomatiseerde marktplaatsen waar bots bieden op toegang tot informatie.

Waarom dit belangrijk is

Dit zou de manier waarop internet werkt kunnen veranderen. Op dit moment halen AI-bedrijven het grootste deel van de waarde uit inhoud, terwijl makers niets krijgen. Pay per Crawl draait dat om.

Naarmate AI-systemen slimmer en onafhankelijker worden, kan het hebben van een standaardmanier om informatie te kopen en verkopen cruciaal zijn om het web vol goede inhoud te houden. Als makers geen geld kunnen verdienen met hun werk, stoppen ze met creëren.

Of dit experiment slaagt, kan bepalen of het toekomstige internet de mensen beloont die daadwerkelijk dingen maken, of dat het het huidige systeem blijft waarin AI-bedrijven gratis rijk worden van het werk van anderen.

Artikel delen
Katarína Šimčíková
Partnership Manager & E-commerce Content Writer, Ecommerce Bridge EU

Partnership Manager & E-commerce Content Writer with 10+ years of international experience. Former Groupon Team Lead. Connects European companies with Slovak and Czech markets through partnerships and content marketing.

Vergelijkbare artikelen
AI bouwen? Dit Booking.com leider zegt: begin klein en los één probleem goed op
9 min. lezen

AI bouwen? Dit Booking.com leider zegt: begin klein en los één probleem goed op

Wat is er nodig om AI op een verantwoorde manier te bouwen op een wereldwijd platform? Onze expert Marija Ristovska sprak met Marina Angelovska van Booking.com om erachter te komen, van het omgaan met onzekerheid tot waarom je eerste AI-project klein en gericht zou moeten beginnen.

Marija Ristovska Marija Ristovska
E-commerce Project Manager | Marketing and PR consultant and Strategist, E-commerce Macedonia Association
Marketeers maken nu advertentiecampagnes in uren, niet in weken
3 min. lezen

Marketeers maken nu advertentiecampagnes in uren, niet in weken

Marketeers hebben geen weken meer nodig om reclamecampagnes op te zetten. Een nieuw systeem dat AI-tools combineert, kan in uren in plaats van weken hoogwaardige advertenties produceren. Marketingexpert Liana Hakobyan testte de methodologie op campagnes voor Dior met opmerkelijke resultaten. Traditionele advertentiecreatie is kapot. Terwijl teams tijd verspillen aan eindeloze revisiecycli en goedkeuringsprocessen, zijn concurrenten […]

Liana Hakobyan Liana Hakobyan
Marketing Strategy Lead | TEDxSpeaker | Microsoft Startup Finalist, Iris.ai