Cloudflare je postavio novi rok za industriju umjetne inteligencije kako bi odvojio web alate koji se koriste za tradicionalne pretrage, poput Google Pretraživanja, od onih koji se koriste za AI agente i obuku. Počevši od 15. rujna 2026., Cloudflare će prema zadanim postavkama blokirati “mješovite” alate s bilo kojih stranica koje sadrže oglase, objavila je tvrtka u srijedu.
To znači da će alati koji kombiniraju pretraživanje, korištenje agenata i obuku biti blokirani po zadanim postavkama, osim ako vlasnik stranice ne prilagodi postavke. Ove promjene u zadanim postavkama odnosit će se na nove Cloudflare korisnike, nove stranice koje postavljaju postojeći korisnici te sve postojeće besplatne korisnike, navodi tvrtka.
Ovaj potez mogao bi utjecati na to kako pružatelji modela umjetne inteligencije mogu pristupiti web sadržaju za obuku i obavljanje svojih usluga. Cloudflare ističe da većina vlasnika web stranica želi da njihov sadržaj bude otkriven putem pretraživanja, često i putem AI usluga, ali žele zaštitu protiv besplatnog davanja svog intelektualnog vlasništva.
Cloudflare posebno ističe “najveći pretraživač na svijetu” (jasno se misli na Google!) kao onog koji ima pristup oko “2x više informacija” od drugih AI tvrtki jer pretraživački div otežava korisnicima da ostanu otkriveni bez korištenja za AI. Google se u prošlosti protivio ovoj generalizaciji, ističući da pruža alat pod nazivom Google Extended koji omogućava vlasnicima stranica da se isključe iz korištenja svog sadržaja za obuku i AI proizvode i usluge poput Gemini Apps i Vertex API. Njegova upotreba ne utječe na uključivanje stranice u Google Pretraživanje.
„Sada kada većina prometa na internetu nije ljudska, moramo ići dalje i djelovati brže kako bi se stvorio održiv ekosustav“, rekao je suosnivač i izvršni direktor Cloudflare-a Matthew Prince prilikom najave, referirajući se na nedavni trenutak kada su roboti prvi put nadmašili ljudski promet online. Taj pomak nije se očekivao prije sljedeće godine.
„Cloudflareovi novi alati i partnerstva pružaju vlasnicima web stranica veću vidljivost i komercijalne mogućnosti te koriste AI tvrtkama koje imaju robote s jasnom i transparentnom namjerom. Nadamo se da će naše predložene promjene u zadanim postavkama potaknuti mješovite alate da odvoje pretraživanje od korištenja agenata i obuke“, rekao je Prince.
Dok Cloudflare nudi brojne proizvode za pomoć korisnicima da pokrenu vlastite AI sustave, tvrtka je također objavila niz alata kako bi izdavačima omogućila veću kontrolu nad njihovim sadržajem u eri AI. U posljednjim godinama, Cloudflare je pokrenuo alate za borbu protiv AI robota, uključujući tržište koje omogućava web stranicama da naplaćuju AI robotima za struganje, nazvano Pay Per Crawl.
Ovo se sada također razvija u “Pay Per Use”, rekla je tvrtka, što će omogućiti izdavačima da naplaćuju AI tvrtkama kada njihov sadržaj stvara vrijednost, a ne samo kada se preuzima.
Ova promjena također bi mogla pomoći u očuvanju propusnosti i računalnih resursa izdavača za pružatelje modela AI, budući da su podaci Cloudflare-a sugerirali da više od 50% prometa s AI robota troši na ponovno preuzimanje nepromijenjenih stranica.
Kako bi to postigli, Cloudflare prvotno surađuje s dva partnera, Ceramic.ai i You.com. Kada se izdavač uključi, isplaćuje se kada se njihov sadržaj pojavi u Ceramicovim AI rezultatima pretraživanja ili kada You.com pristupi dijelu njihovog premium sadržaja.
Ostale AI tvrtke mogu prilagoditi ovaj model prema tome kako rade, navodi Cloudflare.
