Otvoreni internet polako se zatvara: Blokiraju čak i Google

Sve veći broj internet sajtova odlučuje da blokira pristup sadržaju za takozvane AI botove &ndash; automatizovane pretraživače koje koriste kompanije za ve&scaron;tačku inteligenciju da bi skidale tekstove i podatke sa interneta. Prema analizi firme BuiltWith, tokom 2025. broj sajtova koji su u svom robots.txt fajlu dodali bota GPTBot u &quot;blokiraj&quot; listu porastao je sa oko 3,3 miliona početkom jula na oko 5,6 miliona &ndash; &scaron;to je skok od gotovo 70 odsto. Slično je i sa ostalim poznatim AI crawler-ima: ClaudeBot (i prateći Claude‑SearchBot) i AppleBot sada su blokirani na oko 5,8 miliona sajtova, dok je to ranije bila manja brojka. Zanimljivo je da čak i GoogleBot, robot namenjen indeksiranju sajtova za pretraživač, sve če&scaron;će nailazi na odbijanje pristupa: prema BuiltWith-u, oko 18 miliona sajtova sada aktivno blokira i njega, &scaron;to znači da ti sajtovi mogu ostati van rezultata pretrage. Prema ekspertima iz industrije, ovaj rast blokiranja pokazuje da sve vi&scaron;e izdavača vidi AI botove ne kao korisne alate, već pre kao pretnju &ndash; bilo da je u pitanju za&scaron;tita autorskih prava, očuvanje originalnog sadržaja, ili sprečavanje preopterećenja servera. Ipak, problem je u tome &scaron;to brojni AI crawler-i ignori&scaron;u pravila iz robots.txt fajlova, odnosno nastavljaju da resetuju sadržaj i po sajtovima koji su ih eksplicitno zabranili. To znači da, i pored dobre volje vlasnika sajtova, masovno prikupljanje informacija za potrebe treniranja ve&scaron;tačke inteligencije postaje sve veći izazov i nagove&scaron;tava da borba za kontrolu nad digitalnim sadržajem tek počinje.

Otvoreni internet polako se zatvara: Blokiraju čak i Google

1 Komentari