Sve veći broj internet sajtova odlučuje da blokira pristup sadržaju za takozvane AI botove – automatizovane pretraživače koje koriste kompanije za veštačku inteligenciju da bi skidale tekstove i podatke sa interneta. Prema analizi firme BuiltWith, tokom 2025. broj sajtova koji su u svom robots.txt fajlu dodali bota GPTBot u "blokiraj" listu porastao je sa oko 3,3 miliona početkom jula na oko 5,6 miliona – što je skok od gotovo 70 odsto. Slično je i sa ostalim poznatim AI crawler-ima: ClaudeBot (i prateći Claude‑SearchBot) i AppleBot sada su blokirani na oko 5,8 miliona sajtova, dok je to ranije bila manja brojka. Zanimljivo je da čak i GoogleBot, robot namenjen indeksiranju sajtova za pretraživač, sve češće nailazi na odbijanje pristupa: prema BuiltWith-u, oko 18 miliona sajtova sada aktivno blokira i njega, što znači da ti sajtovi mogu ostati van rezultata pretrage. Prema ekspertima iz industrije, ovaj rast blokiranja pokazuje da sve više izdavača vidi AI botove ne kao korisne alate, već pre kao pretnju – bilo da je u pitanju zaštita autorskih prava, očuvanje originalnog sadržaja, ili sprečavanje preopterećenja servera. Ipak, problem je u tome što brojni AI crawler-i ignorišu pravila iz robots.txt fajlova, odnosno nastavljaju da resetuju sadržaj i po sajtovima koji su ih eksplicitno zabranili. To znači da, i pored dobre volje vlasnika sajtova, masovno prikupljanje informacija za potrebe treniranja veštačke inteligencije postaje sve veći izazov i nagoveštava da borba za kontrolu nad digitalnim sadržajem tek počinje.
10.12.2025.
19:55
Otvoreni internet polako se zatvara: Blokiraju čak i Google
Internet sajtovi sve više blokiraju sadržaj za AI botove.
Izvor: B92
Podeli:
Vrati se na vest
1 Ostavite komentar
B92 na društvenim mrežama
Najnovije
Putin je rekao "ne"
Kremlj i dalje pokazuje nespremnost da učestvuje u konstruktivnim mirovnim pregovorima koji ne podrazumevaju ispunjavanje zahteva za potpunu predaju Ukrajine, uprkos pokušajima Kijeva da uspostavi pregovarački proces.
8:57
15.8.2026.
1 min
Czinger 21C Spyder: Hiperautomobil od 2,75 miliona dolara FOTO
Czinger je skinuo krov sa svog hiperautomobila 21C i predstavio novu verziju Spyder, ali ovo je samo jedna od brojnih izmena.
8:54
15.8.2026.
3 min
Trampa tuže jer naplaćuje objave 100.000 dolara
Fondacija za slobodu štampe tužila je Donalda Trampa jer Truth API pretplatnicima naplaćuje rani pristup državnim saopštenjima.
8:50
15.8.2026.
6 min
Prestanite da radite ove stvari koje deci stvaraju traume
Evo koje stvari roditelji treba da prepoznaju kod sebe i prestanu da ih praktikuju.
8:50
15.8.2026.
6 min
Terzić: "Ako ne bude problema, očekujte lepe vesti"
Selektor odbojkašica Srbije Zoran Terzić optimista je pred početak Evropskog prvenstva.
8:48
15.8.2026.
9 min