Sve veći broj internet sajtova odlučuje da blokira pristup sadržaju za takozvane AI botove – automatizovane pretraživače koje koriste kompanije za veštačku inteligenciju da bi skidale tekstove i podatke sa interneta. Prema analizi firme BuiltWith, tokom 2025. broj sajtova koji su u svom robots.txt fajlu dodali bota GPTBot u "blokiraj" listu porastao je sa oko 3,3 miliona početkom jula na oko 5,6 miliona – što je skok od gotovo 70 odsto. Slično je i sa ostalim poznatim AI crawler-ima: ClaudeBot (i prateći Claude‑SearchBot) i AppleBot sada su blokirani na oko 5,8 miliona sajtova, dok je to ranije bila manja brojka. Zanimljivo je da čak i GoogleBot, robot namenjen indeksiranju sajtova za pretraživač, sve češće nailazi na odbijanje pristupa: prema BuiltWith-u, oko 18 miliona sajtova sada aktivno blokira i njega, što znači da ti sajtovi mogu ostati van rezultata pretrage. Prema ekspertima iz industrije, ovaj rast blokiranja pokazuje da sve više izdavača vidi AI botove ne kao korisne alate, već pre kao pretnju – bilo da je u pitanju zaštita autorskih prava, očuvanje originalnog sadržaja, ili sprečavanje preopterećenja servera. Ipak, problem je u tome što brojni AI crawler-i ignorišu pravila iz robots.txt fajlova, odnosno nastavljaju da resetuju sadržaj i po sajtovima koji su ih eksplicitno zabranili. To znači da, i pored dobre volje vlasnika sajtova, masovno prikupljanje informacija za potrebe treniranja veštačke inteligencije postaje sve veći izazov i nagoveštava da borba za kontrolu nad digitalnim sadržajem tek počinje.
10.12.2025.
19:55
Otvoreni internet polako se zatvara: Blokiraju čak i Google
Internet sajtovi sve više blokiraju sadržaj za AI botove.
Izvor: B92
Podeli:
Vrati se na vest
1 Ostavite komentar
B92 na društvenim mrežama
Najnovije
Na današnji dan, 26. septembar
Danas je subota, 26. septembar 2026. godine. Ovo su istorijski događaji koji su kroz istoriju obeležili ovaj datum.
0:02
26.9.2026.
2 h
Tuhel upozorio Palmera: "Previše si propustio prilika"
Kol Palmer je morao da otkaže dolazak u reprezentaciju Engleske zbog povrede, a komentar na to je imao selektor Tomas Tuhel.
23:57
25.9.2026.
2 h
Rat – dan 1.674: Porastao broj stradalih u Kijevu; "Rat neće stati"; Putin najavio osvetu FOTO/VIDEO
Kremlj je saopštio da bi uskoro mogao da se održi trilateralni sastanak između SAD, Rusije i Ukrajine, na kojem bi se razgovaralo o naporima za okončanje četvoroipogodišnjeg sukoba u Ukrajini.
23:48
25.9.2026.
3 h
Počeo je Lejver kup – Evropa umalo savršena prvog dana, Alkaras samo u dublu
Tim Evrope poveo je sa 3-1 u Lejver kupu u londonskoj O2 areni posle prvog dana takmičenja.
23:46
25.9.2026.
3 h
S Partizanom nema šale! Rutinska pobeda crno-belih!; Penjaroja: "Naš cilj je da Partizan pobedi"
Košarkaši Partizana pobedili su Olimpiju iz Milana rezultatom 92:76 u 1. kolu Evrolige.
23:44
25.9.2026.
3 h