Skip to content

Google je predložio uvođenje novog Internet standarda kada su u pitanju pravila vezana za  robots.txt fajlove. 

 

Ova pravila, uneta u Robots Exclusion Protocol (REP), predstavljaju nezvanični standard proteklih 25 godina.

 

Iako je REP usvojen od strane pretraživača, to još uvek nije službeno, što znači da je otvoreno za interpretaciju od strane programera. Dalje, on nikada nije ažuriran kako bi obuhvatio današnje slučajeve upotrebe.

 

Kako kažu u Google-u , ovo stvara izazov za vlasnike web stranica jer je protokol dvosmisleno napisan, te je otežavao ispravno pisanje pravila.

Nova pravila za robots.txt

Da bi eliminisao ovaj izazov, Google je dokumentovao kako se REP koristi na modernom web-u i dostavio ga na razmatranje internetskoj inženjerskoj operativnoj grupi (IETF).

 

Google objašnjava šta je uključeno u nacrt:

 

“Predloženi nacrt REP-a odražava preko 20 godina iskustva u stvarnom svetu oslanjanja na pravila robots.txt, koja se koriste i od strane Googlebot-a i drugih velikih pretraživača, kao i oko pola milijarde sajtova koji se oslanjaju na REP. Ove modifikovane kontrole daju izdavaču mogućnost da odluči šta bi želeo da bude indeksirano na njegovom sajtu i potencijalno prikazano zainteresovanim korisnicima. “

 

Nacrt ne menja nijedno od pravila uspostavljenih 1994. godine, samo je ažurirano za moderni web.

Neka od ažuriranih pravila uključuju:

 

  • Bilo koji URI protokol prenosa može da koristi robots.txt. Više nije ograničen na HTTP. Može se koristiti i za FTP ili CoAP.
  • Programeri moraju da parsiraju najmanje prvih 500 kibibajta datoteke txt.
  • Novo maksimalno vreme keširanja je 24 sata ili kontrolisano keširanja podataka ako je dostupno, što vlasnicima web stranica daje fleksibilnost da ažuriraju svoj txt kad god žele.
  • Kada txt datoteka postane nedostupna zbog grešaka servera, poznate nedozvoljene stranice se ne indeksiraju u razumno dugom vremenskom periodu.

 

Google je potpuno otvoren za povratne informacije o predloženom nacrtu i kaže da je posvećen tome da ga uradi na pravi način.

 

Tekst preuzet sa: www.searchenginejournal.com

Autor: Matt Southern

Made by Nebojša Radovanović – SEO Expert @Digitizer

Od 2017. godine. sarađujemo sa Digitizerom. Izuzetno precizna i profesionalna saradnja. Vidmo rezultate, a s obzirom na industriju u koju smo uključeni, puno toga zavisi od marketinga koji Digitizer radi. Rezultati se najbolje vide u količini ljudi koja se javi na intervju. Svaki put kada bih nešto sugerisao, Digitizer tim obavezno uvede izmene u prezentaciju. Naravno da ih preporučujem. Vec su preporučeni.

Filip Slijepcevic
Poente Tehcnical
Rating: 10

Od 2020. godine sarađujemo sa Digitizerom. Saradnja je divna i komunikacija opuštena: zahtev dočekaju za razumevanjem i ispunjavaju ekstremno brzo. Kao merljive rezultate vidimo povećan obim posla. Apsolutno i uvek imam slobodu da ovom timu sugerišem svoje mišljenje. Stalno ih preporučujem.

Lenka Jakimovska
Chicago Waffles
Rating: 10

DermaVille ordinacija sarađuje sa Digitizerom od 2023. godine i mislim da su veoma profesionalni. Sve pohvale. Od konkretnih rezultata vidimo više poseta ka našem sajtu. Da, rado preporučujemo Digitizer!

Danijela Ljubojevic
DermaVille
Rating: 10

Sa Digitizerom radimo od 2019. godine, dakle više od 5 godina. Izuzetno sam zadovoljan brzinom kojom se odgovara mojim nalozima poslatim Digitizer timu. Konkretan rezultat saradnje sa Digitizerom je da mi je web stranica uvek sređena i blagovremeno ažurirana. Sloboda sugerisanja rešenja i razmena mišljenja je od samog početka važila u mom odnosu sa Digitizerom i to je osnova naše saradnje koja postoji i danas posle 5 godina saradnje. Apsolutno bih preporučio drugim kompanijama usluge Digitizera, i to i činim uvek kada mi se ukaže prilika.

Dino Jusufovic
Jusufović & Partners
Rating: 10

S kompanijom Digitizer saradjujemo duže od 5 godina. Saradnja je vrlo pozitivna i produktivna, dobro organizovana i dovodi do postizanja uspeha. U našoj saradnji s Digitizerom vidimo konkretni napredak, posebno u povećanju broja pratilaca na društvenim mrežama, kvalitetnim objavama i korisnim sugestijama za bolju vidljivost naše kompanije. Imamo slobodu da izrazimo svoje mišljenje i sugestije, a Digitizer tim to veoma poštuje i uzima u obzir. Otvoreni su za preporuke i zajedničkim snagama radimo na unapredjenju saradnje. Vrlo rado preporučujemo kompaniju Digitizer. Digitizer tim je divan, saradljiv i uvek odgovori na sve naše zahteve u što kraćem roku.

Marijana Kuzmanovic
Sineks Medical
Rating: 10

Sa Digitizerom sarađujemo od, mislim, samog osnivanja firme Digitizer 2014. god. Divna, dugogodišnja saradnja u kojoj nam tim Digitizera uvek izlazi u susret da ispuni sve naše zahteve u rekordnom roku. Divne ideje i veoma ljubazni saradnici. Sarađujući s Digitizerom uspeli smo da naš sajt podignemo na viši nivo, na društvenim mrežama veči broj ljudi koji nas prati i veći broj klijenata u našim maloprodajnim objektima. Osećam slobodu da Digitizeru sugerišem svoje mišljenje oko saradnje i oni to uvažavaju. Digitizer je kompanija koju preporučujem svima koji žele ozbiljne saradnike. Predivan kreativan tim koji osluškuje vaše potrebe i želje i pretvori ih u stvarnost.

Mira Suhanski
Parfimerija Diva
Rating: 10

Sa Digitizerom sarađujemo od 2021. godine i pokazali su kao tim da su jako odgovorni, pouzdani i stručni. Pružili su nam profesionalan odnos od starta saradnje sve do danas. Rezultati su konkretni i merljivi. Preporučujem!

Slobodan Stamenkovic
Info Point
Rating: 10

Egrokorr trade i Digitizer sarađuju malo više od 5 god. Naše iskustvo je u jednoj reči: ODLICNO! Konkretne rezultate koje vidimo su mnogo veca posećenost sajta, samim tim i puno novih klijenata. Odavno ih preporučujem i nastaviću!

Marija Perovic
Egrokorr Trade
Rating: 10

Sarađujemo sa kompanijom Digitizer od 2015. godine. Prepoznali smo da su dostupni, ljubazni, spremni za saradnju. Konkretno smo najzadovoljniji sa uslugom Google ads – povećan nam broj poziva direktno sa website-a. Saradnja je korektna i jako smo zadovoljni. Preporučila bih i već preporučujem Digitizer svim kompanijama kojima trebaju njihove usluge.

Bojana Kralj
Message Advertising
Rating: 10

Sa Digitizerom sarađujemo od 2018. godine, od našeg osnivanja. Smatram dosadašnju saradnju savršenom, sa izuzetnim rezultatima. Digitizer rado i uvek preporučujem svim kompanijama.

Igor Vidovic
AirSoft Polygon
Rating: 10

Digitizer i Bianconerri oduvek sarađuju. Fenomalna komunikacija i saradnja, a vidimo rezutlate kao što bolje nalaženje i bolji pregled naše web stranice. Vrlo rado preporučujem usluge Digitizera svima.

Sanja Topic
Bianconeri - Sanja Topic
Rating: 10

Sarađujemo odlično duže od godinu dana i rezultat je povećanje klijenata. Rado preporučujem Digitizer kompanijama.

Olivera Radivojevic
Olja Beauty
Rating: 10

ompanija: Iskra sarađuje sa kompanijom Digitizer oko 3 godine. Naše dosadašnje iskustvo je besprekorno, preko svih očekivanja!!! Rezultati su više nego vidljivi. Apsolutno se dogovaramo oko svega, to je jedini način da se postignu vrhunski rezultati. Naravno, uvek ih preporučujemo.

Miljan Rajovic
Ordinacija Iskra M
Rating: 10

Sarađujemo od 2018. godine i koristimo njihovo znanje i iskustvo i uspeli smo da povećamo i vidljivost na mrežama i online prodaju. Uglavnom me razumeju. Uvek su dobra preporuka.

Jelena Simonovic
Baby Plaza
Rating: 10

Sign Up Now.

Follow.

Chat.

Contact Form.

    ime i Prezime*
    Email*
    Da li želite da ostavite broj mobilnog telefona?*
    Broj mobilnog telefona
    Kompanija/Organizacija*
    Website
    Šta je potrebno Vašoj kompaniji/organizaciji?
    Da li znate koje rezultate želite da postignete?*
    Koje rezultate želite da postignete?


      ime i Prezime*
      Email*
      Da li želite da ostavite broj mobilnog telefona?*
      Broj mobilnog telefona
      Kompanija/Organizacija*
      Website
      Kog datuma želite da zakažete sastanak?
      U koje vreme?


        ime i Prezime*
        Email*
        Da li želite da ostavite broj mobilnog telefona?*
        Broj mobilnog telefona
        Kompanija/Organizacija*
        Website
        Da li znate koje rezultate želite da postignete?*
        Koje rezultate želite da postignete?


        Mobile & Mail.

        Linkovi.