19.04.2015.

Cemu sluzi ROBOT.TXT

Cemu sluzi robot.txt fajl i kako ga ubaciti?


Robot.txt fajl je obican tekstualni fajl koji koristimo da bi predali instrukcije robotima ( roboti su masine za pretragu) kako da pretrazuju i indeksiraju stranice na sajtu. Npr, google (Googlebot) ima svoje robote koji pretrazuju internet i indeksiraju sve web stranice na koje naidju.
Ovo je jedna od prvih stvari koje se rade u procesu SEO.



Da bi napravili jedan obican robot.txt fajl, treba vam samo Notepad, npr:


User-agent: *

Disallow:/

Ovo znaci da se svim zabranjuje svim retrazivacima da indexiraju bilo sta sa sajta.


Ja koristim za blogger :


ROBOT.TXT


User-agent: Googlebot

Disallow: 

User-agent: MSNBot

Disallow: 

User-agent: Slurp

Disallow: 

User-agent: *

Disallow: /

Ovo znaci da googlebot, msnbot, i slurp(yahoo) botovi imaju pristup mom sajtu/blogu.


Sitemap:


To su nacin za web mastere da informisu masine za pretragu o stranama na njihovim sajtovima koje su dostupne.

Obican dokument koji sluzi za bolje i obuhvatnije linkovanje svih linkova sa jednog domena.

Ja koristim za blogger /atom.xml?redirect=false&start-index=1&max-results=500



nprhttp://imevasedomene.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500


Kako da ubacim sve ovo na svoj blog?


Jednostavno je.


Odete u podesavanja:



klikni za uvecanje slike

I kopirate sve ovo:


ROBOT.TXT


User-agent: Googlebot

Disallow: 

User-agent: MSNBot

Disallow: 

User-agent: Slurp

Disallow: 

User-agent: *

Disallow: /

Sitemap: http://imedomene.blogspot.com/atom.xml?redirect=false&start-index=1&max-results=500

Sada vam ostaje da prijavite sajt na https://www.google.com/webmasters/tools/


Kliknete na 

Pojavice vam se ovako nesto:



klikni za uvecanje slike


Tu upisete adresu vaseg sajta/bloga npr http://imedomene.blogspot.com/


Kada ste to odradili, pojavice vam se ovako :



klikni za uvecanje slike


Sada jos samo trebate da dodate sitemap, kliknite ovde:


klikni za uvecanje slike


Ovde cete ubaciti atom.xml?redirect=false&start-index=1&max-results=500 

kliknuti na POSALJI SITEMAP i to je to.


Ostaje samo da cekate da vam google indexira sitemap i stranice.. 
Proveravajte svaki dan webmaster tools, jer google moze popisati i indexirati nekad za 24h, nekad i ranije, a nekad mu treba i par nedelja. Kod mene je to trajalo 3 dana.

Ovako to izgleda:

klikni za uvecanje slike


klikni za uvecanje slike




0 komentara:

Постави коментар