Robots.txt pentru WordPress
Zilele trecute am pornit cu un nou site, de pluginuri cs 1.6, si am tot stat sa caut o varianta buna de robots.txt pentru wordpress.
Ce este robots.txt?
Robots.txt este un fişier text ce are rolul de a informa spiderii( in special, spiderii de la google) ce anume au voie de indexeze şi ce nu.
Sa trecem la treaba!
In primul rand trebuie sa definim spiderii:
User-agent: *
dupa ce i-am definit, trebuie sa restrictionam accesul la anumite foldere de pe hostul site-ului. Nu avem nevoie ca google sa indexeze fisiere precum cele ale pluginurilor, cache-ul hostului sau alte fisiere de genul.
Asa ca vom restrictiona urmatoarele:
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Dupa cum stiti, Google penalizeaza foarte mult site-urile care au continut duplicat. Asa ca, pentru a nu avea probleme pe viitor cu acesta trebuie sa adaugam urmatoarele in robots.txt:
Disallow: /trackback
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Disallow: /tag/
Disallow: /page/
Disallow: */feed/
Daca avem imagini pe site-ul nostru, este recomandat sa adaugam urmatoarele linii:
Allow: /wp-content/uploads
# Google ImageUser-agent:
Googlebot-Image
Disallow:
Allow: /*
Daca am introdus adsense pe site e recomandat sa adaugam urmatoarele:
# Google AdSense
User-agent: Mediapartners-Google
*Disallow:
Allow: /*
Daca avem setat un sitemap pentru worpdress e recomandat sa-l trecem si in robots.txt. Vom “arata” spiderilor ca avem sitemap in felul urmator:
Sitemap: http://www.blog.chestiiutile.com/sitemap.xml
Punem toate de mai sus, una langa alta si obtinem robots.txt pentru wordpress !
Cei care au vizitat articolul "Robots.txt pentru Wordpress" au cautat:
- cum pun fisierul robots.txt
- cum trebuie sa arate robots
- exclude category robots txt
- cum fac robots.txt wordpress
- cum modific fisierul robots.txt la un site
- cs 1.6 wp [wordpress]
- cum sa setezi robots.txt
- robots txt wordpress
- cel mai bun robots wordpress
- robots+text+bun
7 Comentarii pentru “Robots.txt pentru WordPress“
- comentariul tau nu are legatura cu subiectul postarii;
- comentariul tau e de forma 'foarte bun articolul', 'bine de stiut' etc;
- folosesti cuvinte vulgare si jignesti/ provoci pe cineva;
- folosesti cuvant cheie in comentarii;
- iti dai cu parerea in acelasi articol, cu alt nume, doar ca sa aduni inca un link;
∗ Comentariile sunt moderate, asa ca ele nu vor fi vizibile imediat.
Mersi mult de tutorial….Si asa nu mai vreau sa-mi apara fisierele zip sau alte alea pe google.
Cum se poate seta ca un anume fisier dintr-un director blocat sa fie totusi indexat ?
de ex eu am :
User-agent: *
Disallow: /images/
dar am in acest director fisierul oferta.pdf pe care as vrea sa il indexeze totusi
/images/banners/oferta.pdf
Multumesc de ajutor.
Incearca sa pui dedesupt Allow /images/banners/oferta.pdf si vezi cum il vede google. Chiar nu m-am lovit de aceasta problema pana acum.
Ai putea totusi sa-i faci un redirect daca nu merge varianta de mai sus. Adica Redirect /old_dir/ http://www.yourdomain.com/new_dir/index.html
Foarte bun tutorialul, astea cu siguranta ar trebui puse
Ms mult.Ma-ti ajutat enorm.
Multumesc tare frumos, respect “Yamasha” mai uimit cu chestia Adsense si Images.google.ro! As avea rugamintea sa-mi explici un pic mai explicit daca se poate cum pot opri sa mise indexeze imaginile pe site?
# Google ImageUser-agent
Googlebot-Image
Disallow: /wp-content/uploads
Disallow: /*
E ok asa?
Eu zic ca ultima linie nu are ce cauta, ca altfel nu-ti mai indexeaza site-ul.E suficient disallow: /wp-content/uploads